钱穆先生一生结了三次婚。在此前，钱穆曾有一未婚妻。离钱十外宅镇有一有名乡村医生姓沈，书香世钱十分敬佩，主动将己女儿许配给钱穆。钱穆在南京钟英中的那年暑假，忽了伤寒症，情况十分危急，一人无计施。沈翁听女婿病重的消息，忙其他病人说，“我必先至婿”。经他次细诊治，才钱穆从死亡线拉了回。不幸的是，未婚妻不幸因病早夭，门婚便结束了。
1917年秋，在长兄钱声一的主持，钱穆一次结婚。婚夫妇便住在素书堂东边一间老屋。1928年，钱穆遭受了一生中最的打击，夏秋际，原配夫人邹氏及新生婴儿相继世。他的长兄钱声一先生赶回帮助料理，因劳伤度，旧病突，不幸病逝。两月内，连遭三丧。长兄与他感情最厚，他的名字穆便是长兄取的。长兄世年仅四十，遗妻子及两子两女。长子十六岁，跟着钱穆在苏州中读高一，即著名的科钱伟长。
连失三位亲人，钱穆的打击是极重，在《先秦诸子系年·跋》中，钱穆写：“儿殇妻殁，兄亦继亡，百日内，哭骨痛者三焉。椎碎骨，几无人趣。”
一任妻子世，朋友金松岑处他张罗。金松岑曾是《孽海花》一书最先草人，德高望众，是钱穆最敬佩的前辈忘年，曾先两次钱穆做红娘。一次他介绍的是他的侄女，号称东吴校花，两人曾通几封信，见面，方坦言：钱先生做老师很合适，做丈夫却不合适。金松岑又钱穆推荐给己的一女弟子，女弟子回了一信：“钱君生肖属羊，彼属虎。羊入虎口，不宜婚配。”虽媒未做，钱穆金松岑是十分感激，所二次结婚，仍请他做了介绍人，算是圆了他一红娘梦。
1929年春，钱穆与张一贯结婚，婚有三子一女。张一贯曾在校长。婚二年，钱穆身燕任教，等北工稳定才接妻子北平团聚。华北告急，钱穆身随北南迁，1939年夏钱穆回苏州侍母，张一贯才携子女北平回苏州团聚。一年钱穆又身返校，从此辗转方各。他是有名的顾问不顾的人，一治，与人聚少离。钱穆1949年离陆，三子一女是由张一贯带。
钱穆赴港，继配张氏与诸子女皆留在陆。钱穆独居无侣，生活维艰。由有人照顾，生活缺乏规律，致使经常胃病。
1952年4月16日，钱穆应朱桦邀请，台湾“联合国同志”演讲，活动借淡江文理院新落但尚未验收的“惊声堂”举办，聚集四百余人聆听钱穆关唐宋史的法。演讲完毕，在答问际，讲台前的屋顶突掉水泥块，一排的贵宾听众、活动主持人及钱穆均遭波及，人受伤，应邀听演说的立委柴春霖重伤场死亡。意外生，钱穆头部遭石块重击昏厥，险遭掉落的碎石活埋，众人将他从石堆中救，送台北中医院急救，幸无命危险。蒋经国、张群、何应钦等人闻讯，立即赶赴探望。身受重伤、不便行动且须治疗，钱穆赴台中存德巷养病四月，直1952年八月才返港。
讲堂塌陷意外却启钱穆的另一场人生意外，养病期间，任职台中师范院图书馆的新亚生胡琦，因与钱有师生关系，每午图书馆工结束便护侍，晚饭离，星期则陪他公园散步，并陪同钱穆台中各散步、旅游，协助钱穆搜集藏书研究，随着相互了解的加深，两人渐生感情，日共结连理埋子。
胡琦身名门，江西南昌人，父亲是国民政府期的江西省主席胡凤，与钱穆本是旧识，1950年由港赴台任国策顾问；兄长胡琼曾担任台湾省公路局长。胡琦历史与教育别有研究，日曾在文化任教，文笔颇佳，钱穆晚年因眼疾无法专著述，皆由胡琦代整理付印才顺利版。
胡琦曾说，两人间并非浪漫的爱情，因景仰钱穆人格养，愿意委身嫁，照料不胃疾困扰的钱穆。
一九五四年师范毕业，胡琦重回香港，两人经常相见。一次钱穆胃病复，久治不愈，了便照顾，钱穆向求婚，胡琦答应了。
1956年春，62岁的钱穆与比他35岁的胡琦在香港结婚，两人在九龙亚皆老街更生俱乐部举行简单的婚礼，婚礼仅邀新亚同眷属十余人参加。新婚洞房是在九龙钻石山一贫民窟租的一套两室一厅。虽条件简陋，钱穆却十分高兴，亲撰写了一副联：“劲草不风偃，枯桐欣有凤仪。”
婚钱穆与胡琦仍暂住九龙钻石山，虽不富裕，但生活饶富情趣，夫妇俩每必偕手散步。
钱穆与胡琦缔婚，始有安定生活。胡琦钱穆的居饮食是照料体贴入微。伉俪情深，老弥坚，令人赞叹。乃至武侠说金庸在《神雕侠侣》最新修订版的记中，专门提了钱胡的段“师生恋”，指他的结合曾经受某些香港文人的批判，但是他却亲眼见钱穆夫妇婚幸福的生活，他深敬佩。
胡琦曾回忆与钱穆的婚姻生活：
我钻石山的那，仅有20余平米，就养了近百盆花草，摆满在窗框柜子书桌茶几阳台。他栽花赏花代替一部分书房运动。他永远保持着乐观情，使庭中朝气充沛。他喜欢接近，我在香港，先两望月，观海。了空闲，他喜欢香港山顶海落日，夜景，或是九龙乡村漫游。他一年四季晴冷暖的变化，觉意味无穷。他喜欢饮午茶，喜欢围棋。但不喜欢人弈，他嫌那费伤神，所更喜欢摆棋谱。在我觉情沉闷，他常说，我替你摆一盘棋吧。偶夫妻，他说：有此，胜，败，不伤神。
我最爱听他吹箫。我住在九龙沙田的那一段日子，每逢有月亮的晚，我喜欢关掉中所有的灯，让月光照进我整条的长廊，我盘膝坐在廊，静听他在月光吹箫，四周寂静，听箫声在空中回荡，令人尘念顿消，满舒畅。……迁台湾，他的牙齿全部拔光，装了假牙就有兴致再吹箫了。
钱穆先生晚年著述甚，包括：《中国思史》、《中国思通俗讲话》、《人生十论》、《朱子新案》、《双溪独语》、《宋代理三书随劄》、《晚盲言》等。钱穆先生晚年所有的果，与次婚姻有极的关系。
钱穆弟子何泽恒说：“凡素书楼的人，无不承认钱师母宾四师的贡献。确切说，有师母，便有宾四师的晚年。”
钱穆己在写给幼女钱辉的信中表达了夫人襄助照料功的感激：“我此数年，双目失明，但写稿，由你母先誊正再改定。若非，我此两年亦不再写此许稿。”73岁病，他更加快了写书的计划，1971年花了7年间完巨著《朱子新案》。此书是他晚年的代表。国际汉批评杨联升读了该书，赞叹不止，说钱穆治中国术思史，“博精深，举世无其右者”。
钱穆完全目盲，夫人就帮他查阅旧籍，引述语。文章写，又请夫人诵读，口授订正。他的最一部著《晚盲言》就是诞生的。钱先生晚年的最一篇文章，是临终前三月口授，由夫人记录整理的，正印证了刚结婚，钱穆胡琦所说：“不希望是一懂管理务的主妇，希望做一懂他、了解他的知己。”