与杨振宁订婚之后，翁帆睡了一个午觉，休息得非常好，“那几天我一直很忙，也很累，当时我觉得，如果继续这样子下去，我肯定会累坏的。我想我得休息一下，于是，我睡了午觉，睡得很沉。”跟杨振宁在一起后的翁帆，翁帆脸上又出现了小女孩般的笑容。无论是2004年12月24日平安夜注册结婚，还是之后去海南度蜜月，去北海旅游。翁帆还没有意识到大众舆论的恐怖，开心地戴着遮阳帽，笑眯眯地跟在这个弥补了自己第一段失败婚姻的老人身后。那时候的着装也是粉白、粉蓝，少女气十足的颜色，配着重新振作的容颜，倒也不显突兀。但两人关系曝光之后，民众对于名人隐私的疯狂追捧，带给翁帆和家人的压力不言而喻。

翁帆本人早年是会接受媒体采访的，她本人和她父亲，甚至她周围的朋友，都在努力借着每一个机会向媒体澄清，翁帆并没有那么多民众猜测的污浊心思。然而，这些澄清的阅读量，永远敌不过“翁帆寂寞发情诗”、“翁帆生的出小孩吗？”、“杨振宁死后遗产如何分配”等等世俗的文章。以至于最后只要杨振宁一出现，人们立即就会去寻觅翁帆的身影。“以前只看过照片，她长得很漂亮，还有书卷气。我想知道他们夫妻的幸福生活是怎么维系的。”南京大学数学系女生小张对媒体说的这句话，最能代表普通民众的心理。虽然杨振宁夫妇很乐意配合媒体，甚至“十指紧扣”这个词已经成为媒体形容他们夫妇的招牌名词。但翁帆的面容却越来越暗淡，不笑、黑脸、嘴角八字纹，都成为大众舆论恣意评判她的证据。

丈夫年迈带给翁帆的，除了对于结婚动机的恶意揣测，还有传统文化对于“无后为大”的嘲笑。2006年，翁帆30岁的时候，网络开始恶搞她怀孕生子谣言。网民像遇到了一个难得的发泄机会，将这个传言冠以“本年度最佳笑话”等字眼恶意散播。人们嘲笑的，无非是这对老夫少妻的床笫生活，以及对于翁帆老年生活隐含的恶意揣测。这样一个惊世骇俗的女人，最后老年生活没有孩子陪伴，多么“大快人心”。这种坏结局，才符合网民认为她做出“不要脸之事应得的惩罚”。杨振宁对此公开澄清“孩子问题，是任何一个婚姻都无法避免的问题……其中的原因实在太复杂,我也无法详细说……我想我们不宜要孩子,因为我一直在想,如果我不在了,翁帆一个人带着一个或者两个孩子,那将是很困难的事。”

翁帆这个人，逃避现实困难的方法，就是躲回学校。跟前夫离婚之后是选择再次攻读研究生，跟杨振宁再婚备受关注，又选择到清华大学建筑系深造博士学位。“师妹的老公都拿诺贝尔奖了，（我）表示压力很大。”2011年9月，水木清华网站一名网友就爆料，翁帆在清华大学建筑学院攻读博士学位。清华随后也证实，翁帆目前在清华大学建筑学院建筑历史专业攻读博士学位。正如翁帆的“师兄”发贴所流露出来的羡慕之情所暗示的那样：别人付出多少努力都未能如愿读清华博士，翁帆悄无声息的就成了清华园的博士生，还用说什么呢？

但读书并不能完全化解生活矛盾。翁帆的生活方式，在结婚前倾向西式：她喜欢喝咖啡，深夜还和朋友在网上聊天，早上起得很晚。婚后，她渐渐把自己的作息时间调整得和先生一样，早睡早起，很有规律。一般来说，他们每天早上8点准时起床，香港的家里没有请保姆，翁帆就自己动手准备两人的早餐：两杯牛奶、几片烤面包、两个煎蛋，简单而有营养。吃过早餐，杨振宁去学校上班。这几年，他的工作主要是利用自己的国际影响力，为香港中文大学和清华大学引进学术顶级人才、筹款发展高等学术研究工作。
 
先生上班去后，翁帆就在家里看书、修改论文。中午12点，夫妻俩吃一点简单的午餐，然后午休。下午两点多，夫妻二人各自工作。晚餐一般安排在6点半左右。在北京，家里有保姆帮着做。在香港，翁帆有时自己做，多数时间到外面吃。杨振宁很喜欢香港酒楼里的餐后甜品，翁帆则不敢多吃。这种平淡如水的生活，带给翁帆的是消耗还是滋养？我们不得而知。但在结婚十年之后，媒体对于“十指紧扣”的报道变少，反而出现关于怒目而视的报道。
 
2014年2月21日下午，杨振宁在澳门大学文化中心举行演讲。整场演讲中，都没有提及翁帆，而是多次提及自己与前妻的三个孩子。有记者指出，这种行为在西方文化中已经是属于藐视妻子。而且，夫妻两人在活动中从未有目光交接，连好不容易的一次说话，互相都很不耐烦。翁帆被偷拍到的照片，是满脸怒容，面部肌肉几乎有横向发展之嫌了。翁帆已到40，不惑之年带给她的种种，被媒体用“容颜沧桑”一笔带过。她与杨振宁出席中国美术馆捐赠仪式时，现场记者廖廖。传媒似乎已经对两人的恋爱和婚姻没有了太多关注，一个94岁的老人，一个40岁的妇人，结婚12年之后，是好是坏，都并不重要了。