然而，赖雅年过六旬的身体险象环生。在婚后刚刚两个月，他就曾经半身麻痹。1958年，赖雅患上了背痛疾病，张爱玲不得不常常给他按摩，放松他的背部肌肉。为了赚钱，1962年，张爱玲只身到香港写作，当她途经台北时，又传来了赖雅中风的消息。
张爱玲说，自己很想赶去医院，握着赖雅的手对他说，她是不会离开他的。但她却没有回美国的足够路费。为了攒够钱，她再次回到了香港，在她给赖雅的回信里，我们看到的，是一个温柔而坚强的张爱玲：
亲爱的赖雅，甜蜜的：
你说我无止尽地延期是什么意思？我已经为了没希望的酬劳，好几个月来工作得像条狗……我很为你骄傲，找到这么好的公寓，而且价格这么低，多么惊叹你怎么做到的，我没有一刻不想它……请不要忧虑，让我完成正在做的事。事情对我已经够痛苦，如果你看到我过的生活就会了解我多么想念我们可爱的公寓。试着在以后的六个星期尽情享受它……吻你的耳朵，这些日子以来你都吃些什么？照顾你自己，我爱你。
她终于回来了，为了迎接张爱玲，赖雅甚至提早了一天到机场——他担心她生性糊涂，记错了日期。赖雅的身体越来越坏，为了照顾赖雅，张爱玲在自己的起居室里支起了一张军用床，一边写作翻译，一边护理。她尽可能使赖雅干净舒服。夜晚，当她较为清闲时，她还给赖雅念一些小报。赖雅便开玩笑，说她念的都是垃圾。爱玲也回敬说，他们就是垃圾的制造者。
此后的两年里，赖雅一直瘫痪在床，大小便失禁，张爱玲得不到丝毫的帮助，只能由自己照看他。在写给朋友的信里，张爱玲只字未提自己的困境。
1967年10月8日，赖雅去世，身边只有张爱玲。那一年，赖雅76岁，张爱玲47岁。
张爱玲对于赖雅，尽了自己最大的努力。即便如此，在她的继女眼中，张爱玲仍然面目可憎，后来有“张迷”拜访，她的反应是“你们都看不到张爱玲可憎的一面”。