刘敬劝皇上建都关中，皇上迟疑不定。左右大臣都是山东人，多劝皇上建都雒阳，说：“雒阳束面有成皋，西面有骰醒，背朝河面对雒，它的坚固足以依靠。”张良说：“雒阳虽有这样险固的地形，但面积小，不过几百里，土地不肥，四面受敌，这不是用武的地方。关中左有骰函，右为陇蜀，沃野千里，南面有巴蜀的丰饶，北面有胡地畜牧之利，三面险阻以固守，单开一面向东控制诸侯。诸侯安定，河、渭漕运天下物资，向西供给京师；诸侯有难，顺流而下，足可以转运。这便是所说的金城千里，天府之国。刘敬说得对。”于是皇上当天起驾，向西建都关中。
张良跟着入关，身体多病，炼气养生不食五谷，一年多闭门不出。
皇上想废太子，立戚夫人的儿子趟王如意。很多大臣争辩，没能改变皇上的决心。吕后害怕，不知怎么办。有人对吕后说：“留侯善于谋划，皇上信任他。”吕后便派建成侯吕泽劫住张良，说： “您多年做皇上的谋臣，现在皇上每天都打算换太子，您怎能高枕无忧?”张良说：“以前皇上多次在急困中，能有幸采用臣的计策；现在天下安定，因为偏爱而更换太子，骨肉之间，即使有我们一百人又有什么用?”吕泽坚持要求说：“给我出个主意。”张良说：“这难用口舌去争。想皇上不能招来的有四个人。四个人已经年老，都因为皇卜慢待士人，所以逃避山中，守义不做汉臣。但皇上尊敬这四个人。现在您果真能不惜金玉璧帛，让太子写信，谦辞安车，再让善辩者坚请，应当会来。来了以后就把他们作为贵客，时常带着入朝，让皇上看见，对太子是一个帮助。”于是吕后让吕泽派人带着太子的信，谦辞厚礼，迎这四人。四人到了，住在建成侯那裹。
汉十一年，黥布谋反，皇上有病，想让太子去攻打。四人商量说：“我们来是为了保住太子。太子率兵，事情危险了。”便劝建成侯说：“太子率兵，有功而地位不会提高，无功便从此遭祸。并且和太子一起出征的各将帅，都是和皇上平定天下的猛将，现在让太子率领他们，这无异于让羊率领狼，都不肯被使用，一定会没有战功。臣听说‘母亲受宠，所生之子也会受到抚爱’，现在戚夫人一夜侍奉皇上，趟王常在面前，皇上说‘到底不能让不肖的儿子位于爱子之上，，表明他一定会代替太子的地位的。您为什么不赶快请吕后找机会对皇上哭诉，说：‘黥布，天下的猛将，善于用兵，现在各将领都是以前和陛下同辈的人，现在派太子率领，这些人不能被使用，并且黥布听说后，便会击鼓西进了。皇上虽然有病，勉强乘坐辎车，躺着监督他们，各将领不敢不尽力。皇上虽然劳苦，勉强为妻儿打算一下。”’于是吕泽夜裹会见吕后。吕后找机会向皇上哭诉，都按四人的意思。皇上说： “我想过了，混小子本来不能派遣，你老子自己去吧。”于是皇上自己率军束征，群臣留守，都送到霸上。张良有病，勉强起身到曲邮，见到皇上说：“臣应随从，病得厉害。楚人强悍，希望皇上小心不要和楚争雄。”接着劝皇上让太子做将军监督关中之兵。皇上说“子房虽然生病，勉强躺着教导太子”。这时叔孙通已做了太傅，张良负责少傅工作。
汉十二年，皇上打败黥布回来，病得更加厉害，愈发想更换太子。张良劝谏不听，因病不上朝。叔孙太傅引古事说讲，以死为太子争位。皇上假装答应他，仍想换太子。设宴会时，摆酒，太子侍奉。四人跟着太子，年纪都八十多，头发眉毛雪白，衣冠不凡。皇上奇怪，问道： “这是干什么的?”四人上前答话，各说自己的姓名。皇上便吃惊地说： “我邀请您们，您们逃避我，现在您们为什么自己跟我儿子交游呢?”四人说：“陛下轻视士人爱骂人，我们为义不受辱，所以害怕而逃避。现在听说太子仁孝，恭敬爱惜士人，天下没有不伸着脖子愿为太子死的，所以我们前来。”皇上说：“有幸烦劳各位终于能来调教护卫太子。”
四人祝寿完毕，趋步离开。皇上目送他们，叫来戚夫人指给她看说：“我想换太子，这四人为他辅佐，羽翼已成，难动摇了。吕氏真的是你的主子。”戚夫人哭泣，皇上说： “给我跳楚舞，我给你唱楚歌。”唱道： “鸿鹄高飞，一冲千里。羽翼已成，横渡四海。横渡四海，又能怎样!便有弓箭，又有何用!”唱了几曲，戚夫人呜咽哭泣。皇上起身走开，撤酒。最终没有更换太子，这是张良招来这四人的功劳。
张良跟随皇卜攻代，出奇谋攻下马邑，到立萧相国，和皇上从容谈论天下事很多，不是讲天下所以兴亡的，所以不记录。张良于是声言：“家中世代做韩相，到韩亡，不惜万金财产，为韩向强秦报仇，天下震惊。现在凭三寸舌头做帝王的老师，封邑万户，位在列侯，这是平民的极至，对张良足够了。希望放弃人间之事，跟赤松子云游。”便学习道家之说，想修炼成仙。高帝去世，吕后认为张良有德，便强给他俸禄，说：“人生一世，像白驹过隙，为什么像这样使自己受苦!”张良不得已，勉强接受。六年后死。谧号文成侯。
起初张良在下邳桥上见到的给他书的老人，十三年后他随高帝经过济北，果然找到了谷城山下的黄石，拿回去珍重祭祀。等张良死后，一起葬了黄石。每次上坟和伏腊时都祭祀黄石。
儿子不疑继承侯位。孝文三年因不敬罪。被除国。
陈平，阳武户牖乡人。小时候家裹穷，喜欢读书，研究黄帝、老子的学问。有三十亩田。和哥哥陈伯住在一起。陈伯常种田，让陈平去游学。陈平为人高大漂亮，有人间陈平：“家裹穷吃什么这么胖呢?”他嫂子恨陈平不在家种田，说： “也是吃糠皮呗。有这样的小叔，不如没有!”陈伯听到后，赶走了他的妻子。
等陈垩长大，可以娶妻了，富人没人嫁给他，穷的速垩又嫌弃。很久以后，户胪富人退负有孙女，嫁了五次丈夫都死了，没人敢娶，速垩想娶她。邑中有大丧事，速平家裹穷去帮忙料理丧葬之事，早出晚归以多得报酬。张负在治丧处见到他，衹觉得他不凡，陈平也因故晚走。张负跟速王到他家，家住在背城墙的陋巷，用席当门，但门外有很多显贵者的车辆。张负回去，对儿子蛋仕说： “我想把孙女嫁给陈平。”张仲说：“陈平贫穷不做事，全县的人都笑话他的行事，为什么单把女儿嫁给他?”张负说：“像陈平这么一表人才难道会长期贫穷吗?”终于把孙女嫁给了他。因为陈干家穷，便借钱给他行聘，给他酒肉资助娶妻。张负告诫孙女说：“不要因为他穷，侍奉不小心。事奉哥哥陈伯要像事奉你父亲，事奉嫂子要像事奉你母亲。”陈平娶了张氏女，资用曰益丰富，交游更加广泛。
里中举行社祭，陈平做主持，分肉很平均。里中的父老说： “陈孺子这主持的真好!”陈平说：“唉，如果让陈平得以主持天下，也像这肉一样!”