患病，好几次几乎性命不保，丙吉总是督促养育皇曾孙的乳母请医喂药，对皇曾孙恩惠很深。丙吉听说皇曾孙的祖母史良娣的母亲贞君和兄长史恭尚在，便用车将皇曾孙送给他们抚养。贞君年纪已老，见女儿的孙子如此孤苦无依，极为哀怜，便亲自抚养。
后汉武帝下诏，命掖庭抚养皇曾孙，并命宗正为其登记皇族属籍。当时，担任掖庭令的张贺曾经是原太子刘据的宾客，感念太子旧恩，哀怜皇曾孙，于是小心奉养，自己出钱供给其日用，教其读书。皇曾孙长大后，张贺想把自己的孙女嫁给他。此时汉昭帝刚刚举行完加冠礼，身高八尺二寸。张贺的弟弟张安世以右将军的身份辅政，听哥哥称赞皇曾孙，并想把女儿嫁给他，便生气地对哥哥说：“皇曾孙为卫太子的后代，能以一个平民的身份由国家养着，已经是很侥幸的事，不要再提嫁女之事了！”于是张贺作罢。当时，暴室啬夫许广汉也有一个女儿，于是张贺摆下酒席，请许广汉前来赴宴。饮到兴浓时，张贺对许广汉说：“皇曾孙为皇上近亲，将来最不济也是一个关内侯，你可将女儿嫁给她。”许广汉答应了。第二天，许广汉的妻子听说此事，非常生气。但许广汉主意已定，重新请人做媒，将女儿嫁给皇曾孙。张贺用自己的家财为皇曾孙备办婚事。从此，皇曾孙以许广汉兄弟和祖母娘家史家为依靠，又跟随东海人中翁学习《诗经》。皇曾孙聪明好学，但也喜爱游侠之事，斗鸡走狗，所以对下层社会的奸邪丑恶和官吏的好坏得失了解得十分清楚。皇曾孙多次周游往来于各皇陵所在，足迹遍及三辅地区，有一次，曾经在莲勺县盐池一带为人所困辱。他特别喜欢杜县、县一带地区，经常住在下杜。有时参加朝会，就住在长安尚冠里。
及至昌邑王刘贺被废黜之后，霍光与张安世及各位大臣商议重新确定皇位继承人，但一时未能决定。丙吉上书霍光说：“当年将军曾侍奉孝武皇帝崐，孝武皇帝临终前，将襁褓中的孤儿和整个国家都托付给了将军。孝昭皇帝又过早去世，没有留下后嗣，全国上下都非常忧愁恐惧，急切盼望听到新主继位。给孝昭皇帝发丧的时候，将军以大义为其选立后嗣，后发现所立之人不当，又以大义将其废黜，天下人无不敬服。如今，社稷、宗庙、百姓的命运全部系于将军的一举一动之中。我曾听百姓们议论，了解到民间对现在身为诸侯或居于高位的皇族成员，都没有好评。而奉遗诏养育在掖庭及其外曾祖史家的孝武皇帝曾孙刘病已，我以前在郡邸狱时，见他年纪幼小，如今已有十八九岁了，通晓儒家经术，很有才干，举止安详，性格平和。希望将军对刘病已的
