刘贺曾经见到一只大白狗，脖子下面长得像人，还戴着方山冠，但没有尾巴，他就问龚遂是怎么回事。龚遂说：“这是上天的警告，意思是说大王身边的人都是戴着狗帽子的人，把他们赶走，国家就能保住；不赶走，国家就会灭亡。”后来，刘贺又听到有声音说“熊”，一看，果然有一只大熊出现，可身边的人却都没看到，他又去问龚遂。龚遂说：“熊是山野中的野兽，却进入了王宫，只有大王您看到了，这是上天在警告大王，恐怕王宫将会变得空虚，这是国家危亡的征兆啊！”刘贺仰天叹息说：“怎么这么多不祥之事呢？”龚遂叩头说：“我不敢隐瞒忠诚，多次向大王进言国家危亡的警告，可大王却不高兴。国家的存亡难道取决于我一句话吗？希望大王能好好反思自己。大王诵读《诗经》三百零五篇，其中关于人事的道理已经很完备，大王的行为符合《诗经》中的哪一篇呢？大王身为诸侯王，行为却比普通百姓还污浊，这样下去，想要国家长存很难，而亡国却很容易，希望大王能深刻反思。”后来，刘贺的坐席上出现了血污，他又问龚遂是怎么回事。龚遂大声喊道：“王宫很快就会空虚了！怪异的现象多次出现，血是阴忧的象征，大王应该敬畏谨慎，自我反省。”但刘贺终究没有改变自己的行为。
等到征召他的诏书到来时，夜里还没到一刻，刘贺就赶紧让人举着火把打开诏书。当天中午，刘贺就出发了，到定陶（今山东菏泽市定陶区）时，已经走了一百三十五里路，沿途跟随的人所骑的马一匹接一匹地累死。王吉上书劝谏刘贺说：“我听说，当年殷高宗守丧期间，三年不说话。如今大王因为丧事被征召，应该日夜哭泣悲哀才是，千万不要有其他举动。大将军霍光仁爱、勇敢、智慧、忠诚，天下人都知道。他侍奉孝武皇帝二十多年，从未有过过失。先帝把天下托付给他，让他辅佐年幼的君主，大将军就像抱着孩子一样尽心尽力地施政教化，使得天下安宁，即使是周公、伊尹也比不上他。如今皇帝驾崩，没有子嗣，大将军考虑可以继承宗庙的人，才拥立大王您，他的仁爱和厚道是无法衡量的。我希望大王能侍奉他、敬重他，政事都听从他的安排，大王只需垂衣拱手，南面称君就行了。希望大王能牢记这些。”
刘贺到了济阳（今河南兰考东北），派人寻找长鸣鸡，还在路上买了用竹子合制的手杖。经过宏农（今河南三门峡市灵宝市东北）时，他让大奴善用衣车载着女子。到湖县（今河南灵宝市西）时，使者责备刘贺的相安乐，安乐把这件事告诉了龚遂。龚遂进去问刘贺，刘贺说：“没有这回事。”龚遂说：“如果真没有，为什么要袒护善而毁掉自己的品行呢？请把善交给官吏处置，来洗刷大王的名声。”刘贺立刻揪住善，把他交给了卫士长。
刘贺到了霸上（今陕西西安市东），大鸿胪在郊外迎接，给他准备了皇帝乘坐的车驾。刘贺让寿成驾车，郎中令龚遂陪乘。清晨，他们到达广明东都门，龚遂说：“按照礼仪，奔丧的人看到国都就要哭泣。这里是长安的东郭门。”刘贺说：“我嗓子疼，哭不出来。”到了城门口，龚遂又提醒他，刘贺说：“城门和郭门还不一样嘛，而且快到未央宫东阙了。”龚遂说：“昌邑王的帷帐就在东阙外的驰道北边，还没到帷帐处，前面有南北通道，马再走几步就到了，大王应该下车，面向东阙，伏地痛哭，尽情表达哀伤之情后再停止。”刘贺说：“好。”到了之后，刘贺按照礼仪哭拜。
