心忌惮刘贺，元康二年，汉宣帝派使者赐给山阳太守张敞玺书说：“诏令山阳太守：要谨慎防备盗贼，注意往来过客，不要泄露这条诏令！”
张敞于是分条禀奏刘贺平日行为，说明他的废亡之状，说：“臣敞地节三年五月任职山阳，故昌邑王住在从前的宫中，在里面的奴婢一百八十三人，关闭大门，开小门，只有一个廉洁的差役领取钱物到街上采买，每天早上送一趟食物进去，此外不得出入。