武帝以后，方士的时运不大好了，但由于帝王迷信神仙和不死之药，方士的骗术仍然得逞于世。 　　宣帝时，信方士之言，有祠神、立仙人祠之事。大夫刘更生献秘方，无效，被治罪。张敞上疏有“斥远方士”之谏。 　　元帝初年，有天渊玉女、巨鹿神人、轑阳侯学仙等事，“纷纷复起”。 　　成帝即位，信匡衡之言，按阴阳五行说审查郊祀之制，清理了原来的祠宇，候神方士七十多人被免职回家。方士受了很大挫折。但成帝末年颇好鬼神，又因没有生子，于是有不少方士上书言方术，都得待诏，在长安和上林苑搞祠祭活动，花费很大。 　　谷永上书成帝，谏道：“诸背仁义之正道，不遵《五经》之法言，而盛称奇怪鬼神，广崇祭祀之方，求报无福之祠，及言世有仙人，服食不终之药”，就成仙上天，浮游蓬莱，长生不老，化铸黄金，“皆奸人惑众，挟左道，怀诈伪，以欺罔世主。听其言，洋洋满耳，若将可遇；求之，荡荡如系风捕影，终不可得。”他还指出，历来方士惑众，君主上当，事例颇多，足以为戒。成帝觉得此言有理。 　　西汉末年，博征方术士，派出侍祠使者，“尽复前世所常兴诸神祠官，凡七百余所，一岁三万七千祠云”。王莽掌权，除祭祀有不少花样外，又兴神仙事。他篡位之后，听信方士苏乐之言，在宫中建造八风台；又在殿上种五粱禾，说这是“黄帝谷仙之术”。到了他的末年，“自天地六宗以下至诸小鬼神，凡千七百所，用三牲鸟兽三千余种。后不能备，乃以鸡当鹜雁，犬当麋鹿。”他多次下诏，自言当成神仙，详见《汉书·王莽传》。