漢武帝非常喜歡方士，並讓這些人去尋找長生不老的神仙藥。東方朔對方術之士特別反感，但在他們受寵時又本便直接向皇帝進諫，於是，他就用另一種方式向漢武帝進言說：“陛下讓人找的都是地上產的藥，這些藥是不能使人長生不老的，只有天上的'藥才能使人長生不老。”
漢武帝問：“誰能上天呢？你能上天取來藥嗎？若能取來，我重賞你。”東方朔說：“我可以上天取藥。”漢武帝知道東方朔是在說假話，就一再追問，並讓東方朔立即上天取藥。
東方朔馬上告辭，走出殿堂大門後又很快返回來說：“我現在一人上天，好象是在跟您說假話，希望陛下能派一人與我同行，以證實我的真假。”漢武帝於是就派遣一名方士與東方朔同行。並約定三十天後返回。東方朔出了朝庭大門後，每天都到各王侯家輪流飲酒，期限快到了，他還沒有上天的意思，隨行的方士不斷地催促他。東方朔說：“神仙鬼怪的事很難預言，不久就會有神仙來接我了。”
有一天，方士白天一直在睡覺，東方朔突然弄醒他，對他說：“我喊你好半天你都不答應，我剛從天上下來。”方士大吃一驚，把這一切詳細地報告給漢武帝。漢武帝認爲東方朔竟敢當面欺騙他，遂下令把東方朔投入監獄。東方朔一邊哭一邊說：“我在傾刻之間幾乎要死兩次！”漢武帝很奇怪，就問東方朔，到底是怎麼回事？東方朔回答說：“玉皇大帝問我天底下的老百姓靠什麼穿衣服？我說：‘靠蟲子。’玉皇大帝又問：‘蟲子象什麼？’我回答說：‘蟲子嘴毛乎乎的象馬，顏色黃乎乎的象虎。’天神大怒，認爲我說假話。便派使臣到人間探問，使臣回來報告天神：‘有這種蟲子，名字叫蠶。’於是，天神放了我，如今您如果認爲我是在欺騙你，希望能派人上天查問。”漢武帝聽後大爲吃驚，說：“好，齊人狡詐，你原來是想讓我不再重用方術之士呀！”從此漢武帝罷掉諸方士，不再重用他們了。
