关于“秃驴”的来源，普遍有两种说法。

1、最早在某些地方，云游四方和尚都爱牵着驴子化缘，有极少部分玷污了出家人的名誉和尚游手好闲明化硬讨偷蒙拐骗，所以当地老百姓一看见这些牵着驴子的恶僧都远远的叫喊：快跑啊，秃头牵驴子来啦。时间久了秃驴就成了和尚的贬义称呼。

2、从前有座寺庙，寺里和尚仗势欺人，将寺庙周围的土地全霸为庙产。一秀才不满，便假装到寺里烧香，和尚见来者是位读书人，便向他索求一对联，秀才也不推辞，挥手写下：“香残日落了却凡心一点，炉中火尽须把意马牢拴。” 和尚很是得意，到后来才发现自己上当。原来此联之意为：上联中“香”去掉“日”，“凡”字去一“点”，和起来是个“秃”字。下联中的“炉”字去掉“火”，再拴上“马”是个“驴”字。但为时已晚，此联已在百姓中广为流传了。