原指封建官吏退堂时打鼓，引申为中途想放弃、想退缩的意思。

戏曲中，退堂鼓与升堂鼓相对。

升堂鼓、退堂鼓是两种点。由堂鼓和小锣分奏合成，堂鼓为令。升堂鼓用于府县官员坐衙之前，退堂鼓用于公毕之后。升堂鼓，以三击为令，旧有大字：“奉王命”。退堂鼓以四击为令，大字是：“谢主隆恩”。这些大字只是为鼓令找个依据，亦好区别升、退堂。