1925年10月，孙传芳自任为“五省联军总司令”，讨伐奉军。
奉军当时占领江南一些省份，横征暴敛，很不得民心。孙传芳发动讨奉后，连连获胜。驻在江苏的奉军二十师四十四旅兵败退到丹阳，旅长刘翼飞想出一张布告
，安定一下人心，但在仓皇撒逃之际，旅部的关防也了，没有大印，怎么出布告呢
?他忽然想起过去曾听说过用豆腐干刻假印的事，就唤来勤务兵，命他去买几块大一点，干一点的豆腐干，同的再买一盒印泥。勤务兵很快将这两样东西买来。刘翼飞立刻用刀在豆腐干上刻起二十四师十四旅的关防来。刻好后，又写了几张布告，将“联帅”孙传芳骂了一通，盖上了这豆腐干刻的关防，命勤分兵四处张帖。但这“豆腐关防”确实是“豆腐”，没等他们脚跟站稳，“联军”冲了上来，奉军又只得狼狈逃窜，于是留下了这个“豆腐关防”的笑话。