在以段祺瑞為首的皖系軍閥控制北京政府的時候，在他們的身後是一直有著日本帝國主義的影子。日本支持皖系軍閥，目的是在中國攫取更大的利益，皖系軍閥則是通過賣國借款，從日本得到大量的金錢和武器。
徐樹錚曾經這樣描述過皖系和日本帝國主義的關係，北軍的權勢消長，是和日本寺內內閣利害相通的。在1920年的下半年，日本在海外的投資，有百分之九十都是在中國。中國國內的外國投資，日本佔了一半，尤其是在東北地區，日本的投資佔了外國投資總額的百分之七十。
在第一次世界大戰結束後，日本寺內正毅下臺後，由原敬接任日本內閣首相。西方的帝國主義騰出手來，開始反對日本獨霸中國的局面。迫於壓力，日本開始和歐美協商侵略方針，但是從根本上沒有改變對皖系的支持。
皖系和安福系都是日本一手扶植的，而吳佩孚則是堅決反對日本侵華和皖系賣國，雖然日本在直皖戰爭前夕裝模作樣的讓駐華使館“中立”，但是就憑著日本跟皖系的關係，就決定了日本不可能袖手旁觀。皖系邊防軍是用日本借款建立的，武器是日本供給的，訓練也是日本教官，最高軍事顧問也是日本人（坂西少將）。
在直皖戰爭的東路戰場，直系在楊村安置的大炮抵抗皖軍的時候，遭到在此地駐防的日軍橫加干涉，最終不得不後撤，使得防線出現漏洞。但是皖軍佔領楊村的時候，在此地進行的一系列軍事佈防日軍卻從不過問。
但是在直皖戰爭結束後，皖系以失敗告終，親日派被打倒。日本喪失了在中國扶植多年的代理人，日本害怕徐樹錚等人一旦伏法，那麼中國親日派的勢力會被徹底剷除，因此對安福系給予了極大的庇護。
徐樹錚、曾毓雋、段芝貴、朱深、姚國楨……等九人先後逃入日本使館尋求日本的庇護。根據各國的外交使團討論是否收容安福系罪犯的問題，英法美主張收容婦孺，其他不準在使館居住。但是日本和意大利以違反人道主義為理由，堅決反對。日本使館把使館內的中國籍的服務人員全部辭退，把徐樹錚等人藏在使館的護衛隊內，並且在使館內大加款待！
徐世昌在7月29日，發佈了通緝懲辦徐樹錚、曾毓雋等人的命令，北京外交使團跟日本使館進行交涉，要求引渡徐樹錚等人。但是日本駐華公使奉日本政府訓令，拒絕交出安福系的罪犯。之後外交部多次要求日本使館交出徐樹錚等人，都被日本使館拒絕了。
日本這一行徑，激起了中國人民的憤怒，在日本留學的三千多名留學生也致電日本政府表示抗議。在11月14日，日本公使館不顧中國人民的反對，掩護安福系的罪魁禍首徐樹錚逃到天津，然後轉移到上海公共租界匿居起來。
閱讀更多 歷史上的那些人和事 的文章
