，杜严词拒绝并撕毁支票，土肥原遂派特务监视，杜处境险恶，先遣家属去沪，仅留门人朱国祯在身边，后伺机逃出虎口，到了上海。
何键主湘时，杜心五回到长沙。何键请社创办国术馆，杜荐万籁声任馆长，另一门生李丽久任何部武术大队长。1938
年日军犯湘，杜携眷挚徒一行20
余人回到慈利白岩峪老家，仍要求门生天天练功不辍。
国民党政府迁重庆后，蒋介石想利用杜心五的声望和帮会势力，委以“中国抗日群众动员委员会”主任之职。杜乃于1941
年3
月离慈赴渝。在职一年，曾掩护中共党员和进步人士。翌年辞职回乡，在慈利县城附近饭甑山新建一座“斗米观”，贴上“始知养生主，曾无及人士”的对联，日与白云青松为邻，清风明月为友，探索气功养生之道，研究救死扶伤之术，自制千锤膏用以施治救人。
杜心五除武术，医药之外，尚有广泛的爱好。他是一位京剧爱好者。早在北京时，即与著名京剧家梅兰芳，程砚秋，马连良等有过深厚的交谊。程曾拜杜为师，并亲书一联相赠：“纵谈及上下古今，每提命移时，辄忘雪立;
所学穷三教九流，借闻道太晚，徒仰山高。”杜又工书法，曾书“动静无始，变化无端，虚虚实实，自然而然”十六字易勉万籁声。又为慈利文人吴恭亨书写墓联“埋我买山小结束，痛人弃地大糊涂”等，笔力苍劲，自成一格。其文学造诣亦深，1947
年为姚建邦题写"
意随流水俱远，心与白鹤同闲"
