1964年罗星汉投靠缅甸政府，大力分化、瓦解土司部队，致使果敢武装在1965年纷纷投降。杨振声感到大势已去带残部南下泰国，土司政权自此结束。部队解散后，彭家声回到家中。
缅军入驻果敢后社会混乱，匪盗横行，加之又实行大民族主义，歧视果敢民族，所以人们对缅军非常反感。1965年7月，彭家声举起反政府大旗，成立"果敢人民革命军"带领30多个人上山开始打游击。这30多个人包括了现任掸邦特区副主席的杨忠卫。由于缅军入果时收缴了果敢境内的枪支，缺枪少弹，加上罗星汉又经常在政府军的配合下对之进行围剿，当时彭家声他们的条件的确非常艰苦。
果敢本地的势力几乎都是为了争夺贩卖鸦片的利益而存在，所以长期以来人们对本民族的武装也是极不信任的。但彭家声在此时起兵反抗缅甸政府，无论如何是符合民族大义的，因此他们大多还是给彭以支持，这才使得彭家声他们能够多次绝处逢生，队伍甚至还有扩大的趋势。
南下泰国的杨振声与早一年贩烟到此的杨振业生分结怨，后者率部北上，与彭家声部队会合，由杨振业任部队长，彭家声任副职。不久杨振声又派李正武、李文华带兵百余返回与之联合抗击政府军。乍一看来，反政府武装实力仿佛更强大了，其实不然，双李回果后与彭家声渐渐孤立了杨振业，而且矛盾俞演俞烈，最后终于发生了内讧。杨振业的堂弟杨振宗开枪打死了李正武，彭家声势力较弱不能与之抗衡，避于萨尔温江西岸。1966年年底杨振声的部队在泰国整训一年后回到果敢，带领这支部队的是其弟杨振勋，他此次回来主要是与彭家声合作，彭家声等亲自前往迎接，被其任命为旅长，彭进入该部队却受到其他人的冷遇和排挤。
