前来投奔太平军的是一伙因李定国退兵后归路遭清军截断，而不得不散落在新会附近的明军残部，他们的领头人叫齐豪，队伍里的人又称他为“四哥”。说起来，这齐豪并非南方人，而是凤阳府人士，且还是来头颇大之人，和张献忠瓜葛不浅。
崇祯九年，张献忠率军攻破中都凤阳时，时年只有十八岁的齐豪因饿得活不下去，又见农民军势大，连大明皇帝的祖坟都给刨了，脑子一热便索性参加了农民军，其后便跟着张献忠的军队到处转战，做起了把脑袋系在裤腰带上只为求口饭吃的卖命勾当。因他年轻，又幼时学得几手拳脚功夫，故而这几年征战下来不仅没有送命，反而在军中渐渐出人头地起来。
崇祯十六年，张献忠攻占湖北后改武昌为京都，自称大西王，其部农民军也随之称为大西军，这年已经25岁的齐豪在大西军中也成了一名军官，手下管着几百号人，算是个不大不小的人物了。后来张献忠见李自成已占领北京，便决定入川建立属于他的基业，命令大西军向四川开进，身为大西军的一员，齐豪自然也跟着入川。
崇祯十七年八月，大西军进攻重庆，此役齐豪因冲锋在前，率先执杀明巡抚陈士奇立下大功，被张献忠破格提为身边亲军营将。大西军占领成都