盗贼果然平息。
永乐二十年，公元1422年，朱棣进行第三次北征，杨荣与金幼孜再次随行，明军无功而返。
朱棣为了鼓舞士气，大开庆功宴会，有功无过者坐前列，食上肴，杨荣与金幼孜被特命坐在前列。
次年，朱棣进行第四次亲征。
有关军务皆让杨荣参与，无论白天还是晚上，朱棣经常召见杨荣，并且亲昵地称之为“杨学士”而不直呼其名。
永乐二十二年，公元1424年，朱棣开始了第五次北征。
明军到达开平时，朱棣做梦，梦见一位天神向他说：“上帝好生如是者，再此何祥也。”当下便有些犹豫。
杨荣乘机加以劝谏：“此举固在除暴安民。然火炎昆冈，玉石俱毁，惟陛下留意。”
朱棣领悟了杨荣的意思，便说：“卿言合朕意，岂以一人有罪，罚及无辜？”当即下令杨荣等人草敕，诏谕各部落人等，罪止阿鲁台一人，余皆不问。同时，又命令军士们收拾死于兵火的遗骸，葬为丛冢，朱棣亲自撰写了祭文。
明朝大军进至翠云屯时，仍未发现阿鲁台踪影，在杨荣等人的劝说下，朱棣决定班师回朝。
同年七月十八日，朱棣在回师途中病