逃到列人的慕容农也没闲着，开始游说前燕的旧部一起复兴大燕。
他首先拜访的是乌桓人鲁利。
得知昔日幼主来访，鲁利十分激动，拼着家里的老底做了一顿丰盛的饭菜，招待慕容农。
但慕容农意不在此，微笑着拒绝了。
鲁利有些窘迫，以为饭菜太过寒酸，对妻子说：“恶婆，郎君可是贵人，如今家里贫穷，拿不出像样的饮食怎么办？”
妻子的心思倒是很细腻，回道：“郎君雄才大志，无缘无故地到我们这破落小户，一定是有大事相告，绝不是为了吃一顿饭，你赶快出去好生侍候，看郎君有什么指示。”
鲁利恍然大悟，立即照办，慕容农也意识到这老两口对燕国并无二心，这才对鲁利说：“我打算在列人集结武装部队，然后复兴大燕国，你能不能依仗？”
鲁利顿时喜形于色：“无论生死，全凭郎君吩咐！”
慕容农满意地退出鲁利家人，再去拜访另一个乌桓人张骧，游说他：“我家大王已经起兵举事，丁零部落的翟斌一致拥戴，远近响应，现在看你的态度了。”
张骧再三叩头：“能再度侍奉旧主人，岂敢不尽死力！”
燕国遗民在前燕覆灭之后的处境虽不是太惨，但也算不上美丽，如今有难得的机会扭转局面，当然要拼一拼了。
没过多久，慕容农已招徕一大批同道中人，于是裹胁列人居民充当士卒，砍下桑树榆树的枝条，当作武器，把衣襟撕下来，做成军旗，正式起兵响应慕容垂。
紧接着屠各人毕聪和乌桓人刘大等，也都带着自己的队伍前来投奔，慕容农凭借三寸不烂之舌，竟已拥众近万人，为了提高部将的积极性，任命张骧为辅国将军，刘大为安远将军，鲁利为建威将军。
有着许多功名的诱惑，这一万人马战斗力奇强，很快就攻陷了馆陶，并俘获所有军事用品和辎重武器，接着慕容农又派人夺取牧场里的战马数千匹，加上新近归附的士卒，步骑兵竟达数万人。
张骧等人一致推举慕容农使持节，兼任黄河北军区司令长官、骠骑大将军。
慕容农深得其父真传，带兵很有一套，统御部下的将领，依照他们的才能，分别任用，上下严整，硬是把一批乌合之众，带出了正规军的模样，在当地攻克无数城池，而且军令严明，号令森严，秋毫无犯，男女老幼无不欢欣鼓舞。
因为慕容垂还没抵达，慕容农一时不敢对将士们进行过分地封爵赏官，前燕旧臣赵秋建议说：“军中如果没有奖励犒赏，官兵便不能战斗，今天前来投效的人，都是一些贪图建立一时的功劳、追求万世利益之辈，应该代表大王，行使职权，使国家中兴的基础得以扩大。”