受排挤，只得流落街头，乞食为生。因缘际会之下，执掌天下权柄。落难之时，幸得丐帮收留，才有后来帝业。他顾惜丐帮往日恩情，便派人四处寻访当年故人，以图回报。后来寻得两丐，这二人不愿为官。
皇恩浩荡，朝廷特赐二人木杆一对，以示尊荣。两根木杆，一根蓝色，一根黄色，顶端均有彩穗装饰。二人离京后，便将此物带回丐帮，奉为振帮之宝。后来二丐分道扬镳，尊持蓝杆者流入江南，被南方乞丐奉为蓝祖，持黄杆者留在北方，人称黄祖。直到永乐年间，丐帮出了一位杰出的人物，才将南北势力合为一家。此后十三行省均设分舵，总舵位于洞庭湖内一座隐秘的小岛上。
玉修罗说到整件事的前因后果，原来丐帮巴蜀分舵的人为聚敛钱财，暗中拐带人口，诱骗孩童。容貌秀丽的卖到青楼妓馆，资质平平的加以残害，博得人同情。心思之歹毒，手段之残忍，令人发指。
玉修罗道：“小僧原本要去西安府大慈恩寺会一位故人，途经白马镇时错过了宿头，只得在郊外一间破庙内露宿。我前脚刚走进那庙门，就听到远处传来嘈杂的脚步声。小僧慌忙躲到佛像后。过不得多时，出现了几个衣衫褴褛的乞丐，一共七个人。四个人背上扛着麻袋，两个举着火把，一个老丐走在后面。
那老丐便是柳万廷口中的杨兄弟。这老丐进庙后，让那四人把麻袋解开，原来里面装着四个少女。借着火光，我瞧那四名少女披头散发，满面泪痕，眼中多是恐惧之色。她们口中塞着麻核，一个个浑身发抖。
我原以为这群乞丐不知从哪里掳来少女要做那无耻勾当，但见老丐不时向门外张望，那几个手下也规规矩矩，便打消了这猜测，原来他在这里等人。
果不其然，四个黑衣蒙面人也走进庙来。双方寒暄了几句，就开始交易。一个黑衣人走到少女面前，伸手托着她的下巴，瞧了瞧。又伸手捏了捏她们的肩背。
这杨长老看他们似乎不大满意，笑着说：‘这些可都是黄花大闺女，诸位大可放心。’那黑衣人冷哼了