是将方世玉接到了自己的府上，严加督导。鄂尔多只所以这么做无外乎两个原因，一是方世玉确实是个难得的习武奇才，他有怜才之心；二是他与一般的习武之士一样，也希望自己的武功有个衣钵传人。在他的悉心调教之下，方世玉的武功不但高出同辈，更相继击败过不少江湖中有名的武林高手，是有名的一役是他与鄂尔多便服出游，遇上雁荡五虎拦路打劫，那一次鄂尔多根本没有出手，完全是方世玉大显神威，力拚雁荡五虎，并将之拿下，此役之后，方世玉便有了杭州小霸王之称。
与方世玉、方孝玉一起长大的还有四个同伴——洪熙官、胡德帝、李锦伦、白安福，此六人是称不离陀的铁哥们，他们一起跟苗显习武，一起玩耍，后来又在琼花书院一起读书识字，更一起与通天书院的人打架。
琼花书院与通天书院是杭州城里有名的两座书院，琼花书院是义学，是由方德牵头与城里的乡绅共同创办，收费并不高，前来读书的只是寻常百姓家的孩子，他们来这里就读只是为了将来能混口饭吃，通天书院则是江南有名的贵族学院，在那里读书的非富即贵，他们期望的是将来能鱼跃龙门，踏上仕途，光宗耀祖，再加上他们有荣亲王这佣隐藏在背后的林老板疏通各方渠道，两者根本不可同日而语，是以在多年的竞争中通天书院一直占尽了上风，但是现在这种情形却开始了逆转，转而对琼花书院有利，而这一切的起因都是因为一个方孝玉。
方孝玉非但是远近闻名的神童，十三岁就通过乡试、县试、府试、且位列三甲，成为了近年来江南最为年少的秀才，在他的带领下，琼花书院的学子们开始发愤，尤其是最近几年，他们的会考成绩屡次超过了通天书院，远远的将之抛在了身后，也就是因为这个原因，通天书院的不少富家子都开始转到了琼花书院，这是通天书院所不能容忍的，于是两家书院开始交恶，偶有斗殴，然而每次吃亏的都是通天书院，其原因就是因为方世玉实在是太能打了，通常都是一个打好几个，在最近一次斗殴中，他更是勇破纪录，他