汉子走上前，悄声问道：“您可是姓张吗？”张煌言道：“姓吴。”那人道：“不对，前些时日，我跟随朱子成到江上拜访大军，从邻近船上窥见到您的丰采，您就是张煌言大人。听说您率军进入大山，为何来到此处？准备去往何处？”张煌言知道难以再隐瞒，遂承认了身份。这人微笑道：“我姓金，旁边这位姓徐，我二人是朱子成的友人。昨日在市里见到您，就有所怀疑，今日幸而在此相见。”二人热情地邀请张煌言到家中藏匿，张煌言没有客气，与葛明、杨冠玉来到他的家中。
过了两日，安庆清军经过高河埠，当地士民畏之如虎，举家逃至村野躲避。张煌言、葛明、杨冠玉不得已，亦跟随出去避兵，来到金某、徐某的一位密友何姓人家。清军离开后，金某、徐某决定亲自护送张煌言。二人另雇一条运粮船，将张煌言、葛明、杨冠玉藏于舟中，由何某陪同，乘船由枞阳出江，渡黄湓，抵张家滩登岸。徐某之兄在此村中卖药，众人来到他家中。而金某、徐某另从安庆渡江，亦来到张家滩徐某的兄长家中。
众人商定好行进路线，由金某、徐某引路，穿过建德、祁门两山，奔向休宁。这条路崎岖难走，较霍山尤甚。张煌言不幸染上虐疾，只得扶病而行，头上津津汗如雨下，形容消瘦枯槁，几近丧命。途中多次昏倒在地，葛明、金某、徐某轮流背着他行走。靠着兴复大业信念支撑，张煌言硬挺过来。
东建地带高山绵延伸展，地势险峻，时常有小股山贼出没，在夜间劫掠行人。当地山民结伙手持兵器守住岭头，向过往客商勒索买路钱，实际上也是山贼。张煌言一行冒险走入深山中，所幸没有遇到山贼，路途倒也顺利。将要到达祁门时，江西义军陈九思率部屯驻朱桥，村中人逃散一空，商旅也裹足不前。见张煌言一行继续赶路，路人皆感到奇怪，纷纷上前纠缠询问。幸而向导是歙县人，打发走路人，众人才没有出事。张煌言估计再有两日即可抵达休宁，然后再乘船顺流而下，便可直达严陵。
众人尚未抵达休宁城，就传来前方有军队阻