黑摩勒师徒闻言，全都大怒。黑摩勒暗付：我不寻这恶霸，他反寻我，真个不知死活！真要来寻晦气，先把寻剑之事放在一旁，索性代地方上除此一害，也是好事。青笠老人既是高人隐士，地方上有此恶霸，我代他除去，想必不会说我狂妄。心念才动，忽听左侧面江边吹笛之声十分嘹亮，响彻水云，应着江波，分外好听。同时瞥见一个白衣渔人独坐船头，手把短笛，正在吹奏。后一小童操舟打桨，如飞顺流而下，朝那两头尖的来船对面驶去。双方都快，晃眼隔近。来船好似闻得笛声，忽然停桨相待，只有二人缓缓摇动，与急流相抗。
铁牛见那渔人手中似是一枝玉笛，头戴一顶青斗笠，忙喊：“师父！这不是我们寻的那人么？”黑摩勒早看出那是一个二三十岁少年，又是中等身材，闻言低喝：“你少说话，也不看看他的年纪！”铁牛方想起渔人年貌不对，觉着冒失，面上一红，侧顾胡明，满脸惊疑之容，欲言又止，又听师父“噫”了一声，再往江中一看，两船只隔二三尺，笛声已止。渔人手持短笛，正朝对方发话。双方对说了几句，各自回舟。来船仍往下流驶去，船行更快，转眼驶入水天相接之处，不见踪迹。渔人并未回转原处，只把船一侧，朝南岸彭郎矶一面驶去。