不多几日，换船来到萧山，招寻了半日，寻到一个山凹里，几间坏草屋，门上贴着白，敲门进去。权勿用穿着一身白，头上戴着高白夏布孝帽，问了来意，留宦成在后面一间屋里，开个稻草铺，晚间拿些牛肉、白酒，与他吃了。次早写了一封回书，向宦成道：“多谢你家老爷厚爱，但我热孝在身，不便出门。你回去，多多拜上你家二位老爷和杨老爷，厚礼权且收下，再过二十多天我家老太太百日满过，我定到老爷们府上来会。管家，实是多慢了你，这两分银子，权且为酒资。”将一个小纸包递与宦成，宦成接了道：“多谢权老爷。到那日，权老爷是必到府里来，免得小的主人盼望。”权勿用道：“这个自然。”送了宦成出门。
宦成依旧搭船，带了书子，回湖州回复两公子。两公子不胜怅怅，因把书房后一个大轩敞不过的亭子上换了一匾，匾上写作“潜亭”，以示等权潜斋来住的意思，就把杨执中留在亭后一间房里住。杨执中老年痰火疾，夜里要人作伴，把第二个蠢儿子老六叫了来同住，每晚一醉，是不消说。
将及一月，杨执中又写了一个字去催权勿用，权勿用见了这字，收拾搭船来湖州。在城外上了岸，衣服也不换一件，左手掮着个被套，右手把个大布袖子晃荡晃荡，在街上脚高步低的撞。撞过了城门外的吊桥，那路上却挤，他也不知道出城该走左手，进城该走右手，方不碍路。他一味横着膀子乱摇，恰好有个乡里人在城里卖完了柴出来，肩头上横掮着一根尖扁担，对面一头撞将去，将他的个高孝帽子横挑在扁担尖上。乡里人低着头走，也不知道，掮着去了。他吃了一惊，摸摸头上，不见了孝帽子。望见在那人扁担上，他就把手乱招，口里喊道：“那是我的帽子！”乡里人走的快，又听不见。他本来不会走城里的路，这时着了急，七首八脚的乱跑，眼睛又不看着前面，跑了一箭多路，一头撞到一顶轿子上，把那轿子里的官几乎撞了跌下来。那官大怒，问是甚么人，叫前面两个夜役，一条链子锁起来。他又不服气，向着官指手画脚的乱吵。那官落下轿子，要将他审问，夜役喝着叫他跪，他睁着眼不肯跪。