后來(lái)因?yàn)榛矢ηf的房屋租期已滿，外婆和小舅父回到安橋頭老家，兩個(gè)外甥跟隨大舅父移居小皋埠。

小皋埠是大舅父的岳家。他的岳父名叫秦秋漁，是一個(gè)舉人，詩(shī)畫都做得好。四卷的《娛園詩(shī)存》，大部分是他的朋友們吟詠他的花園“娛園”的作品。娛園里長(zhǎng)滿了草，顯得荒涼。但比起周家的百草園，它也自有其奇妙的所在。院子里是一個(gè)不算大的水池子，池邊是一間單面開著門窗的房子，上面掛著匾額：“潭水山房”。兩兄弟覺(jué)得這構(gòu)造很有意思，因?yàn)檫@是家里所沒(méi)有的。

這里的孩子很多，大舅家有兒子佩紳、女兒珠，小舅家有四個(gè)女兒，琴、意、林和昭，琴與樟壽年齡相當(dāng)。表兄妹們平時(shí)見(jiàn)面機(jī)會(huì)并不多，現(xiàn)在可以經(jīng)常在一起游玩，自有許多樂(lè)趣。

娛園的主人是秦少漁，也就是大舅父的內(nèi)弟，孩子們都叫他“友舅舅”。他也喜歡畫畫，樟壽算得了知己，從此就不再摹寫繡像，專跟他學(xué)繪畫了。

秦少漁藏有很多小說(shuō)，多為石印鉛印。他本人看過(guò)后就隨手扔在一間小套房里，樟壽可以到那里自由翻看。不過(guò)因?yàn)槿拥脻M地都是，找起來(lái)比較費(fèi)事，六冊(cè)八冊(cè)一部的小說(shuō)，湊齊了很難。但樟壽很愿意把工夫用在這里。他從中得到不少益處。以前在家只見(jiàn)過(guò)普通的幾種小說(shuō)，如《三國(guó)演義》、《西游記》、《鏡花緣》、《封神榜》之類，在這里，他看到《紅樓夢(mèng)》和各種續(xù)《紅樓夢(mèng)》的書，還有各種各樣的俠義小說(shuō)。

游娛園、看小說(shuō)，自然是快樂(lè)的。但也有不方便的時(shí)候。年齡大一些的樟壽就能感覺(jué)得到，住的時(shí)間長(zhǎng)了，便是很近的親戚也有不耐煩的地方。大概是嫌他們兄弟像乞食者似的賴在這里，還有不知禮貌的孩子竟直接說(shuō)出來(lái)了。

無(wú)論是掛在臉上，還是脫口說(shuō)出，老二不解事，便不以為然，老大就敏銳地感受到寄人籬下的屈辱了。

他們?cè)谕庾×舜蠹s半年，第二年夏天，因?yàn)楦改赣X(jué)得孩子們已經(jīng)不可能因科場(chǎng)案受牽累，就把兩兄弟接回了家。

新臺(tái)門籠罩在一種哀痛、沒(méi)落的氛圍中，人人無(wú)精打采。大家心里都明白，周家從此必須習(xí)慣在屈辱和困苦中度日。

老大和老二繼續(xù)讀書。三兄弟都培養(yǎng)了買書的愛(ài)好。老大買的最多的還是畫譜，陸續(xù)買了《海上名人畫譜》、《點(diǎn)石齋叢畫》、《阜長(zhǎng)畫譜》、《椒石畫譜》、《百將圖》、《古今名人畫譜》、《天下名山圖詠》、《梅嶺百鳥畫譜》，還有四集的《芥子園畫譜》。

兄弟們對(duì)圖書極為珍愛(ài)，容不得折痕和污點(diǎn)。每逢晚上，便到了孩子們讀書用功的時(shí)候。老大知道節(jié)儉，為了省燈油，他就到母親的房里，把桌子擦得干干凈凈的，拿出他心愛(ài)的藏書來(lái)翻看。他看書之前一定要檢查一下手指是不是干凈，翻書的時(shí)候也是用指頭拿住書頁(yè)折縫上端有墨線的地方，絕對(duì)不用指甲在書上刮過(guò)去，使書的一角翹起來(lái)。幾個(gè)弟弟可以在一旁看，但不允許向書上摸，弄臟了他是要生氣的。因?yàn)槟鞠淙菀咨x，母親特意將床頭的一只紅皮箱騰出來(lái)給他存書。老大對(duì)書籍簡(jiǎn)直有潔癖，有時(shí)買了書回來(lái)，看到有一頁(yè)上字不清或者紙不夠白凈，他不嫌路遠(yuǎn)，拿了書去店里調(diào)換。有一次書店的老板被找得不耐煩了，諷刺他說(shuō)：“這書的紙比大姑娘的臉還白呢?！彼苌鷼猓瑥拇嗽僖膊蝗ツ羌視曩I書。

紹興有不少刻書鋪，工人們?cè)诶锩婵套挚虉D，老大喜歡進(jìn)去看這手藝，久而久之，自己也養(yǎng)成了動(dòng)手的習(xí)慣和精細(xì)的鑒賞力。他包書包得好，讓兩個(gè)兄弟欽佩不已，就是他從書坊工人那里學(xué)來(lái)的。后來(lái)因?yàn)樨?cái)力有限，兄弟們經(jīng)常買些舊書。一般舊書封面總是有些臟破，需要改換，或者拆開重新裝訂，這一套手藝?yán)洗笠埠芫ā?/p>

家庭的經(jīng)濟(jì)條件日益衰敗下去。安頓了祖父在杭州的生活，家底也基本上空了。身體衰弱的周伯宜，想到前途一片黑暗，就越發(fā)地沒(méi)有好脾氣。家人都看著他的臉色，不敢惹他生氣，尤其是母親，更加體貼父親的心情。甲午年又逢大考，母親及早把父親的考籃收起來(lái)，把考試用的作文范本《經(jīng)策統(tǒng)纂》也藏起來(lái)，她怕丈夫看了傷心。