祁氏澹生堂之藏散出后，部分書歸杭州趙氏小山堂，其實與祁氏還有相當的血緣關系。《藏書紀事詩》："回首東書舊草堂，深閨流涕對琳瑯。"說的就是這段與藏書有關的佳話。
小山堂為趙氏"二林"兄弟藏書樓名。兄趙昱（1689--1747）字功千，號谷林；弟趙信（1701--？）字辰垣，號意林。時人稱"二林"，兄弟皆好藏書，其母朱氏則是山陰澹生堂祁彪佳的外孫女，祁承<火嶪>的曾外孫女。當年"二林"之父趙汝旭完婚於山陰，婚禮就在祁氏東書堂中進行。時澹生堂藏書尚未散，趙汝旭心里頗欲得祁氏之藏，朱夫人泫然流涕曰："亦何忍為此言乎？"趙汝旭默然而止。蹉跎四十年后，趙昱過訪外家，已是亭圮園荒，只有當年東書堂的"曠亭"二字匾額沿棄存屋角，乃攜以歸，欲於園中構亭，仍題是額，以志景仰，惜因財力不足而未能建成。兄弟倆敬母之道亦頗染書香之氣，每得佳刻，即送母親年共賞，輪番遞進，以為嬉笑。連全祖望也感嘆道："是天倫之樂所稀也。"在他們母親故世后，二林又將近所得澹生堂之書，則貯而{去下加異的下部分}之，以示不忘母親的遺愛。
    趙氏兄弟爬梳書庫，繼以三十年之力，聲名遠揚，四方書賈接踵而至，故所得之書乏宋元舊槧。其間又與寧波范氏天一閣、揚州馬氏小玲瓏山館互相傳抄，尤其得到同郡繡谷亭吳氏的幫助。繡谷亭吳氏藏書不輕借人，但對趙氏兄弟卻當別論，實在也是又一種書緣。小山堂藏書之富，僅以地方志而言，除宋版開禧、寶慶《四明志》而外，明成化以前的各類方志即達千種以上。更難能的是，"二林"不像有些藏書家那樣，訪得善本，即秘不示人。雍正壬子，杭世駿發現了全祖望家中失竊的宋版寶慶《四明志》，大喜過望，馬上寫信給趙昱，請他設法籌款贖回該書，趙昱以重金購得是書后，馬上命人抄出副本送給全祖望。
    趙昱去世后，其書多歸揚州馬氏小玲瓏山館。

藏書印：
    1、小山堂
    2、小山堂書畫印
   

1.

　2.