家廟正廳面闊三開間，明間進深五柱四間，次間進深六柱。正廳明間懸宣統皇帝御賜的“承先睦族” 九龍 金匾一塊，以示劉家的榮耀。
在家廟的西側為劉氏義莊，建於1922年，在義莊天井內植有古桂兩株，故名“桂花廳”。
外園以荷池為中心，池廣約十畝，沿池點綴亭台樓閣，步移景異，頗具匠心。
荷池西岸較高的建築“東升閣”，是座西洋式的樓房，俗稱“小姐樓”。室內用雕花圓柱裝飾，壁爐取暖，窗的外層用百葉窗遮光，為法式建築風格，具有濃郁的異國情調。西岸另建有“凈香詩窟”，是主人與文人墨客吟詩酬唱之處。
荷池西岸長廊的壁間嵌有《紫藤花館藏帖》和《梅花仙館藏真》刻石四十五方，故名“碑刻長廊”。刻石書法真、草、隸、篆各體皆備，刻工精妙，字體遒勁，文采飛揚，與 寧海 《渤海藏珍》帖石並稱與世。為不使長廊有長而獃板之感，北以橋亭為端，中隔半圓亭，南以扇亭為終，並引接家廟。
荷池南岸主體建築“退修小榭”，臨池而建，設計精巧，是 江南 水榭建築的精品。此榭的溪曲廊連“養新德齋”，是主人的書房，因院內多植芭蕉，故又名“芭蕉廳”。荷池北岸外側為鷓鴣溪，沿溪疊有假山並植矮竹護堤，堤上建有六角亭。
荷池東岸，原建有“七十二鴛鴦樓”，抗戰時被毀，其南側有百年紫藤，似卧龍參天盤捲，枝葉茂密，伸達五曲橋頂，每到花季，即如紫色的彩帶懸繞於橋頂，美不勝收。
堤東端建有西式牌坊一座，門額上的“小蓮莊”三字為著名學者鄭孝胥所書。
