虞氏旧宅坐北朝南偏东22度，现存主体建筑共五进，通面宽59米，通进深94米，占地面积5546平方米，建筑面积5670平方米。前三进，为传统的木结构建筑，由大门三间、厅堂九间二弄、后楼九间二弄、左右厢房各两间等构成。后二进为西洋式建筑，每进九间二弄，以新古典主义风格为主。前后两部分建筑由一条长59米，宽3.6米的通道相隔，形成相对独立的两个整体。建筑布局以一条中轴线贯穿始终，左右对称，错落有序，层次分明，形分气连，过渡自然。

前三进承中国传统建筑风格，大门前临河立照壁（已毁）。第一进牌式门楼，明间大门，左右次间门房；正立面小八字磨砖结构砖雕额枋，上镌“天伦乐叙”四字；进深单坡二架，单步梁上作船篷轩，梁枋和牛腿雕刻凤鸟松枝、人物故事；后檐柱安装玻璃格扇门；外墙连接东、西两侧厢楼山墙。第二进厅堂，由正厅和东西夹楼九间二廊组成，面宽44.79米，进深10.92米；正厅三开间，正中原悬挂“天叙堂”三字大匾，取天伦乐叙之意，另外两旁悬挂的还有黎元洪、蒋介石、于佑任等政要显达赠送的“乐善好施”“输财保国”等匾额；明间梁架九檩六柱抬梁式，次间九檩七柱抬梁穿斗混合式，为重檐高平屋复式屋顶，使外观成重檐式结构；前廊作船篷轩；后内廊楼层辟走马楼，将二侧楼面连成一体；楼梯设两侧通廊，前老檐柱装一列格扇门，后金柱安屏风门，梁枋、牛腿、雀替、门袱上均有人物故事、凤戏牡丹，鹿衔灵芝、梅兰竹菊、狮子滚球等题材的雕刻，渲染出吉祥如意、荣华富贵的浓郁民族特色。第三进后楼九间二廊，内部结构为抬梁穿斗式；前廊方形廊柱和二进通廊架设的天桥为钢筋混凝土结构，檐柱用砖混材料包砌成方柱，柱头堆塑希腊科林斯式花纹；正立面明显经过后期改造，具有浓郁的西式风格。