这里保留有数百幢明清古民居，建筑和路面都用大理石铺砌，两条清泉穿村而过，99条高墙深巷使游客如置身迷宫。2000年，西递村被联合国教课文组织列为世界遗产名录。村头有一座明万历六年(公元1578年)建的三间四柱五楼的青石牌坊，峥嵘巍峨，结构精巧，是胡氏家族地位显赫的象征。

村中康熙年间建造的“履福堂”，陈设典雅，充满书香气息，厅堂题为“书诗经世文章，孝悌传为报本”、“读书好营商好效好便好，创业难守成难知难不难”的对联，显示了儒学向建筑的渗透。

村中另一古宅为“大夫第”，建于清康熙三十年(公元1691年)。原用于观景，楼额悬有“桃花源里人家”六个大字。有趣的是，近人多将此楼当作古装戏中小姐择婿“抛绣球”所在，现已成为西递村举办此项民俗活动的场所。“大夫第”门额下还有“作退一步想”的题字，语意双关，耐人寻味。