西遞座落于黃山南麓，距屯溪54公里。該村東西長700米，南北寬300米，居民三百餘戶，人口一千多。因村邊有水西流，而古時有遞送郵件的驛站，因而得名“西遞”，素有“桃花源裏人家”之稱。
據史料記載，西遞始祖爲唐昭宗李曄之子，因遭變亂，逃匿民間，改爲胡姓，繁衍生息，形成聚居村落。到明清年間，部份村民棄儒從商，因經商成功，便回鄉大興土木，建房、修祠、鋪路、架橋，把村建設得非常舒適，氣派堂皇。歷經數百年後，雖半數以上的古民居、祠堂、書院、牌坊已毀，但仍保留數百幢古民居，保留明清村落的基本面貌和特徵。
西遞村的民居是典型的徽派建築，依山傍水，在一片蔥綠之中，院落層層疊疊，馬頭牆高大奇偉，鱗次櫛比；家家黑瓦白牆，屏牆疊疊，飛簷翹角，青石門坊，十分古樸典雅。 　　
那裡的宅院為兩層建築，一樓是敞開式的客堂，客堂前方是一個長方天井（宅院中的露天空地），陽光、雨水可以直接透過天井進入庭院。客堂正面掛有中堂、對聯，兩側是書畫條屏。一個長型條几上擺放著古老的瓷瓶和自鳴鐘(有終生平靜之意)。廳上正中是八仙桌、太師椅，是一家人吃飯、待客之處。
客堂的兩側是臥室，在客堂和臥室之間有一道窄小的梯子通往樓上，上面的房子是兒女們的臥室。大戶人家更設有書齋、書院、祠堂和花園。
宅院大門用黑色大理石磨滑而成，門框上有磚雕、石雕。宅院白牆上的漏窗有竹梅、松石、花草等石雕的圖案，手工精緻。屋內窗戶及窗下皆有奇花異卉、飛禽走獸等精美的木雕，客堂兩側木頭柱子上方還有木雕的獅子等，栩栩如生，工藝卓絕。另絢麗的彩繪、璧畫等，都體現了中國古代藝術之精華，盡顯徽州三絕-石雕、磚雕和木雕的風采。