西递镇村前的牌楼西递始建于宋朝的元祐（宋哲宗）年间，由于河水向西流经这个村庄，原来称为“西川”。因古有递送邮件的驿站，故而得名“西递”，素有“桃花源里人家”之称。 西递这个名字，之所以改称西递有两种说法，一种是：以前这里是交通要道，政府在此处设有驿站，用于传递公文和供来往官员暂时休息，驿站在古代又称为“递铺”，所以西川又称为“西递铺”。另一种是：中国大地上的河流都是向东去的，而西递周围的河水却是往西流的，“东水西递”，所以西川也就被称为西递了。

这个村子的兴衰都与胡家的命运紧密相连。西递始祖为唐昭宗李晔之子，因遭变乱，逃匿民间，改为胡姓。胡家从1465年起开始经商，他们经商成功，大兴土木，建房、修祠、铺路、架桥。在17世纪中叶，胡家中有人从经商转向官场所产生的影响使村庄得到发展。18世纪到19世纪，西递的繁荣达到最顶峰，当时村里有大约600家华丽的住宅。

西递村中一条主道贯穿东西，与其两侧各一条与之平行的街道一起穿过很多窄巷。在敬爱堂、履福堂、刺史牌楼等公共建筑之前有小广场。今天，主要旅游景点包括124幢保护完好的明清建筑。大多数民居都对公众开放。主要建筑有明万历六年（1578年）建的青石牌坊，清康熙三十年（1691年）建的大夫第等。

古黟桃花源——西递，位于安徽省南部，距黄山风景区仅供参考41公里。她建于北宋皇祜年间，已有930余年历史，村落平面呈船形，占地16公顷。

西递原名西川，又称西溪。整理开放有凌云阁、胡文光剌史牌坊、瑞玉庭、桃李园、东园、西园、大夫第、敬爱堂、履福堂、青云轩、膺福堂、笃敬堂、仰高堂、尚德堂、枕石小筑、仁堂、追慕堂等民居古建筑。