西溪南村建于晚唐，盛行于明清至五代、宋代。西溪南的吴姓是大姓。村民以农业为基础，发展商业，复兴儒学，并因儒学而成为官吏。商人们的足迹遍布扬州、南京、杭州和淮河。盐商为主要职业，茶叶、木材、典当等为兼职行业。这里出了很多高官，可谓“满朝朱紫贵，江淮金银山”。在西溪南部古村落遗址中，当蜀祠堂、古宅亭、绿环亭、国家公园等历史悠久，具有较高的文化品位和价值。

西溪南村的村落结构总体呈东西走向，北临南。它像棋盘图案，呈不规则的矩形。街如经，巷如纬，东西贯通，南北畅通。村子的干线是陇、陇、雷三大河系。

村子里人过着简单安逸的生活，喝着村口清澈的溪水和吃着自家种的蔬菜。村里绿树成荫，溪水环绕。从村里眺望远处，山峦连绵起伏，似风景绝美的徽州山水画。西溪南村有丰富的水资源，滋养着万物。难怪在古时候，这个小镇是徽商的聚集地，被誉为“歙邑首富”，是古代徽州最为富裕的地方。

穿过村首茂密的水口森林，从纵横交错的小径进入村子，如果没有人领路，你很可能在西溪南部的街道和小巷中迷路。路边的房子是敞开的，有些甚至无人看管，每个家庭都可以放心地出去工作，房子前面的田里还种了各种各样的水果和蔬菜。

吴姓是这里的大姓。人们在本地结成纽带，代代相传。吴家在扬州从事盐业、金陵开设当铺、运河沿线米布贸易。他们发家致富后，又把财富转回西溪南村，兴修祠堂，兴办学校，并邀请名士吟诗作对。

然而，太平天国的战争灾难使繁荣的村落走向衰落。大规模的建筑和花园被摧毁，许多有名的花园和建筑物只留下一堆废墟。如今，仅10多座明代建筑和100多座清代民居被完全保存下来。

西溪南村环境优雅清静，许多画家、作家来此创作，甚至还有些人在这里买下老房子加以修整后，就入住这里了。这里交通方便，离黄山北高铁站只有4公里路程。