该堂建筑建于明洪武年间，面西向，平面布局为三进一穿堂，堂前尚存一对明代石狮，建筑总面积约860平方米。
此祠堂系北宋哲学家、教育家、理学奠基者程颐、程颢的后裔程嘉禾建于清朝乾隆五十五年（1790年）。祠堂廊本墙上砌有乾隆五十五年立的“建造程氏余堂碑记”碑高189公分，宽74.5公分，叙明程氏后裔程嘉禾“弃举业，逐廉价之利，家业兴隆之日”建祠以追远祖。该建筑是三合院，门楼居东，厅堂朝南五开间，明间抬梁式，用五架梁和及平梁，有随梁枋，前廊有轩，抱头梁前部呈象鼻状。四前檐柱为瓜棱形，刻花雀替，轩和门楼刻卷草，双龙纹和寿字。留存至今布局完整，结构完好无损，更有石碑记载建造经述，是清乾隆晚期祠堂的代表作。
2005年3月16日公布为浙江省文物保护单位，2013年5月公布为第七批全国重点文物保护单位。