位于绩溪县城，纪念馆占地约800平方米，包括两个庭院，原址为建于明代的文昌殿。纪念馆用大量的图片、书籍和实物再现了胡雪岩沉浮于商界宦海的一生。据悉，纪念馆已经收集了近千件胡雪岩生前使用过的各种工具和生活用品，目前已经整理展出一百多件。纪念馆还专门仿照“胡庆余堂“国药号开辟了“药局“，杭州“胡庆余堂“提供上千种中成药，并聘请中医专家坐堂为参观者提供服务。
胡雪岩，1823至1885年，幼名顺官，字雪岩，湖里村人。墉幼时家贫，帮人放牛为生，稍长，由人荐往杭州于姓钱肆当学徒，得肆主赏识，擢为跑街。咸丰十年(1860)，因肆主无后，临终前，以钱庄赠之，乃自开阜康钱庄，并与官场中人往来，成为杭城一大商绅。
咸丰十一年(1861)十一月，太平军攻杭州，光墉从上海、宁波购运军火、粮米接济清军。左宗棠任浙江巡抚，委光墉为总管，主持全省钱粮、军饷，因此阜康钱庄获利颇丰。京内外诸公无不以阜康为外库，寄存无算。他还协助左宗棠开办企业，主持上海采运局，兼管福建般政局，经手购买外商机器、军火及邀聘外国技术人员，从中获得大量回佣。他还操纵江浙商业，专营丝、茶出口，操纵市场、垄断金融。
同治十一年(1872)阜康钱庄支店达20多处，布及大江南北。资金2000万余两，田地万亩。由于辅助左宗棠有功，曾授江西候补道，赐穿黄马褂，是一个典型的官商。
同治十三年，筹设胡庆馀堂雪记国药号，光绪二年(1876)于杭州涌金门外购地10余亩建成胶厂。胡庆馀堂雪记药号，以一个熟药局为基础，重金聘请浙江名医，收集古方，总结经验，选配出丸散膏丹及胶露油酒的验方400余个，精制成药，便于携带和服用。其时，战争频仍，疫疠流行，“胡氏辟瘟丹”、“诸葛行军散”、“八宝红灵丹”等药品备受欢迎。此后，胡光墉亲书“戒欺”字匾，教诫职工“药业关系性命，尤为万不可欺”，“采办务真，修制务精”。其所用药材，直接向产地选购，并自设养鹿园。胡庆馀堂成为国内规模较大的全面配制中成药的国药号，饮誉中外，对中国医药事业发展起了推动作用。
光绪八年(1882)，光墉在上海开办蚕丝厂，耗银2000万两，高价尽收国内新丝数百万担，企图垄断丝业贸易，惹怒外商，联合拒购华丝。又因海关海运操于外人之手，不能直接外运。次年夏，-贱卖，亏耗1000万两，家资去半，周转不灵，风声四播。各地官僚竞提存款，群起00。十一月，各地商号倒闭，家产变卖，胡庆馀堂易主，宣告破产。接着，清廷下令革职查抄，严追治罪。光墉遣散姬妾仆从，于光绪十一年十一月郁郁而终。