조선말기의 유학자인 호산 박문호(壺山 朴文鎬 1846～1918)가 스승인 이상수 (李象秀 1820～1882)가 강학하던 옛 집터에 1911년 추양정사를 건립하고 이상수의 영정을 봉안하였다. 그 후 박문호를 비롯한 이상수의 문하에서 배출된 양주승 (梁柱承 ?～1910), 양주학(梁柱學 1850～?), 박용호 (朴龍鎬 1859～1927), 박순행 (朴洵行 1866～1916), 양주하의 영정을 함께 봉안하고 춘추로 제향 하였으나 대청댐 건설에 따른 수몰로 1995년 현재 위치인 보은군 회남면 금곡리로 이전하였다.

추양정사에 봉안된 영정 중 이상수, 박순행, 박용호, 양주승의 영정은 제작 당시의 것이나 나머지 세 영정은 파손이 심하여 최근 복사본을 제작하여 봉안하였다고 한다.