김인후 선생은 호는 하서 또는 하서 또는 담재이며 중종 5년(1510) 장성에서 태어났다. 이미 8살 때부터 당시 전라도 관찰사가 ‘장성 신동 천하 문장’이라고 치켜세울 만큼 대단한 천재였다. 22세 때 과거에 합격하여 성균관에서 수학하였고, 31세 때 출중한 학식을 인정받아 사간원에 배속되어 인종으로 즉위하게 될 세자의 선생님을 하였다. 김인후 선생은 당쟁으로 얼룩진 조정을 떠나 옥과 현감으로 1년 8개월 부임하면서 이 짧은 기간에 많은 제자들을 양성하였고, 곡성 지역 선비들이 학문을 연마하도록 동기를 부여하였으며 김인후 선생님을 만나기 위해서 전국에서 찾아오는 선비들과 활발한 교류를 계기로 곡성 지역이 일약 선비의 고장으로 발돋움하였다. 200년이 지난 이후에도 곡성 선비들은 김인후의 은덕을 잊지 않았고, 숙종 20년(1694)에 지방 유림의 공의로 김인후의 학문과 덕행을 추모하기 위해 옥과면 죽림리에 창건하여 위패를 모셨다. 이 서원에서는 매년 3월 18일에 향사를 지내고 있다.