청도면 두곡리 쌍수당 경내에 있는 남계서원은 1704년(숙종 30) 고려 중기에 평장사를 지낸 김지대의 충효쌍수의 위업을 기리기 위하여 세운 서원이다. 김지대(1190∼1266)는 고려 고종 때 문신으로 청도 김씨의 시조이다. 1217년(고종 4)에 거란이 침입하자 병환 중인 아버지를 대신하여 나가 싸워 충과 효를 동시에 이루기도 하였다. 처음에 사당의 이름을 ‘충효사’라 하였고 강당을 ‘쌍수당’이라고 했는데, 이것은 영헌공이 그의 아버지를 대신하여 종군하면서 지은 시에 ‘국충신지환 친우자소우 충효가쌍수[國忠臣之患 親憂子所憂 忠孝可雙修]’라고 한 데서 따온 이름이다. 그 후 남계서원은 1868년(고종 5)에 내려진 서원철폐령에 따라 훼철되었으나, 자손들이 강당을 보수하며 내려오다가 1907년(순종 1)에 와서 낡은 강당을 철거하고 새로운 강당을 지었다. 1954년도에 후손들이 다시 대대적으로 출연하여 재차 강당을 철거하고 지금과 같이 쌍수당으로 확장 중건하였다. 완만한 구릉지에 위치하는 남계서원은 사당인 충효사 우측에 강당이 놓인 좌묘우학의 배치형태로, 제향 기능을 중시하는 조선후기의 사우형 서원에 속한다. 강당 앞 좌우에 동재와 서재가 마주 보며 배치되고, 그 앞쪽에 소슬대문이 자리 잡고 있다. 강당은 정면 6칸, 측면 1칸 반으로 가운데 2칸 마루를 두고 좌우에 각각 온돌방을 두었다. 상부구조는 5량가이며, 정면만 소로를 사용하여 수장하였다. 동재와 서재는 모두 정면 3칸의 작은 건물이다. 충효사는 영헌공 김지대의 위패를 봉안한 사당으로 쌍수당 우측에 위치한다. 1987년에 신축한 정면 3칸, 측면 2칸 규모의 이익공계 건물로 익공 위에 봉두를 조각했다. 기둥에는 주칠을 했으며 기둥 상부와 창방․도리․보 등에 모로단청을 베풀었다. 충효사는 내삼문인 대보문을 통해 출입한다.