위계서원은 이인형(李仁亨), 이의형(李義亨), 이령(李翎), 이현(李顯), 이응성(李應星)을 추모하기 위한 서원으로 1844년(현종 10)에 창건하였다. 고성 위계서원은 계곡 상류에 남향하여 지어졌다. 경사면의 낮은 곳에 유생들이 공부하는 강당을 배치하고 높은 곳에 신주를 모시는 사당을 배치한 전학후묘(前學後廟) 형식을 갖추고 있다. 위계서원 건물은 앞면 5칸, 옆면 3칸 규모로 팔작지붕의 목조 와가이다. 가운데 3칸을 대청으로 하고 좌우에 방을 두어, 배우는 공간으로 구성하였다. 경내에 앞면 5칸, 옆면 3칸의 맞배지붕인 숭덕사, 내삼문, 강당의 전면 좌우에 우진각지붕의 익랑채, 정문으로 솟을대문인 유인문이 배치되어 있다. 해마다 9월에 제사를 지내고 있다.