덕산서원은 조선 초기 문신인 남은(南隱) 서섭(徐涉) 선생을 기리기 위하여 건립하였는데, 그의 아들 생원 서감원(徐坎元)을 배향하였다. 서습은 세종 때에 문과에 급제하여 벼슬이 이조판서에 이르렀다. 그는 세종, 문종, 단종 3왕을 보필하였는데, 세조가 왕위를 찬탈하자 관직에서 물러나 자취를 숨긴 충신으로 그의 행적은 오랫동안 알려지지 아니하였다. 1920년에 단종에게 올린 상소문과 유문(遺文)이 발견됨에 비로소 세상에 알려지게 되었다. 1926년에 첨모재(瞻慕齋)를 건립하였는데, 1954년에 중수하였으며, 1995년에 사당을 짓고 확장하여 서원으로 편액하였다.

저서로 서섭의 <남은선생문집>과 서감원의 <성균생원서공실기(成均生員徐公實紀)>가 있다.