오계서원은 선조 3년(1570)에 간재(艮齋) 이덕홍(李德弘, 1541~1596)이 학문연마와 심신수련을 위해 건립한 「오계정사」의 후신이다. 여러차례 이건과 중건을 거쳤다. 사림의 공론으로 현종 6년(1665) 10월 2일에 도재사(道存祠)를 건립(建立)하고 간재 선생(艮齋 先生)의 위패(位牌)를 봉안(奉安)한 후 1692년 迂溪書院으로 昇格되었다. 1699년과 1707년의 대홍수로 물길이 바뀌어 書院이 浸水 被害가 있자 1711년(肅宗 37)에 현재의 위치로 이건하였으며, 경종 4년(1724)에 그의 장자인 선오당(善迂堂) 이시(李蒔, 1569~1636)를 배향하였다.