퇴계선생이 1557년(명종12)에 이곳에 짓기 시작하여 1560년 완공하였다.
서당의 가운데 방은 완락재(玩樂齋)라 명하여 선생이 거처하면서 학문을 연구하던 방이며 제자를 가르쳤던 마루는 암서헌(巖棲軒)으로 바위에 기대어 조그마한 효험이라도 바란다는 학문에 대한 겸손의 뜻이 담겨져 있다.