泰山书院，亦称泰山上书院，即今五贤祠，在泰山之阳的凌汉峰下，普照寺西北约300米处。创始人为宋人孙复。唐代这里叫“栖真观”，是道士、诗人周朴读书修炼的地方。宋景祐二年（1035年），晋州名儒孙复应奉符（今泰安）学者石介之邀，到泰山讲学。景祐四年（1037年），在岳庙（今岱庙）东南的柏林地初设学馆，名“信道堂”，孙复讲学其中，撰《信道堂记》。此为泰山书院之创始。后岳庙扩建，学馆迁至凌汉峰下栖真观旧址。石介撰《泰山书院记》，刻石院中。“泰山书院”之名始此。庆历二年（1042），由于孙复赴京任职，泰山书院主持乏人，渐趋衰落，前后历时八年。
明嘉靖十一年（1532），泰安知州许应元拓修泰山书院，并延请名师讲学，泰安文风为之一振。同时，山东按察佥事卢问之于其地建“仰德堂”，祀孙复、石介。嘉靖三十四年（1555），泰州文士王栋任泰安训导，在泰山仰德堂讲学。隆庆三年（1569），山东提学邹善重修泰山仰德堂，增祀宋儒胡瑗，改名三贤祠。
此后，清康熙学政黄叔琳、泰安知州徐肇显，乾隆知府蒋尚思，嘉庆邑人赵起鲁等相继重修。至道光九年（1829），泰安知县徐宗干再次重修，祠内增祀宋焘、赵国麟，遂改称五贤祠。1967年7月五贤祠尽毁，1999年因故址重建。