磺溪書院（俗稱文昌祠）的前身稱為「西雝社」亦稱為「文昌會」，
是當代文人士子的結集之所。
西雝社創建於清嘉慶四年（1799），
後來在光緒十三年（1887年）再擴建成為「磺溪書院」。
西雝社是清朝居住在今臺中市烏日區的舉人楊占鰲（清道光十九年舉人）、
下寮尾座（今磺溪里）仕紳趙順芳所創建，原本是一些文人士子以文會友的集會場所，
同時也有許多士紳募集善款當作學租招收孤寒學子，所以也有義塾的用途。
後來有感於該區的文教風氣尚嫌不足有待發揚，所以經趙順芳還有趙順芳之子趙壁興、
夥同汴仔頭（今永順里）商號–蔡勝記的蔡燦雲、蔡瀚雲兄弟商議(蔡瀚雲後擔任日治時期
台中州大甲郡龍井莊/今龍井區莊長)。由仕紳蔡燦雲、蔡瀚雲、與張錦上等人號召領頭，
再度發動社員募集，籌建「文昌廟」，並在文昌廟中開闢「磺溪書院」，
於光緒16年（1890）竣工，
廣招大肚下堡地區（今大肚區、龍井區、烏日區等臺中市市轄區）
的學子，作育英才。
日治時代雖然磺溪書院被迫停止了教育，不過日軍的近衛師團曾經
在此進駐，所以都還維持著不錯的狀態。
昭和十年（1935）12月5日，以「大肚舍營所」的名義與其他的
「北白川宮能久親王御遺跡」一起被臺灣總督府指定為史蹟。
後經過當地人向日本政府申請，於1899年（明治32年）3月16日獲准成立
「大肚公學校」（今大肚國小前身），首任校長是日本人木村左市郎，
學校成立之初即以磺溪書院充當校舍。
在1945年之前，美國盟機曾經空襲過臺灣，
書院的三川殿跟廂房都曾被炸彈波及。
另外在1959年發生八七水災，大肚溪的溪水氾濫，
夾雜大量泥沙重創磺溪書院。
而當時負責管理的趙維孝等人也遠走他鄉，任由書院的建材與
文物資產被偷，加速了書院的荒廢。
1984年（民國73年）時任大肚鄉鄉長林振祥、陳榮懷以及大肚國小的校長雒繼光等人，
感到磺溪書院傳承著重要文化的資產，於是與聘請著名的建築學者漢寶德教授勘察研究，
於1985年（民國74年）8月19日經臺灣省政府正式指定磺溪書院文昌祠為
國家三級古蹟，並動工執行修復工程。
自從西雝社成立以來，經由文昌祠的改建一直到民國政府修復為止，
磺溪書院經歷了各種不同的天災與人禍摧殘，但是因為書院的成立，
帶給了臺中市、彰化縣一帶的文化教育有很深的影響。
建築材料的使用除了紅磚瓦片之外，還有泉州白（花崗岩）、
青石等石材搭配福杉等建造而成。
無論建材、造型、施工技術上均十分精巧，
尤其以磚工雕琢之精美聞名，
堪稱是清末文教建築的傑出作品。
