吉祥寺位于山西五台山脉中台山腰。寺址海拔2004公尺，气候清凉，寺外有清凉桥，遂以清凉著名。相传始建于北魏，据清凉山志载，唐时恩昙和尚重建，历代均曾重修。

吉祥寺原名古佛庵，位於中台南麓溪上，在繁峙县茶铺乡富庄吉祥沟。创於唐代，思昙和尚重建，离尘和尚继修。明弘治年间，比丘尼净玉易庵为铁瓦殿。

明未，三昧和尚开始传戒。清雍正三年（一七二五年），钦命督理五台山札萨克大喇嘛罗藏陈盆鼎新寺宇，更教协会会长能海法师於此弘律传戒，又谓吉祥律院。

寺宇坐北向南，占地两千六百平方米。北有罗汉屏，南有说法台，东西两峰飞翼夹铺，上出瀑布流泉，奇花锦绣，碧草芬芳，游人至此，莫不光临礼谒。

寺内原有山门，天王殿，文殊殿，大雄宝殿和东西配殿，客堂、禅房，僧舍、经房，方丈院等建筑。

主要建筑是大雄宝殿五间，内供横三世佛，两山间为十八罗汉，像设庄严，金碧辉煌。文殊阁五间，内供普贤菩萨、文殊菩萨和观音菩萨三大士，法像造型优美，神态庄重慈祥。灯笼文殊菩萨身穿袈裟，面带笑容，银须飘洒，衣纹流畅，手提红灯笼，坐在虎背上，姿态优美，神态自然，活似一位现实生活中的长者。若要站在佛像面前，倍感和蔼亲近；若要左右移动，便会觉得他那壑智的眼睛在随你转动，真是栩栩如生，瑞相天成，怪不得许多游人爬山涉水也要到此一饱眼福，礼拜灯笼文殊。

殿院两侧为方丈院、禅院、经房，僧舍，计五十馀间。经房内有《大正藏》、《碛砂藏》、《频伽藏》、《龙藏》和《续藏》，专供僧人借阅研究。

在文殊殿前还有一座造型优美的覆钵式白塔和清代石碑两通。此外，在该寺各殿中，都有几尊带有密宗特点的造像，是该寺为密宗道场的表像。