孔子山村位于孔村镇西北2公里处孔子山脚下，聚落呈长方形。孔子山本名紫盖山，山巅故有孔子讲书堂遗址。北宋熙宁五年（1072）于此址建“孔林书院”，又名“杏坛遗响”。明弘治十五年(1502年)重修孔林书院，始立孔子及四配像。

孔子山本名紫盖山，山巅故有孔子讲书堂遗址。北宋熙宁五年（1072）于此址建“孔林书院”，又名“杏坛遗响”。明弘治十五年(1502年)重修孔林书院，始立孔子及四配像。明万历二十五年(1597年)迁至山东坡，仍立孔子及四配像。“文革”期间被毁坏。孔子山系历史名山，与五岳同为中国三十洞天之一。《名山志》有孔子山绝顶孔子讲书堂遗址的记载。这是曲阜以外惟一的孔子教书堂遗址。“杏坛遗响”是平阴县八大景之一。孔庙位于孔子山东坡，坐西面东，临孔子山村西。东西长约120米，南北宽约80米。整体为三进大院外挎两楼。大门建台阶之上，排

楼式3间。杏坛遗响进门为长方院，对墙为影壁，影壁两旁两座小门入一进院。该院南北各建3间瓦房，南为过道房，即官厅。二进院南北对称，各建有3间带前廊的瓦房，房内是孔子弟子及后世入孔庙的儒家木主。三进院系大平台式，前沿有两段透体墙栏，通过两列12个石俑进入大殿。大殿5间。殿内雕梁画栋，大红圆柱8根，设木阁三间。正中一间供孔子塑像，左右两间供四配像。殿内贴南北山墙各建一长台，各供 6个木主，即12哲。

大门前两侧建有两座高台楼。左侧是讲书楼，左、右、前三面环厦，黑漆圆柱8根。右侧是文昌阁，两层六角尖顶。一层有文昌帝君塑像，二层是魁星塑像。楼身并楼台高约10米左右。

庙循山势而建，庙内各建筑共挂有木制大匾额6块，木制长牌对联一副。匾额内容分别是“生民未有”“斯文在兹”“图书天地”“与天地参”“金声玉振”“春风化雨”。庙内外共有青石碑13通，大殿前5通，二进院内4通，大门外3通，村东及大门外左侧各有一通“杏坛遗响”碑，明万历初立于山巅。另有北宋熙宁五年（1072年）篆额“孔林书院”和明弘治十五年（1502年）重修孔庙两通残碑。孔子山东面，遍植翠柏。庙内外原来大树颇多，一进院内曾有两人合抱的柏树，院子被遮大半。远看孔子山，见树不见庙。古木参天，庙貌巍然。旧时孔子庙常年游人不断。每年清明节，周边十多里外的师生云集孔子山，瞻仰孔庙。

孔子山孔庙历代曾有7次修建。北宋神宗熙宁五年（1072年）在教书堂遗址建“孔林书院”（后称孔庙）；明弘治十五年（1502年）重修孔子山庙，始立孔子及四配像；万历二十五年（1597年），孔庙从山顶迁至山东簏重建，仍立孔子及四配像；清代至民国期间，先后四次重修孔子山庙。1966年和1975年，孔子山孔庙遭到两度严重破坏。