五台山位于中国山西省忻州市五台县，离其最近的历史遗址是五台山本身，它就是中国四大佛教名山之一，有着丰富的佛教文化遗产和历史遗迹。
但如果要提到具体的一个“最近”的历史遗址，那么可能是指五台山周边的某些古建筑或遗址，例如：
悬空寺：位于山西省恒山，虽然与五台山有一定的距离，但作为中国古代建筑的奇迹，它也是一处著名的历史文化遗址。
平遥古城：位于山西省中部，虽然与五台山相距较远，但作为一个保存完好的古代城市，也是一处重要的历史遗址。
应县木塔（佛宫寺释迦塔）：位于山西省应县，是中国现存最高最古老的木结构建筑之一。
这些遗址距离五台山都有一定的距离，具体哪个最近，还需要根据实际地理位置来判断。