晋属怀仁乡西安里；明永乐十年（1412），属八都西安里；清光绪三十四年（1908），属第四（米埠）自治区；民国15年（1926），属一区兴隆乡；民国34年（1945），属大岩乡9保；1950年，属峡山乡；1954年6月，属建设乡；1956年1月，属高铁乡峡山、杨山农业社；1958年9月实行人民公社，属陆溪（联盟）公社高铁管理区峡山大队、杨山大队；1961年5月，属陆溪区高铁公社；1971年3月撤区并社，属高铁公社；1984年1月设区还乡，属高铁岭区高铁乡杨山村、峡山村；1987年9月撤区建镇，属高铁岭镇；2004年9月，峡山、杨山村合并为杨山村至今。