明清时期属东阳乡，民国时期属东阳乡设立九保（向家大屋）；中华人民共和国成立后1950年5月设立白鹤村，属九东区；1953年1月改为白鹤乡，属第六区（杨林）；1956年3月小乡合并后建立长丰、二联丰、高垭农业生产合作社，属属第六区（杨林）白鹤乡；1958年11月人民公社化时，设立长丰大队、二联丰大队、高垭大队，属杨林人民公社。
1961年4月属杨林区白鹤乡；1975年10月撤区并社属杨林人民公社；1981年3月长丰大队改为赵家山大队，二联丰大队改为水漕口大队，高垭大队改为偏岩大队；1984年2月政社分设，赵家山大队改为赵家山村、水漕口大队改为水漕口村、偏岩大队改为偏岩村，属杨林区白鹤乡；1987年9月撤区并乡属杨林桥镇；2001年3月赵家山村、水漕口村、偏岩村合并为赵家山村，属杨林桥镇管辖至今。