矶山村委会从大矶山而著名，元末明初被划分为四十二都。
1912年至1949年中华人民共和国成立前是设置西社，隶属汇泽乡。
1912年前称中堡。
1949属汪墩区。
1950属城关区。
1952年属三区，后成立矶山乡。
1955年组成两个初级合作社，（永光，升光）。
1956年两社组成了永光高级合作社。
1958年人民公社成立时组成了永光生产大队，属于都昌镇人民公社。
1968年撤销区并社，矶山，永光，矶山，达光取名矶山大队。
1975年成立城郊公社，隶属城郊人民公社。
1979年矶山大队一分为二，分出中坝大队，矶山大队仍辖原永光大队所属的自然村庄。
1982年，改称矶山村民委员会。