1928年属第七区高辛保。
1934年属第四区高辛北保。
1939年复属第七区高辛保。
1946年属高辛乡潘庙保。
1949年属高辛区王绪庄乡。
1956年建潘庙高级农业生产合作社，属高辛乡。
1958年更名为潘庙生产大队，属高辛人民公社。
1961年属高辛区江陈楼人民公社。
1965年更名黄庄生产大队。
1981年6月复建潘庙生产大队，属高辛人民公社。
1983年12月更名为潘庙村民委员会，属高辛乡。
2000年4月属高辛镇至今。