清乾隆59年（1764），砀山安阳书院由县城内迁往这里，改称北山书院。
教谕康茂园倡议捐资办学，置学田1145亩，立“北山书院义田碑”，咸丰3年（1853）因受太平天国农民起义军的影响，北山书院又迁入城内汪翰林故宅（老县委大院），复称安阳书院，迁校时“北山书院”卧碑和“北山书院义田碑”随运进城。
民国时期，砀山县曾在此设立过甲种师范讲习所和砀山体育场。
1930年中国共产党人又在此创办苏鲁豫边疆中学，传播马列主义、培养革命的火种。
1938年砀山沦陷前后，北土山建筑群遭受战争的严重破坏；解放后，建窖取土，北土山逐渐消失。
目前遗迹尚存，北土山已成为砀城镇的一个自然村名。
2015年撤销砀城镇土山村民委员会，设立土山社区居民委员会。