明清两朝回瑶称均亭里。
明代属群玉乡。
清代康熙年间仍属群玉乡。
清道光均亭里辖29个自然村。
民国十七年（1928）废里，成立回瑶乡，下辖44个自然村，隶属一区童游。
民国二十一年（1932）成立回瑶联保，属二区（童游）。
民国二十五年（1936）属一区（城坊）。
民国二十九年（1940）撤联保，成立回瑶乡，属一区（城坊）。
民国三十年（1941）直属县政府。
民国三十四年（1945）全县合并乡镇，回瑶乡撤销。
中华人民共和国成立后，1950年分别成立回瑶乡、洪尾乡、溪源乡、溪口乡，属三区（徐市）管辖。
1952年调整部分政区，回瑶乡、洪尾乡、溪口乡统称东南乡，属城关区（城关镇），1958年人民公社化后（1962年前）成立回瑶大队，隶属城关公社。
1984年回瑶大队改为回瑶村村民委员会，属童游乡管辖。
2002年12月后，归潭城街道管辖。
2022年2月23日后，归宝山街道管辖。