白马社区居民委员会，原为赤湖人民公社（乡级）党政机关驻地。
1975年，撤区并社，为白马人民公社（区级）党政机关驻地。
1976年，赤湖管理区以胡家场老街成立街道办事处。
1984年，设区建乡（镇），赤湖管理区改为胡场镇，设街道办事处。
1987年，区、乡体制改革，白马区改为白马寺镇，胡场镇为办事处，胡场街道办事处收归白马寺镇直接管辖，并更名为白马街道办事处。
同年又将街道办事处改为居民委员会。
1999年，将原属胡场管辖的桂花台划入白马居委会管辖。
2001年，将白马居委会改为白马社区居民委员会，属白马寺镇至今。