宋时形成聚落，至清时属丰乐乡，1946年9月属丰南乡。
1949年5月后建村，1950年5月属大岙乡。
1956年，分别建立清塘、夏凉高级农业生产合作社，属金峨乡。
1958年10月，为红旗（横溪）公社金峨大队（管理区）清塘，夏凉耕作队。
1961年6月，建立金峨公社，为清塘，夏凉生产大队。
1983年6月，为金峨乡清塘村、夏凉村，各建立村委会。
1992年撤区扩镇并乡后属横溪镇，2004年4月两村合并为杨山村。