建国前至建国初属底蓬乡辖。
1951年建政置中心乡，属中心乡辖。
1958年公社化时中心乡并置为底蓬公社。
村名为先锋大队，属底蓬公社辖。
1962年调整调整建置，将原中心乡改为中心公社，村名先锋大队，属中心公社辖。
1978年撤区并社，将白家公社并入中心公社，村名为先锋大队，属中心公社辖。
1980年恢复原建置，百家公社分出。
村名先锋大队，属中心公社辖。
1981年，因地区重名，中心公社更名为棉溪公社，村名先锋大队，属棉溪公社辖。
1984年，棉溪公社改棉溪乡，村名改下午寺村。
1992年撤乡并镇，棉溪乡并入底蓬镇。
村名为下午寺村，属底蓬镇辖。
2019年8月乡镇行政区划调整，撤销底蓬镇，将其所属行政区域划归夕佳山镇管辖，原底蓬镇下午寺村更名为夕佳山镇下午寺村。