榆林村民国年间属五生乡，建国初属绍兴县吴融乡，1954年建设初级农业生产合作社，改名为火炬社、兴林社、建国社、虎吼社、先锋社、和丰社、勤劳社。
1956年合并建立榆光高级社，1958年实现公社化为孙端公社皇甫管理区第七营一连，1962年建立红旗大队、胜利大队、革命大队、榆光大队，另又增一个小畈大队。
1983年改为榆益村、榆林村、榆胜村、榆光村，撤小畈村。
直至2003年5月撤并村时四榆合并为榆林村至今。