杜山村原峃作口、巖門、龍井坑、嚴陣、下尾村解放初稱峃作口、巖門、龍井坑、嚴陣、下尾村，均屬匯溪鄉；1951年均屬雙溪鄉；1956年均屬陳溪鄉；1958年稱峃作口、巖門、龍井坑、嚴陣、下尾生產隊，均屬黃坦公社陳溪大隊，1959年均屬陳溪管理區；1961年改稱峃作口、巖門、龍井坑、嚴陣、下尾大隊，均屬雙溪公社；1984年改稱峃作口、巖門、龍井坑、嚴陣、下尾村，均屬雙溪鄉；1998年均屬云湖鄉；1999年，原峃作口、巖門、龍井坑、嚴陣、下尾5村合并組建杜山村；2011年屬黃坦鎮；2017年，因2014年地震抗震安居政策，整村農戶搬遷至嚴𡊖村棲城小區。
高西村解放初稱高西村，屬匯溪鄉；1951年屬雙溪鄉；1956年屬陳溪鄉；1958年稱高西生產隊，屬黃坦公社葉嶺大隊；1959年屬葉嶺管理區；1961年改稱高西大隊，屬雙溪公社；1984年改稱高西村，屬雙溪鄉；1998年并入云湖鄉；2011年3月并入黃坦鎮。
石嶺村原石戶、嶺腳村解放初稱石戶、葉山嶺腳村，均屬匯溪鄉；1951年均屬雙溪鄉；1952年均屬嶺腳鄉；1956年均屬葉嶺鄉；1958年稱石戶、嶺腳生產隊，均屬黃坦公社葉嶺大隊；1959年均屬葉嶺管理區；1961年改稱石戶、嶺腳大隊，均屬雙溪公社；1984年改稱石戶、嶺腳村，均屬雙溪鄉；1998年，原石戶和嶺腳兩村合并組建石嶺村；2011年屬黃坦鎮。
2018年12月村規模調整杜山、高西、石嶺三個村合并設立為雙溪村。