2001年9月區劃調整析武陽鎮熟溪以北，溫泉路以西區域與桃溪灘鄉合置壺山街道，并沿用至今。
原武陽鎮1930年建鎮，定名武陽鎮。
1946年更名為壺山鎮。
解放初稱城關區。
1950年劃建城關鎮。
1956年城郊鄉劃入。
1958年公社化時稱東風人民公社。
同年9月并入永康縣，稱壺山人民公社。
1961年恢復武義縣建制設壺山鎮人民公社。
1968年稱壺山鎮革委會。
1981年建制壺山鎮人民政府。
1992年撤區擴鎮并鄉時，原白溪鄉、溪里鄉并入，再次定名武陽鎮。
2001年撤銷建制。
原桃溪灘鄉，1934年屬塔勝鄉。
1946年并入家山鄉。
1950年始建桃溪灘鄉。
1956年與后樹、中樞合并為勝利鄉。
1961年成立桃溪灘人民公社。
1983年政社分設設桃溪灘鄉，延續到2001年并入壺山街道。