民國時期，先后屬第四區和潘家鄉。
1949年10月，屬三區。
1950年6月，屬四區。
1952年7月，區劃調整，為第六區。
1956年7月，撤區并鄉改為潘市鄉。
1958年9月，改為燈塔人民公社。
1959年5月，更名為潘家埠人民公社。
1961年8月，改為潘家埠區公所，轄潘家埠、下七渡、塘弦灣等7個公社。
1964年3月，撤潘家埠公社，建石洞源公社。
1984年4月，改公社為鄉。
1985年1月，改塘弦灣鄉為潘市鎮。
1995年5月，祁陽撤區并鄉建鎮，并下七渡、馬鞍嶺、潘市、石洞源、松林5個鄉鎮，建立新潘市鎮。
析出梅溪、樓梯兩鄉，并建梅溪鎮。