明初，此地有譚、黃、向、周、鄭、楊六大家族在此居住其中。
黃氏先祖由麻城孝感洗腳河隨著移民大軍遷徙四川，其中一支行進到施南府便停下來，在此安居落業。
明屬湖廣都司施州衛軍民指揮使司，清屬湖北省施南府恩施縣都亭里三甲。
民國初襲里甲制，民國十六年（1927）為楊家山聯保第八、九、十保，屬恩施縣第三區，老楊家山村為九保，落業壩為八保，石院墻為十保；民國二十五年（1936）為屯堡鄉第八、九、十保，屬第四西鄉區（屯堡）；民國二十九年（1940）裁區建鄉，為第八、九、十保，屬屯堡鎮1949年末，屬屯堡區楊家山鄉；1953年屬十一區（屯堡區）楊家山鄉。
1958年為楊家管理區，屬屯堡人民公社，下轄紅春、紅武、紅衛、紅光4個大隊；1961年為楊家公社，屬屯堡區，下轄紅春、紅武、紅衛、紅光4個大隊；1968年為楊家公社革命委員會，屬屯堡區革命委員會，下轄紅春、紅武、紅衛、紅光4個大隊；1975為楊家管理區，屬屯堡公社，下轄紅春、紅武、紅衛、紅光4個大隊；1981年為楊家管理區，屬屯堡公社，下轄楊家山、龍王塘、石院墻、伴云庵、落業壩5個大隊。
1984年屬屯堡區楊家山鄉，下轄楊家山村、龍王塘村、石院墻村、伴云庵村、落業壩村5個村。
1997年屯堡鄉楊家管理區屯堡辦事處，下轄楊家山村、龍王塘村、石院墻村、伴云庵村、落業壩村5個村。
1999年至2002屬屯堡聯合管理區楊家山鄉。
2002年屬屯堡鄉，將楊家山村、龍王塘村、石院墻村、伴云庵村、落業壩村合并為楊家山村。