建國前屬確山縣北四保。
1949年，屬確山縣四區(qū)韓莊鄉(xiāng)。
1960年，建立閻樓生產(chǎn)大隊(duì)。
1972年，改屬駐馬店鎮(zhèn)。
1975年，屬韓莊人民公社。
1980年，屬確山縣。
1981年，因與汝南縣韓莊人民公社重名，以境內(nèi)蘊(yùn)藏優(yōu)質(zhì)石灰石的香山取名，更名為香山人民公社。
1983年，改設(shè)香山鄉(xiāng)閆樓村民委員會(huì)。
2005年，香山鄉(xiāng)并入朱古洞鄉(xiāng)，屬朱古洞鄉(xiāng)。
2008年，將朱古洞鄉(xiāng)楊樓、前張、香山、梨園、閆樓、孫店6個(gè)建制村析出，設(shè)香山街道，屬香山街道。