街道因香炉山得名。香炉山，系缙云山脉之支脉寨山坪余脉，位于香炉山街道的东边。据传，原名香云山，该处山顶高耸，祥云缭绕，树木茂盛，花香四溢。因“伸手可摘云，俯身即闻香”而名香云山。后因山顶平地拔起，四周石崖崭绝，顶平腰束，形状酷似香炉，故而又名“香炉山”。

香炉山山顶面积大约二十余亩，地势平坦，有四门，四周条石垒砌，树木丛生。前清时期，这里是达官显贵，地主乡绅，或敬香拜佛、或消暑纳凉、或踏青聚会、或休闲娱乐的好去处；而今，始建于清代的寺庙，已荡然无存，唯有残头断臂的菩萨散落在杂草间，见证着“破四旧”的遗憾和昔日香火的兴盛。但山顶正中一处清泉，至今喷涌而出，终年流淌，殊为神奇。

站在香炉山顶，沙区西部新城可尽收眼底，既可远眺重庆大学城的勃勃生机，也可俯瞰西永微电园的日新月异，是西部新城的最佳观景台。