A montanha de San Gorgonio era originalmente conhecida como “Old Grayback” pelos habitantes locais até que fosse oficialmente designada pelo US Geological Survey (da herança espanhola) no mapa topográfico original da área produzida em 1899. Com 11.502 pés, é o pico mais alto da Califórnia ao sul das Sierras. O deserto de San Gorgonio deriva seu nome deste pico dentro de seus limites. O Wilderness está localizado na porção sudeste das montanhas de San Bernardino, em terras administradas pela Floresta Nacional de San Bernardino e pelo Bureau of Land Management. A maior parte da região selvagem está acima do nível de 7.000 pés. Dois rios (que seriam chamados de riachos em qualquer lugar, menos no sul da Califórnia), o Santa Ana e o White, fluem do deserto. Os numerosos riachos na área selvagem nem sempre fluem no final do verão, e localizar água pode ser difícil. Dois pequenos lagos, vários prados e grandes áreas florestadas proporcionam um belo oásis subalpino nas terras secas que circundam a cordilheira. O ambiente isolado contém muitas espécies de plantas e animais ameaçadas e em perigo de extinção, bem como ursos, veados, leões da montanha e ovelhas selvagens. O cume do pico de San Bernardino, de 10.624 pés, foi o ponto inicial em 1852 a partir do qual todo o sul da Califórnia foi examinado. Há mais de 20 milhas da Pacific Crest National Scenic Trail na porção BLM e 81 milhas de trilhas na porção da Floresta Nacional do deserto.