Muntele San Gorgonio a fost inițial cunoscut sub numele de „Old Grayback” de către localnici până când a fost desemnat oficial de US Geological Survey (din patrimoniul spaniol) pe harta topografică originală a zonei produsă în 1899. La 11,502 de picioare, este cel mai înalt vârf din California, la sud de Sierras. San Gorgonio Wilderness și-a derivat numele din acest vârf din limitele sale. Pustia este situată în porțiunea sud-estică a Munților San Bernardino pe terenuri administrate de Pădurea Națională San Bernardino și Biroul de Administrare a Terenurilor. Cea mai mare parte a sălbăticiei este peste nivelul de 7.000 de picioare. Două râuri (care ar fi numite pârâuri oriunde în afara Californiei de Sud), Santa Ana și White, curg din pustie. Numeroasele pâraie din zona sălbatică nu curg întotdeauna la sfârșitul verii, iar localizarea apei poate fi dificilă. Două lacuri mici, mai multe pajiști și zone mari, puternic împădurite, oferă o frumoasă oază subalpină în uscatul care înconjoară lanțul muntos. Mediul izolat conține multe specii de plante și animale amenințate și pe cale de dispariție, precum și urși, căprioare, lei de munte și oi bighorn. Vârful vârfului San Bernardino de 10.624 de picioare a furnizat punctul inițial în 1852 de la care a fost cercetată toată California de Sud. Există peste 20 de mile de Pacific Crest National Scenic Trail în porțiunea BLM și 81 de mile de trasee în porțiunea National Forest din Wilderness.