St. Elmo oli alun perin nimeltään Forest City, mutta se muutettiin myöhemmin samannimisten kaupunkien runsauden vuoksi. Nimen St. Elmo valitsi Griffith Evans, yksi perustajista, joka oli lukemassa samannimistä romaania.

kaupunki oli suurimmillaan 1890-luvulla, jolloin siihen kuului lennätinkonttori, sekatavarakauppa, kaupungintalo, 5 hotellia, saluunoita, tanssisaleja, sanomalehtikonttori ja koulutalo. Kaupungin ensimmäinen ja pitkäaikaisin sanomalehti, St. Elmo vuorikiipeilijä, alkoi raportoida kaupungin kaivostoiminnasta elokuussa 1880 ja kesti vuoteen 1895. Denver, South Park and Pacific Railroadin rata kulki St. Elmon kautta. Alueella oli 150 patentoitua kaivosvaltausta. Suurin osa St. Elmon asukkaista työskenteli Mary Murphyn, Teresa C: n, Mollyn tai Pioneerin kaivoksilla. Mary Murphyn kaivos oli alueen suurin ja menestynein kaivos. Mary Murphyn kaivos keräsi toimintansa aikana yli 60 000 000 dollarin arvosta kultaa. Vaikka muut kaivokset lopulta suljettiin, Mary Murphyn kaivos jatkoi toimintaansa, kunnes rautatie lakkautettiin vuonna 1922.

kaivosteollisuuden sammuttua St. Elmon väkiluku laski rajusti. Kaivosmiehet etsivät kultaa ja hopeaa muualta, ja myös St. Elmon liikealue suljettiin. Vain harvat jatkoivat elämäänsä kaupungissa. Postitoiminta lopetettiin vuonna 1952 St. Elmon postimestarin kuoltua.