Elfrīda Karlsone bija ievērojama vieglatlēte, pirmā Latvijas sportiste (kopā ar Zinaīdu Liepiņu), kura piedalījās Olimpiskajās spēlēs (1928. gadā Amsterdamā). Vairākkārtēja Latvijas rekordiste šķēpa mešanā (1923, 1924, 1925, 1927), tāllēkšanā (1923), augstlēkšanā (1922, 1923), lodes grūšanā (1923, 1924, 1925, 1926, 1927, 1928), diska mešanā (Latvijas pirmrekords 1923; 1927, 1928, 1929, 1930, 1931). Latvijas jauniešu organizācijas “Latvijas Vanagi” vanadžu priekšniece (1932–1940).