Алисия Ретт родилась в городке Саванна, штат Джорджия. Её мама, Изабелль Мёрдок, была родом из Великобритании, а отец, Эдмонд М. Ретт, был военным офицером. После смерти отца в Первой мировой войне она с мамой перебралась в город Чарльстон, Южная Каролина, где позднее она стала актрисой местного театра.
В 1936 году, во время выступлений в пьесе «Веер леди Уиндермер», её увидел голливудский режиссёр Джордж Кьюкор, который намерился взять её на роль Скарлетт О’Хары в экранизации романа Маргарет Митчел «Унесённые ветром». Но эту роль Алисия Ретт так и не получила, как вобщем и роль Мелани Гамильтон, на которую она также пробовалась. В конечном итоге в марте 1937 года её утвердили на маленькую роль Индии Уилкс, сестры Эшли Уилкса.
Невзирая на неслыханный фуррор «Унесённых ветром» Ретт покинула Голливуд так как новых ролей ей так и не предложили, и возвратилась в Чарльстон, где скоро стала преподавателем по постановке правильной речи для многих актёров и дикторов на радио. В течение длительных лет после окончания съемок «Унесённых ветром» она поддерживала дружественные дела с Оливией де Хэвилленд, исполнительницей роли Мелани Гамильтон.
Ещё до начала собственной актёрской карьеры Алисия Ретт отлично себя показала как художница-портретистка. После окончания актёрской карьеры она вновь возвратилась к этому занятию, также не один раз учавствовала в иллюстрировании многих книжек.
До собственной погибели 3 января 2014 года Алисия Ретт являлась наистарейшей из основного актёрского состава кинофильма «Унесённые ветром».