Grup üyeleri X Factor USA yarışmasına ilk başta solo olarak katılmışlardır fakat başarı sağlayamayarak elenmişlerdir. Daha sonra Simon Cowell onları bir grup haline getirmiştir. Aslında grubun ismi ‘’LYLAS’’(Love You Like A Sister)’tır. Fakat başka bir grup tarafından çalındığı için isimlerini değiştirerek ‘’1432’’ yapmışlardır. Daha sonra Simon Cowell isimlerini değiştirmelerini önermiştir. Bunun üzerine grup üyeleri bir internet sitesinde fanlarla beraber yeni isimlerinin ne olacağını tartışarak ‘’Fifth Harmony’’ olarak anons etmişlerdir.
İlk performansları Shontelle’nin ‘’Impossible’’ adlı şarkısı olmuştur. Şarkıyı Simon Cowell’in evinde söylemişlerdir. Daha sonra sırasıyla;
Christina Perri’nin ‘’A Thousan Years’’,
Mariah Carey’in ‘’Hero’’,
The Pretenders’in ‘’I’ll Stand By You’’,
Kelly Clarkson’un ‘’Stronger’’,
Adele’in ‘’Set Fire On The Rain’’,
Demi Lovato’nun ‘’Give You Heart A Break’’,
Mariah Carey ‘’Anytime You Need A Friend’’,
Ellie Goulding’in ‘’Anything Could Happen’’,
Shontelle’nin ‘’Impossible’’,
Ellie Goulding’in ‘’Anything Could Happen’’ (Yeniden),
Demi Lovato ile birlikle ‘’Give You Heart A Break’’,
The Beatles ‘’Let It Be’’,
‘’Christmas’’ (Baby Please Come Home) adlı şarkıları söylemişlerdir.
Yarı finalde Ellie Goulding’in ‘’Anything Could Happen’’ şarkısını seslendirdiklerinde X Factor jürisi olan L.A. Reid’e göre kızların sergilediği ‘’Anything Could Happen’’ performansı bir final performansı kadar güzeldi ve Britney Spears da kızların performansını ‘’büyülü’’ olarak nitelendirdi. İkinci defa seslendirdikleri ‘’Impossible’’ adlı şarkının grubun üç üyesi (Ally, Lauren, ve Camila) bazı bölümlerini İspanyolca söyledi. Fakat şarkı jüriler tarafından çoğunlukla olumsuz yorumlar aldı çünkü grup aynı şarkıyı daha önce Simon Cowell’in evinde seslendirmişlerdi.
Finale Tate Stevens ve Carly Rose ile kalmışlardır. Yarışmayı 20 Aralık 2012’de 3.lükle bitirmişlerdir.