'Factory Girl' er baseret på den sande historie om en af 1960’ernes største kvindelige stil-ikoner, Edie Sedgwick, og hendes vej til berømmelsens stjernehimmel.

Edie (Sienna Miller) er ikke meget mere end lige ankommet til 1960’ernes New York før hun bliver muse for den verdensberømte pop-kunstner Andy Warhol (Guy Pearce).

Opholdet i Warhols The Factory bliver mødet med et bohemeparadis hvor kunstnere, poeter, musikere og skuespillere flokkes om at kreere de mest avantgardistiske værker og events.

Edie bliver både Warhol’s foretrukne filmstjerne og centrum for mediernes blitzlys, men Warhol har ikke i sinde at dele sit ikon med andre.