Deși actrița s-a născut la New York, originile strămoșilor ei sunt destul de variate. Născută într-o familie de evrei, tatăl ei, Karsten Johansson, s-a născut la Copenhaga, Danemarca. În timp ce străbunicul ei evreu lucra ca vânzător de legume în New York, fratele său, împreună cu familia sa, a murit în ghetoul din Varșovia în timpul celui de-al doilea război mondial, printre victime erau copii. A învățat acest lucru în timp ce cânta în program Găsirea rădăcinilor, care transmite celebrităților povești despre strămoșii lor. Scarlett a fost oaspete în ultimul episod. Când gazda emisiunii TV a informat-o despre moartea strămoșilor ei în timpul Holocaustului, Scarlett a izbucnit în lacrimi.
Scarlett a urmărit documente de la Institutul Yad Vashem, un centru mondial care comemora Holocaustul. "Mi-am promis că nu voi plânge, dar e greu să nu plângi. E o nebunie. Nu vă puteți imagina acea groază. "A spus Scarlett în lacrimi." Cu aceste cunoștințe pe care le am acum, mă simt mai conectat la această parte a familiei mele ", a conchis ea.