奧莉薇·黛·哈佛蘭，1916年7月1日出生在日本東京的一個英國家庭中  。1917年10月22日，她的妹妹出生，但發現患有貧血癥。兩年后，父親將姐妹兩人與母親送往比較暖和的美國加利福尼亞州南部生活，以期改善姐妹的身體狀況 。1919年，母女三人開始在美國居住，父母二人的情感也隨之出現裂縫，最終導致離婚，母親則改嫁他人定居美國薩拉托加  。

奧莉薇·黛·哈佛蘭中學是在加利福尼亞州的洛斯蓋多斯高中度過的（該校的戲劇表演獎是以她的名字命名的），還上過一個天主教的圣母修道院女子學校。之后在加利福尼亞奧克蘭就讀于密爾斯學院，正是她在密爾斯的時候參加了大學校內戲劇演出，在演出莎劇《仲夏夜之夢》時表演出色獲得了獎學金，還因此被導演Max Reinhardt看中，不但讓她出演自己的戲，更把她推薦給了華納兄弟 。華納兄弟娛樂公司的負責人看了奧莉薇·黛·哈佛蘭的試鏡后，便和她簽了一份長達七年的合約。從此，她作為該公司的主要演員踏入好萊塢影視圈。