Rodiče Fritze d'Orey pocházeli z Portugalska. Jeho křestní jméno Fritz, které je pro Brazilce netypické, odkazuje na jeho dědečka, který byl Němec. Jeho rodiče provozovali obchodní zastoupení Packard v São Paulu, a tak brzy d'Orey přišel do kontaktu s motoristickým sportem. Jeho prvním vozidlem bylo Porsche Spyder. Později koupil jeho krajan Chico Landi jeho Formule 1 - Ferrari , s nímž začal koncem 50. let pravidelně závodit v Brazílii , Argentině a Uruguayi .
V roce 1959 přišel do Evropy a startoval pro malý italský závodní tým Scuderia Centro Sud na mistrovství světa Formule 1. Při svém debutu na Velké ceně Francie měl vážnou nehodu. Po dalším krátkém vystoupení na Velké ceně Britů jel na Camoradi Racing s Tec-Mec-Maserati na Velkou cenu USA . Nemohl se umístit na žádné ze tří Grand Prix a jeho kariéra Formule 1 zůstala nedokončená.
Ve stejné době jako Monposti řídil d'Orey také závody sportovních automobilů, které byly tak úspěšné, že mu Ferrari nabídlo smlouvu o dílo na rok 1960, kterou přijal. Ale již při prvním závodě v Monze měl d'Orey, který o sobě řekl: „Zůstal jsem velkým, zlobivým klukem“, vážnou nehodu po srážce se svým týmovým kolegou Philem Hillem .
Kariéra Fritze d'Oreyho (téměř vždy jel nad jeho možnosti) skončila v roce 1960 během tréninku na 24 hodin Le Mans . V časných ranních hodinách narazil do stromu ve Ferrari Scuderia Serenissima a utrpěl tak vážná zranění, že musel strávit osm měsíců v nemocnici. Úplně se uzdravil, ale už nikdy nezávodil.