Kun Brabham oli voittanut kaksi Formula 1 -maailmanmestaruutta, hänen vaimonsa kannusti miestään jättämään kilpailun vuoden 1965 kauden jälkeen.
Talli ei kaivannut miestä enää ratin taakse. Formula 1 on vaarallinen laji, eikä se olisi ollut riskien arvoista.
Vuoden 1966 kausi kuitenkin muutti kaiken. Kun muissa talleissa testattiin vasta hyväksyttyjä 3 litran V12-moottoreita, Brabham pelasi varman päälle. Hän tiesi, että nykyisistä osista valmistettu V8-moottori ei yltäisi samaan tehoon, mutta se olisi kuitenkin luotettavampi. Brabham oli innoissaan tästä V8- ja V12-moottorien vastakkainasettelusta, mutta hänellä oli vaikeuksia löytää kilpailukykyisiä kuskeja tallilleen. Niinpä hän hyppäsi itse ratin taakse ja lähti kisaan Goodyearin renkailla.