Vuonna 1940 Pritt erotettiin työväenpuolueesta puolustaessaan Neuvostoliiton hyökkäystä Suomeen.
- Mitä? Hänen kirjansa "Must the War Spread?" sympatisoi neuvostojen kanssa ja johti siihen, että työväenpuolueen eliitti ei pitänyt hänestä sodan aikana ja sen jälkeen. Vuonna 1940 hän oli riippumattoman työväenpuolueen jäsen ja vuonna 1945 hän valittiin uudelleen Hammersmith North -vaaleissa, jossa hän sai 63% äänistä virallisia työväenpuolueen ja konservatiivien ehdokkaita vastaan. Vuonna 1949 hän perusti työväenpuolueen riippumattoman ryhmän neljän muun matkakumppanien kanssa, mukaan lukien John Platts-Mills ja Konni Zilliacus, jotka oli myös erotettu työväenpuolueesta neuvostosuhteista. Vuonna 1950 järjestetyissä vaaleissa kaikki Labour Independent -ryhmän jäsenet menettivät paikkansa. Prittin vastustaminen kylmää sotaa ja Natoa oli tehnyt hänestä "epopulaarisen hahmon" Britanniassa.