Peter & The Test Tube Babies собрались в городе Peacehaven в конце 1978 года. Peter пел, а «Babies», то есть трое других музыкантов, играли – Derek на гитаре, Chris на бас-гитаре, и Mark Hoggins на барабанах. Слова придумывал Peter, музыку – Derek.

Они слушали Blitz, 4-Skins и Cockney Rejects и свои первые песни записали на сборник «Carry on Oi!». Принято считать, что PTTB играли Oi!, но сами они не видели различия между панками и скинхедами, ведь и те и другие происходили из одной и той же среды. В своём интервью в 1982 году Peter сказал, что здесь не может быть различий, что Oi! и панк – это одна и та же музыка.

PTTB играют и сейчас, причём уровень их игры гораздо выше, чем в конце семидесятых.