Apesar do relativo sucesso que fez quando tocava no grupo The Falcons,Joe não tinha sequer uma parte do talento musical dos filhos e nunca alcançou um sucesso substancial por si só.Apesar de ter desejado se tornar um música bem-sucedido,suas tentativas fracassaram e Joe teve de lidar com o fato de ser um musico medíocre e ser um fracasso nessa área em meio a filhos tão talentosos tornava ainda mais patente sua mediocridade.É provável que parte da agressividade de Joe para com os filhos se devesse ao fato de ele sentir inveja de seu talento.
O método de Joe para ensaiar os filhos era,no mínimo,incomum.Ele acompanhava todos os ensaios segurando o cinto na mão.O primeiro que errasse os passos da coreografia era violentamente castigado.Michael,porém,costumava enfrentar o pai,chegando mesmo a jogar os próprios sapatos contra ele e gritar:"Eu te odeio!".Porém,quanto mais ele reagia,mais apanhava.Várias vezes,o franzino Michael foi jogado pelo pai contra a parede enquanto Katherine gritava em desespero:"Joe,você vai matá-lo,por favor,Joe,pare!".
Por alguma razão,michael,uma vez adulto,não se lembrava de que costumava revidar os ataques do pai.O que ficou bem gravado na memória do astro foi o medo que Joe lhe causava,tendo chegado várias vezes a vomitar por puro pânico.Michael também se lembrava de correr tentando fugir do pai,deixando-o com mais raiva ainda.Rápido como um corisco,de fato o menino muitas vezes conseguia fugir antes que Joe o apanhasse.Às vezes a tática dava certo e o pai se esquecia da surra que pretendia dar no pequeno.Outras,porém,Joe esperava até conseguir colocar as mãos nele e,quando conseguia,a coisa ficava realmente muito feia.