Tony Madigan s-a născut pe 4 februarie 1930, la Sydney, din părinţi medici. Urmând profesia mamei sale a lucrat ca dentist, dar în paralel a mers regulat şi la sală, unde practica boxul. În anii ’50 a luat lecţii de box în SUA, de la celebrul Cus D’Amato, dar câţiva ani mai târziu, pe 17 ianuarie 1955, a fost protagonistul unei întâmplări care l-a marcat pe viaţă.
Aflat pe o şosea din Bavaria el a provocat un accident în urma căruia însoţitoarea sa, Helen Stokes-Smith, în vârstă de 23 de ani, şi-a pierdut viaţa. Madigan a făcut accident după ce a tras de volan pentru a evita un camion parcat pe marginea drumului. Ulterior avea să se căsătorească cu Sybille, în noiembrie 1960, care în aprilie 1961 îi va dărui un fiu.
În plan sportiv, Tony Madigan a participat la trei ediţii ale Jocurilor Olimpice, în 1952, 1956 şi 1960, ocupând locurile 5, 5 şi 3. La Olimpiada de la Roma, din 1960, a fost învins în semifinale de celebrul Cassius Clay, alias Muhammad Ali. În sferturile de finală îl eliminase pe românul Gheorghe Negrea, prin KO în repriza a doua.
Tony Madigan a fost şi un talentat jucător de rugby.