W latach 40, zanim został aktorem, był obiecującym bokserem, niepokonanym w 28 walkach których większość wygrał przez nokaut. Jego karierę przerwała dopiero walka z ówczesnym mistrzem świata wagi ciężkiej - Maxem Baerem, który pokonał Pata w pierwszej rundzie.
Zmarł w Paterson (New Jersey, USA).