* Priroda i aktivnosti na otvorenom: Joule je bio oduševljeni promatrač prirode i volio je provoditi vrijeme vani. Taj ga je interes vjerojatno doveo do pokusa s vodenim kotačima i drugim prirodnim fenomenima. Također je volio putovati, a njegova su znanstvena putovanja često uključivala istraživanje različitih krajolika.
* Strojarstvo: Joule je imao veliki interes za strojarstvo i bio je vješt u izgradnji i popravljanju strojeva. Znatno je vrijeme proveo u očevoj pivovari, gdje je izbrusio svoje praktične vještine i primijenio ih za poboljšanje procesa proizvodnje piva.
* Čitanje i učenje: Joule je bio proždrljivi čitač i bio je u toku sa znanstvenim razvojem svog vremena. Bio je i član Manchesterskog književnog i filozofskog društva, gdje je aktivno sudjelovao u intelektualnim raspravama.
* Glazba: Jouleov otac bio je glazbenik, a i sam je svirao klavir. To sugerira da je glazba za njega mogla biti izvor opuštanja i užitka.
Iako su to zaključci temeljeni na njegovom životu i radu, konkretnih informacija o njegovim hobijima ostaje malo. Važno je zapamtiti da je Jouleov primarni fokus bio na znanstvenom istraživanju, a njegov osobni život i slobodne aktivnosti vjerojatno su bile sekundarne u odnosu na njegovu strast prema znanosti.