Andrew Jackson também adorava uma boa piada prática. Enquanto era estudante de direito em Salisbury, Carolina do Norte, Jackson foi escolhido para administrar o baile anual de Natal, um evento anual de grande importância na pequena cidade da Carolina do Norte. Como uma piada, ele convidou duas prostitutas para o baile, embora poucos presentes acharam o gesto tão engraçado quanto Jackson.
Ele era leitor ávido de jornais e romances. Seu livro favorito era "Vicar of Wakefield", de Oliver Goldsmith. Andrew Jackson mantinha uma grande coleção de cachimbos de todo o mundo, mas raramente fumava algo além de seu cachimbo de sabugo de milho. Ele alegou que gostava mais do sabor do cachimbo cru da fronteira do que de todos os sofisticados que adquiriu ao se tornar conhecido internacionalmente.
A profissão de Jackson era política, mas também pode ser considerada um de seus principais hobbies. Depois de deixar a presidência em 1836, ele permaneceu politicamente ativo em sua casa em Nashville. Ele desempenhou um papel importante na eleição de Martin Van Buren e James K. Polk para a Casa Branca antes de sua morte em 1845.