Andrew Jackson miał różne bójki z Johnem Calhounem, które powstały ze społecznego i politycznego pochodzenia. Jackson nie zgadzał się ze sposobem, w jaki żona Johna Eatona, sekretarza wojennego Jacksona, była traktowana przez żony i córki oficerów gabinetu, łącznie z żoną Calhouna; spojrzeli na żonę Eatona i przypomniało Jacksonowi o leczeniu, które jego własna żona, Rachel, otrzymała od tej samej grupy. Politycznie, ci dwaj mężczyźni nie zgodzili się co do kwestii praw państwowych, a Calhoun i jego partia praw państwowych próbują wpaść Jacksonowi w popieranie swoich poglądów.
Osobista animozja pomiędzy Jacksonem a Calhounem dotyczyła krzywdzenia jego żony sekretarza wojny. Oni także plotkowali o niej. To rozpaliło Jacksona, ponieważ jego żona była również traktowana jako osoba mniejszej klasy przez ten sam krąg społeczny.
Na uroczystości urodzinowej dla Thomasa Jeffersona w 1832 r. Calhoun i inni w jego obozie zrobili toasty, próbując ustalić związek pomiędzy unieważnieniem a poglądem rządu na prawa. Jackson nie przyłączył się, ale zamiast tego wzniósł toast za federalny związek i zauważył, że musi on zostać zachowany i zasadniczo upokorzony Calhoun, który był jego wiceprezydentem, publicznie. Calhoun ostatecznie zrezygnował z wiceprezydenta.