Formandskab
Fillmore mente, at Whig-succes ved afstemningerne varslede fremkomsten af et virkelig nationalt parti, der ville besætte en mellemvej mellem sektion ekstremister fra både nord og syd. Dette syn var legemliggjort i Clays kompromis fra 1850, der søgte at berolige begge sider om slaverispørgsmålet. Selvom Fillmore personligt var imod slaveri, støttede han kompromiset som nødvendigt for at bevare Unionen. Da lovgivningen endelig blev vedtaget to måneder efter Taylors død, følte den nye præsident Fillmore sig forpligtet til at respektere den bestemmelse, der krævede den føderale regering til at hjælpe med erobring og tilbagelevering af løbende slaver til deres tidligere ejere (Fugitive Slave Act of 1850), og han annoncerede offentligt, at han om nødvendigt ville opfordre militæret til at hjælpe med håndhævelsen af denne lov. Selvom dette afsnit af kompromiset formodede Syd og havde den virkning at udsætte borgerkrigen i 10 år, betød det også politisk død for Fillmore på grund af dets ekstreme upopularitet i Nord.
J. Sartain / Library of Congress, Washington, DC (filnr. LC-DIG-pga-02635)
Fillmore var en tidlig forkæmper for amerikansk kommerciel ekspansion i Stillehavet, og i 1853 sendte han en flåde af krigsskibe under kommando af Commodore Matthew C. Perry til Japan for at tvinge sin shogunerede regering for at ændre sin traditionelle isolationisme og indgå handels- og diplomatiske forbindelser med De Forenede Stater. Den resulterende Kanagawa-traktat (1854) førte til lignende aftaler mellem Japan og andre vestlige magter og markerede starten på Japans omdannelse til en moderne stat.
I 1852 var Fillmore en af tre præsidentkandidater for en delt Whig Parti i sit sidste nationale valg, som det tabte. Han løb igen i 1856 som kandidat til Know-Nothing-partiet (også kendt som det amerikanske parti) og sluttede på tredjepladsen bag demokraten James Buchanan og den republikanske John C. Frémont. Fillmore trak sig derefter tilbage til Buffalo, hvor han blev førende i byens borgerlige og kulturelle liv. I 1858, cirka fem år efter hans kone Abigails død, blev han gift med Caroline Carmichael McIntosh.
Redaktørerne af Encyclopaedia Britannica