Brillat-Savarin se narodil v městečku Belley v Ainu, kde řeka Rhôna odděluje Francii od Savojska. Vystudoval práva, chemii a medicínu v Dijonu a ve svém rodném městě vykonával právnickou praxi. Narodil se jako Jean Anthelme Brillat, ale přijal své druhé příjmení, protože mu teta jménem Savarin odkázala celý svůj majetek pod podmínkou, že přijme její jméno. V roce 1789, na počátku Francouzské revoluce, byl vyslán jako poslanec do Generálního stavovského shromáždění, které se brzy stalo Národním ústavodárným shromážděním, a proslavil se některými svými projevy, zejména jedním na podporu trestu smrti. Vrátil se do Belley a rok byl zvolen starostou. V pozdější fázi revoluce byla na jeho hlavu vypsána odměna a on nejprve požádal o politický azyl ve Švýcarsku. Později se přestěhoval do Holandska a poté do nově vzniklých Spojených států, kde tři roky pobýval v Bostonu, New Yorku, Filadelfii a Hartfordu a živil se příjmy z výuky francouzštiny a houslí. Nějakou dobu působil jako první houslista v newyorském divadle Park Theater.
V roce 1797 se vrátil do Francie za direktoria a získal soudcovský post, který pak zastával po zbytek života, jako soudce kasačního soudu. Vydal několik děl o právu a politické ekonomii. Zůstal starým mládencem, ale lásku považoval za šestý smysl: jeho nápis Physiognomie. své krásné sestřenici Juliette Récamierové zní
"Paní, přijměte laskavě a shovívavě si přečtěte dílo starého muže. Je to pocta přátelství, které se datuje od vašeho dětství, a možná i pocta něžnějšímu citu... Jak to mám říct? V mém věku se už člověk neodváží zpytovat své srdce."
Jeho slavné dílo Physiologie du goût (Fyziologie chuti) vyšlo v prosinci 1825, dva měsíce před jeho smrtí. Celý název zní Physiologie du goût, ou Méditations de Gastronomie Transcendante; ouvrage théorique, historique et à l'ordre du jour, dédié aux Gastronomes parisiens, par un Professeur, membre de plusieurs sociétés littéraires et savantes. " Kniha nebyla od svého prvního vydání, krátce před Brillat-Savarinovou smrtí, vytištěna. Její nejvýznamnější překlad do angličtiny pořídil spisovatel a kritik M. F. K. Fisher, který k tomu poznamenal: "Považuji se za blahoslaveného mezi překladateli." Její překlad vyšel poprvé v roce 1949. Epikurova filozofie se skrývá na každé stránce; Brillat-Savarina uspokojilo i to nejjednodušší jídlo, pokud bylo umělecky provedeno:
Lidé, kteří trpí zažívacími potížemi nebo se opíjejí, naprosto neznají pravé zásady jídla a pití.