Antonín Baldinucci se narodil jako mladší syn kunsthistorika Filippa Baldinucciho. Jeho starší bratr vstoupil k dominikánům a Antonín ho chtěl následovat v době, kdy mu bylo teprve 13 let. Otec mu v tom zabránil a trval na tom, aby Antonín absolvoval exercicie zaměřené na rozpoznávání životního povolání. Ignaciánské exercicie zavedly Antonína v roce 1681 právě do jezuitského řádu.
Více