König Jakob I. schuf den nach dem Gut Baltimore Manor im irischen County Longford benannten Titel 1625 und verlieh ihn in Anerkennung der treuen Dienste seinem Staatssekretär George Calvert. Calvert hatte zuvor von seinem Amt zurücktreten müssen, da er zur römsch-katholischen Kirche konvertiert war.

Eine besondere Rolle spielten die Lords Baltimore in der amerikanischen Geschichte als Gründer von Maryland. Nach den ersten Titelträgern ist auch Baltimore benannt.