«Сентиментальный джентльмен свинга» Томми Дорси родился в 1905 году в штате Пенсильвания. Прозвище свое получил за мягкое легато, отличавшее его игру на тромбоне, а также за особую певучесть исполнения.
играть на трубе Дорси научил отец. Тому же самому в семье обучали и брата Томми Джимми, но только Томми отказался от инструмента, который предложил ему отец, и предпочел играть на тромбоне.
С 1925 года он профессионально выступал, исполняя джазовую музыку в оркестрах Джина Голдкетта и Пола Уайтмена. А уже в 1933-35 руководил биг-бэндом вместе  с братом. Именно этому биг-бэнду предстояло стать самым популярным оркестром эпохи свинга.
В 1935 году братья поссорились, и Джимми собрал новый оркестр, который теперь исполнял в основном хот-джаз. Здесь начинали свою карьеру Банни Беринген, Бад Фримен, Дэйв Таф, Чарли Шейверс, Бадди ди Франко и кумир меломанов Фрэнк Синатра.
Умер Джимми в 1956 году.