Перша будівля Пантеону було зведено при імператорі Августі в 27-25 роках до н. е., але було знищено вогнем в кінці I століття. За часів правління імператора Адріана на місці зруйнованого храму з`явилася купольна ротонда з фронтоном на 14-метрових коринфських колонах і прямокутним портиком. Ця споруда, зведена в 118-125 роках, є одним з найбільш примітних будівель Риму.
Храм призначався для проведення служб в ім`я найбільш шанованих богів: Юпітера, Марса, Венери, Меркурія, Сатурна, Плутона і Нептуна. Його часто називають Храмом семи богів.
В античні часи під отвором в куполі розташовувався вівтар, призначений для спалювання жертовних тварин.
Пізніше (в 609 році) Пантеон був подарований татові Боніфацій IV. Настільки щедре підношення зробив візантійський імператор Фока. Пантеон був освячений і став церквою Божої Матері і всіх мучеників.
У XIV-XIV століттях будова виконувало оборонні функції, а колишній блиск був повернутий Пантеону в епоху Ренесансу. Реставрація проходила під керівництва Рафаеля, який був похований в Пантеоні в 1520 році.
У XVII столітті за наказом папи Урбана VIII був розібраний портик Пантеону, а бронзу, яку витягли з його балкових перекриттів, використовували для храму Святого Петра і замку Святого Ангела - у першому з бронзи спорудили балдахін над вівтарем, а в другому відлили гармати. Подібне розорення не сподобалося городянам, але вже нічого не можна було вдіяти.
Коли Італія об`єдналася, Пантеон став місцем поховання королів. Тут розташовані могили Умберто I, Віктора Еммануїла II і королеви Маргарити.