このお寺は彦根藩の大名である井伊家の菩提寺として機能していました。徳川幕府で権勢を振るった井伊直弼を含む、13代の井伊家当主の墓が祀られています。

このお寺は、元々1480年に光徳院として創建され、その後1659年に井伊家の第二代当主である井伊直孝の諡号にちなんで豪徳寺と改称されました。

豪徳寺駅と周辺地域は、新海誠監督のアニメ『君の名は。』および『秒速5センチメートル』のロケ地となっています。その街並みは映画のシーンとほぼ同じです。

豪徳寺は招き猫（まねきねこ）伝統の発祥地です。今日、訪問者は幸運を願うお供えとして置かれた何百もの白い猫の置物を見ることができます。