Замок герцогов д’Эсте (итал. Castello Estense) считается символом Феррары. В XIII в. севернее собора располагалась маленькая крепость — т. н. Башня Львов (Torre dei Leoni), которая в конце XIV в. была перестроена в существующий ныне замок герцогов д’Эсте архитектором Бартолино из Навары по заказу маркиза Никколо II д’Эсте. Начало строительству было положено в 1385 г., однако постройка здания, представлявшего собой окружённую рвом крепость с четырьмя мощными башнями по углам, затянулась на 200 лет. В XV в. замок стал резиденцией правителей Феррары. Замок Эсте — первая в Италии правительственная резиденция, защищённая пушками. В настоящее время все помещения замка открыты для посещения (в некоторых залах проводятся художественные выставки). В октябре 2006 года было принято решение об открытии в замке герцогов д’Эсте филиала российского Эрмитажа.