Pałac Brera gości, oprócz ważnej Galerii, także Akademię Sztuk Pięknych, Bibliotekę Narodową, Muzeum Astronomiczne i Ogród Botaniczny. Zbudowany na starym klasztorze w XIV wieku, został odrestaurowany w XVII i kolejno powiększony w XVIII wieku, według projektu architekta Piermarini. W czasach rządu napoleońskiego umieszczono w centrum dziedzińca posąg Napoleona na podobieństwo Marsa, dzieło Antonio Canova.

Akademia Sztuk Pięknych Brera założona została przez cesarzową Marię Teresę Austriacką w 1776 roku, u jej boku powstało również pierwsze jądro Galerii, z obrazami pochodzącymi z kościołów i zakonów obalonych w czasach oświecenia. To dziedzictwo zostało jeszcze bardziej powiększone i wzbogacone podczas czasów Napoleona, ponieważ tu przybywały zbierane dzieła sztuki zajęte innym miastom Włoch północnych zdobytych przez armie napoleońskie. Rząd francuski zdecydował stworzyć w tym miejscu własny kąt artystyczny, dlatego odebrał dzieła Leonarda da Vinci i Raffaello Sanzio z siedziby arcybiskupa i usunął wiele rozmaitych fresków z różnych kościołów lombardzkich. Z Louvre przybyły później niektóre obrazy malarzy flamandzkich, by skompletować asortyment.

Po restauracji, prestiż Brera pozostał bez zmian a kolekcja ciągle powiększała się dzięki spadkom prywatnym, ponadto ze zdobyć i wymian z innymi muzeami, dążącymi do równowagi w kompletowaniu oferty wystawy. Pod koniec XIX wieku Galeria stała się niezależną od Akademii, tworząc instytut autonomiczny. Podczas II Wojny Światowej poniosła poważne szkody poprzez bombardowania, lecz szybko odbudowana i ponownie oddana do użytku publicznego w 1950. W latach 70-tych Galeria wzbogaciła się ważnymi kolekcjami prywatnymi z dziełami malarzy XX wieku, osiągając panoramę kompletną i wysoką jakość w całej historii malarstwa włoskiego od Średniowiecza aż po nasze dni.

W Galerii Brera są wystawione dzieła mistrzów: Gentile da Fabriano, Leonardo da Vinci, Raffaello, Bramante, Bellini, Piero della Francesca, Bramantino, Carpaccio, Crivelli, Signorelli, Rubens, Van Dyck, Rembrandt, Luini, Ferrari, Foppa, Borgognone, Mantegna, Carracci, Correggio, Lorenzo Lotto, Moroni, Veronese, Tintoretto, Dossi, Caravaggio, Longhi, Piazzetta, Tiepolo, Canaletto, Solimena, Luca Giordano i kolejno Boccioni, Carrą, De Pisis, Modigliani, Morandi.