W roku 1740 Heinrich hrabia von Brühl kupił od spadkobierców hrabiego Christopha Heinricha von Watzdorfa dolnołużyckie władztwo Pförten (obecnie Brody). W kolejnych latach nabył dalsze dobra rycerskie w okolicy: Zauchel (Suchodół), Datten (Datyń), Jehser (Jeziory Dolne) oraz Kohlo (Koło) – i ostatecznie w 1746 miasto i rejon Forst. Utworzone przez Brühla państwo stanowe Forst-Pförten było drugą co do wielkości domeną na Dolnych Łużycach.
W latach od 1741 do 1747 Heinrich hrabia von Brühl polecił przebudować i rozbudować trzyskrzydłową posiadłość hrabiego Watzdorfa według planów Johanna Christopha Knöffla. Przed pokrytym potężnym mansardowym dachem pałacem wybudowano dwie podłużne oficyny, tak że powstał w ten sposób imponujący dziedziniec. Otaczał go rozległy barokowy ogród.
Pałac w Brodach był „rezydencją“ hrabiego Brühla, który stworzył tu ważny ośrodek swojego władztwa. Gdy nie bawił w Dreźnie lub Warszawie, przebywał ze swoją rodziną w Brodach.
Pałac został w 1758 roku spalony z rozkazu króla Prus Fryderyka II. Po śmierci premiera majątek w Brodach przejął najstarszy syn Alois Friedrich hrabia von Brühl. Jako majorat majątek ziemski zawsze był dziedziczony przez najstarszego syna lub kolejnego męskiego potomka. Brody pozostawały do 1945 roku w posiadaniu hrabiów Brühl. Rodzina zamieszkiwała w obu oficynach po lewej i prawej stronie spalonego pałacu. Główny budynek odzyskał w latach od 1919 do 1924 swój mansardowy dach, został jednak w 1945 roku ponownie splądrowany i podpalony. Od 1945 roku Brody należą do Polski.
Obecnie: Pałac jest dzisiaj ruiną. W oficynach mieści się hotel. Park jest dostępny publicznie i jest pielęgnowany przez społeczników z Polski i Niemiec, w tym przez członków stowarzyszenia krajowego „Landesverein Sächsischer Heimatschutz”.