O původním gotickém hradu, jež zde před zámkem stával, se dnes ví jen velmi málo. Staré bruntálské stavbě dali renesanční punc páni z Vrbna, kteří sem v 16. století přesídlili. Nových zámeckých prostor si ale dlouho neužili - kvůli účasti na stavovském odboji jim byl po bitvě na Bílé hoře majetek zkonfiskován a připadl Řádu německých rytířů.

A to se na Bruntál řítila další výzva, jež přinesla jednu katastrofu za druhou - Švédové. Bruntál byl během třicetileté války Švédy několikrát vydrancován, opevnění bylo pobořeno, úroda zničena, rybníky vypuštěny, městské domy vypáleny, obyvatelé prchli anebo byli zabiti. Po ničivých švédských výpadech pak hned vzápětí přišlo několik morových ran, opakující se po celé následující století. Aby toho nebylo málo, roku 1764 zasáhl celé město včetně zámku ničivý požár. Brzy poté byla zahájena přestavba Bruntálského zámku - do barokní podoby se zachovalými renesančními prvky, jež je zdobí dodnes.

Řád německých rytířů zámek vlastnil až do vzniku Československa. A z Německa se blížila nová hrozba - po Mnichovské dohodě se bruntálský zámek stal sídlem nacistické správy. Město toho času navštívil osobně Adolf Hitler a z balkónku zámku k místním obyvatelům promluvil. Po válce pak došlo k odsunu německého obyvatelstva a zámek znovu připadl státu.

Dnes zámek Bruntál funguje jako muzeum - kromě zámeckých prohlídek zde nabízí také dvě stálé expozice věnované přírodě Bruntálska a řemeslům v tomto regionu. Na zámku i v zámeckém parku pak probíhají nejrůznější kulturní a společenské akce.