Gotický palác Pirkštejn s obrannou věží byl postaven na skalnatém ostrohu nad řekou Sázavou. Hrad Pirkštejn je jedním ze dvou hradů, který střežil městečko Rataje nad Sázavou. Oba ratajské hrady jsou spolu historicky úzce spojeny, založeny byly Jindřichem z Lipé.

Pirkštejn nese svůj název podle Pánů z Pirkštejna, což je rod, který vznikl rozrodem pánů z Lipé. Pirkštejnští přijali své jméno podle svého rodového sídla - hradu Sloup, v němčině Bürgstein. V držení hradu se vystřídali dále páni ze Švamberka, Viktorín z Poděbrad (syn českého krále Jiřího z Poděbrad) a řada dalších rodů.

Zatímco byl hrad Rataje nad Sázavou postupem času přeměněn v renesanční zámek, Pirkštejn přestal vyhovovat jako rezidenční objekt. Za selského povstání roku 1627 byl navíc Pirkštejn těžce poškozen a následně již zcela opuštěn. O století později byl přestavěn na faru se zvonicí v původní hradní věži. Část hradního příkopu byla zasypána.

Podobu z 18. století si hrad zachoval dodnes a ani majitele nezměnil - hrad patří církvi a veřejnosti je přístupný pouze příležitostně. Objekt si nedávno pronajal pražský kavárník Ondřej Kobza a místo tak oživil o občasné kulturní dění.