Skalní hrad Stohánek byl vybudován na strmém pískovcovém skalisku Stoh rodem Vartemberků v první polovině 15. století. Stohánek píše velmi krátkou historii, v témže století totiž také zanikl. Dřevěná konstrukce vzala za své a do dnešní doby se dochovaly pouze tesané skalní místnosti, tesané schodiště, výklenky bývalé křížové cesty a kamenné zbytky ochozů hradu.

Zajímavostí je, že ještě ke konci 18. století se v těchto místech usídlili poustevníci, kteří si do skály vytesali další světničky. I z toho důvodu je velmi těžké odhadovat, jakou původní podobu mohl skalní hrad Stohánek mít.

Každopádně o zdejší poustevně se dočítáme i v povídce Poslední poustevnice Karolíny Světlé. Než byla poustevna na Stohánku opuštěna, přebýval tu prý poustevník s mladým pomocníkem. Z pomocníka se ovšem vyklubala dívka, jež utekla před svým pánem - místním chlípným kupcem. Ženská péče se poustevníkovi zalíbila natolik, že si po odchodu dívky našel pomocnici novou. Za nemravný život byl poté z pousteven vyhnán.