Pevný hrad na masivním žulovém skalisku na okraji obce Kámen nedaleko Pacova jako by byl zosobněním klidu a vlídnosti zdejší krajiny. Původně gotický hrad byl postaven v polovině 13. století. První písemné zmínky pochází z let 1316 a 1318. V letech 1327 až 1504 je Kámen královským lenním hradem. V letech 1356–1366 jej nechal Jindřich z Ziegelheinu, mistr královské kuchyně, přestavět na hradní palác. Od roku 1523 hrad téměř 200 let vlastnila jedna z větví významného českého rodu Malovců.
V polovině 16. století dosáhlo panství Kámen největšího rozmachu. K hradu patřilo stejnojmenné městečko a deset poddanských vsí. Z maloveckých držitelů se do historie Kámenu nejvýznamněji zapsal rytíř Jan Kryštof Malovec z Malovic (držel hrad od roku 1640). Za něho byl hrad znovu přestavován, bylo vystavěno jižní obytné křídlo a vstupní věž (1673). Na západním okraji vsi dal vystavět ranně barokní kapli Panny Marie Bolestné a v ní zřídil rodinnou hrobku. V průběhu 18. a 19. století se držitelé hradu a panství často střídali a hrad ztrácel na svém významu. Současná podoba sídla je však výsledkem pseudogotických úprav z let 1860–1870, které provedl Václav Enis z Atteru. Po roce 1948 byl hrad poslednímu soukromému majiteli Antonínu Fleissigovi vyvlastněn. Státním kulturním majetkem byl Kámen prohlášen v roce 1953.
Od 1. 1. 2003 byl hrad Kámen samostatnou příspěvkovou organizací Kraje Vysočina a od roku 2011 se hrad Kámen stal pobočkou Muzea Vysočiny Pelhřimov, p. o.
Jádro hradu, ležící na vrcholu skalního výchozu, je tvořeno komplexem budov uspořádaných do obdélníka, ze západu pak navazuje další budova. Na jihu hradního jádra se nachází čtyřhranná věž, předhradí, jehož některé budovy se zachovaly dodnes, např. jižní vstupní brána, bylo situováno z jihu a východu jádra.
V současnosti jsou zde pro vás připraveny dva prohlídkové okruhy, z nichž jeden návštěvníkům představí způsob bydlení a životního stylu na panském sídle v 19. a počátkem 20. století. Druhá trasa nabízí prohlídku expozice historických jednostopých vozidel a ukázku starého paláce.