Hrad byl založen v polovině 13. stol. Vítkovci, aby chránil zemské pomezí a obchodní stezku z Čech do Rakous.
Zřícenina gotického hradu Vítkův Kámen se tyčí vysoko (1032 m. n.m) nad okolní krajinou na stejnojmenném kopci na pravém břehu Lipenské přehrady asi 4 km od česko-rakouské hranice.
Je nejvýše položeným hradem v Čechách. Dnes je zřícenina z části opravená a přístupná veřejnosti. Výhledy na Lipenskou přehradu, Kleť, Novohradské hory, šumavské hřebeny a za dobrého počasí i na Alpy jsou skutečně nádherné.