Malý hrad byl vybudovaný v městské zástavbě, zcela netradičně v již vzniklém městě Úštěk. Z tohoto pohledu jde o opravdový unikát. Jádro zachovalých budov hradu vzniklo v poslední třetině 14. století. Jde hlavně o budovu paláce, která má ve své dolní části velmi silné zdivo. V období gotiky byl palác různě opravován a dostavován. V první části 16. století byl palác doplněn velkým sálem v druhém patře. Ve sklepech paláce jsou velké prostory vytesané přímo do pískovcové skály. K severozápadnímu cípu je nezvykle připojena věžovitá budova barokního rázu, která šikmými okny prozrazuje svůj původní účel jako schodiště. V roce 1779 byl hrad prodán právovárečnému měšťanstvu a byl užíván jako sladovna. Stavební úpravy z tohoto období porušily původní stavbu hradu (přistaven komín, zrušeno schodiště, změny klenby). Po roce 1945 hrad chátrá a vinou necitlivých stavebních zásahů je narušena jeho statika.
V současnosti probíhá záchrana tohoto vzácného objektu.
V době městských slavností tvoří hradní nádvoří neopakovatelnou kulisu zejména divadelních a hudebních vystoupení.