Na ľavom brehu rieky Hron sa na skalnom brale vypína zrúcanina stredovekého hradu Šášov. Pravdepodobne ho postavili bratia ostrihomského arcibiskupa Štefana Vanču, Vincent a Peter v r. 1242 – 1252, o čom svedčí prvá písomná zmienka z roku 1253.

Počas svojej existencie bol hrad viackrát prestavovaný. Posledné prestavby uskutočnil významný šľachtický rod Dóczyovcov, ktorí ho vlastnili od r. 1490  až do vymretia rodu (r. 1647). Tak ako všetky stredoveké hrady, nevyhol sa ani Šášov protihabsburgským povstaniam. V roku 1678 sa ho zmocnili povstalecké vojská Imricha Tökölyho. Hrad Šášov bol zničený v r. 1708, keď cisárske vojsko v poslednej chvíli vyhodilo hrad do vzduchu, aby ho nezískali turecké vojská. Hrad bol zničený a odvtedy chátra. Popod hrad viedla významná tzv. Matejova cesta, ktorá spájala dôležité banské mestá. Po nej sa vozilo striebro a zlato do Kremnice a z nej vyrazené mince do Viedne. Naproti hradu s prevýšením 45 m bola vysunutá pevnosť (bašta), ktorej história siaha do 1. pol. 15. st. Dodnes sú tu zrúcaniny pevnosti a ľudia tomuto miestu hovoria Zábaštie.

Rekonštrukčné práce na hrade prebiehajú od roku 2009. Pod hradom sa rozprestiera mestská časť Žiaru nad Hronom – Šášovské Podhradie. Prvýkrát sa spomína v r. 1363 ako Villa sub castro Saaskew (osada pod hradom Šášov). Na začiatku cesty vedúcej na hrad je v murovanom dome umiestnené malé múzeum, v ktorom sú zbierkové predmety dokumentujúce hmotnú i duchovnú kultúru obcí Šášovské Podhradie a Ladomerská Vieska. Expozíciu dopĺňajú archeologické nálezy z hradu Šášov.