Sklabinský Podzámok leží na západnom úpätí Veľkej Fatry, v doline Kantorského potoka. Nadmorská výška v strede obce je 575 m n. m., v chotári 418-1393 m n. m. Severozápadnú časť chotára na prevažne odlesnenej rozčlenenej pahorkatine tvoria treťohorné fly