Lipowiec to ruiny zamku biskupów krakowskich. Data powstania zamku nie jest pewna, ale według niektórych hipotez na wysokim wzgórzu nad wsią Babice stało wczesnośredniowieczne grodzisko, a później drewniany zamek bandytów.

Wiadomo jednak na pewno, że na przełomie XIII i XIV wieku biskup Jan Muskata lub jego poprzednik wybudował nowy zamek zwany Lipowiec. Zamek służył jako centrum administracyjne, był gruntownie ufortyfikowany i wielokrotnie przebudowywany na przestrzeni wieków.

Niestety, w XVII wieku padł ofiarą pożaru - jednego przypadkowego i jednego bojowego, kiedy podpalili go Szwedzi. Co ciekawe, zamek kilkakrotnie pełnił również rolę więzienia dla księży.

W 1800 roku kolejny pożar zniszczył zamek i popadł w ruinę, ale dzięki rekonstrukcji w latach 1961-1975 został oratowany. Jego piękny, starożytny wygląd zachęca turystów do zajrzenia do wnętrza.