Manoma, jog piliakalnyje galėjo stovėti Alizeyde, Alileide, Alsėdžių vietovės pilis, minima 1253 m. balandžio 4 d. Kuldygoje Kuršo vyskupo Henriko ir Vokiečių ordino atstovų sudarytame Pietų Kuršo dalybų akte. Vėliau nuo XVII a. piliakalnis pateko į Žemaičių vyskupų dvaro teritorijoje įrengtą Žvėrinčių, kur buvo auginami įvairūs egzotiniai ir vietos gyvūnai.

Piliakalnis rodo, kad senieji alsėdiškiai buvo priversti gintis nuo priešų. Jis yra šiaurvakarinėje miestelio dalyje, Sruojos intako dešiniajame krante, kalvoje, kuri vadinama Žvėrinčiumi. Kalvos šlaitai nuo upelio pusės statūs, 8-9 m aukščio.