Pagryžuvio piliakalnis su gyvenviete (dar vadinamas Kalvinų kalnu, Pilies kalnu) įrengtas Gryžuvos kairiajame krante esančiame aukštumos kyšulyje. Iš šiaurės, šiaurės vakarų ir rytų jį juosia Gryžuvos upė ir jos slėnis. Iš pietų prieina gretima aukštuma. Šlaitai statūs, 12¬-13 m aukščio. Aikštelė netaisyklingo ovalo formos, pailga šiaurės – pietų kryptimi, 11 m pločio, 18 m ilgio (buvo apvali). Aikštelės rytinė dalis ir šiaurinis šlaitas nuplauti Gryžuvos. Piliakalnis apaugęs lapuočiais, pomiškis iškirstas, aikštelė dirvonuoja. Pietvakarinėje piliakalnio papėdėje 1 ha plote yra papėdės gyvenvietė.