Dešiniajame Gryžuvos upės krante stūkso Pagryžuvio dvaro romantinio stiliaus rūmai pastatyti 1858 metais pagal įžymaus to meto architekto F. Rimgailos projektą. XVIII a. pabaigoje Pagryžuvio dvaras priklausė didikams Šemetoms, o vėliau - Pšeciševskių šeimai. Po pirmojo pasaulinio karo dvaras buvo nacionalizuotas ir atiduotas jėzuitams. Be to dvaras buvo stipriai apgriautas per karą atsidūręs ant fronto linijos. Iki II pasaulinio karo rūmuose veikė jėzuitų vienuolynas. Šiuo metu dvare veikia socialinės globos namai.