Senas namas anksčiau priklausė Tiškevičiui, kuris, anot legendos, buvo pastatytas grafo meilužei ir jo nesantuokiniam vaikui. Grafai Tiškevičiai - garsi Lietuvos didikų giminė, kilusi iš Lietuvos Didžiosios Kunigaikštystės rusiškų žemių bajorų. Pirmieji Tiškevičiai buvo stačiatikiai. 1597 m. jie tapo unitais, o XVII a. dauguma jų priėmė katalikybę.

Tiškevičiai iškilo XVI a., o didžiausią politinę galią įgijo XVII a. Jie gavo grafo titulą, buvo skiriami vaivadomis, kaštelionais, maršalkomis, seniūnais, raštininkais, iždininkais, lauko etmonais. XIX a. Tiškevičiai tapo turtingiausiais Lietuvos Didžiosios Kunigaikštystės žemvaldžiais.

Kaip ir visi didikai, Tiškevičiai turėjo savo giminės šūkį ir skiriamąjį ženklą - herbą. Šūkis skelbė - Deligas quem diligas! (Išsirink, ką myli!).