Žemaičių vyskupystės muziejus įsikūręs vėlyvojo baroko pastate, buvusios Varnių (Žemaičių) kunigų seminarijos rūmuose, pastatytuose apie 1770 m. Per šį laikotarpį daug kartų keitėsi rūmų paskirtis ir šeimininkai. Labiausiai rūmai buvo nugyventi per sovietmetį. Atkūrus Lietuvos nepriklausomybę, buvo suvoktas kultūrinis Žemaičių kunigų seminarijos vaidmuo, todėl pradėta svarstyti, kaip būtų galima pastatą panaudoti. Pagaliau 1999 m. restauruotuose rūmuose įkurtas Žemaičių vyskupystės muziejus.
Vyskupavimo laikotarpiu M. Valančius gyveno netoli seminarijos stovinčiame mediniame vieno aukšto name. Nors namas ir neatrodė kaip rezidencija, vyskupą jis tenkino. Mažai kam žinoma, kad laisvalaikiu M. Valančius daugiausia laiko skirdavo sodininkystei, XIX a. madingam dvarų ir klebonijų užsiėmimui. Šalia šio medinio namo M. Valančius savo rankomis buvo pasodinęs topolių alėją ir užveisęs sodą: augino tabaką, apie 20 vaistažolių rūšių. Iki mūsų dienų neišliko nė vieno to meto vaismedžio, tačiau buvusio sodo vieta tebevadinama Valančiaus darželiu. Apsilankę Žemaičių vyskupystės muziejuje, neaplenkite šio mūsų tautos istorijos kūrėjo puoselėto žemės lopinėlio.
Daugiau lankytinų vietų susijusiu su vyskupu M. Valančiumi rasite Žemaitijos turizmo gido internetinėje svetainėje www.zemai.lt.