W 1823, po przeniesieniu stolicy biskupiej z Chełmży do Pelplina, na terenie dawnych użytkowych ogrodów cysterskich wzniesiony został Pałac Biskupi, który wspaniale wkomponowano w krajobraz urządzonego Ogrodu Biskupiego, rozlokowanego na wysokim, południowym brzegu rzeki Wierzycy.
Cały teren otoczono ceglanym murem, częściowo wykorzystującym dawne ogrodzenia klasztorne.. Budynek wzniesiony pierwotnie w stylu neoromańskim, między rokiem 1927 a 1928 przebudowany z inicjatywy biskupa Stanisława Okoniewskiego, otrzymał formę neoklasycystyczną, poprzez dodanie frontowego portyku z kolumn oraz tarasu od strony parku.