Долгое время считалось, что в доме была старая корчма. В последние годы выяснилось, что здесь располагалась резиденция — курия архиепархии. Дом сооружен между XVI и XVII вв. на месте сгоревшего деревянного здания подобного же назначения.
Двухэтажный дом — асимметричный в плане, с двумя неодинаковыми, неправильной формы ризалитами со стороны двора. Фасад повторяет изгиб улицы. Складывается впечатление, что во всем здании нет ни одного прямого угла. Портал главного фасада — въезд, над его аркой вмурованы два пушечных ядра. Фронтон восточного фасада скомпонован из нескольких рядов парных аркатур, носящих как готические, так и ренессансные черты. В настоящее время здание реставрируется (арх. Д. Заряцкене).