Здание было построено в 1585 г., как городская больница Миколая Кшиштофа Радзивилла. В 1628 г. оно было отдано в распоряжение Бяльской академии, академической колонии Ягеллонского университета. Расширенно в период до 1650 г., в 1840 г., и приблизительно в 1870 г. Находилось под управлением Краковской академии в период до 1777 г., в 1777-1795 гг. под руководством Вильнюсской академии, затем гимназии: с 1864 г. российской, а с 1916 г. польской им. Юзефа Игнация Крашевского, также ученика этой школы.