W tym miejscu według starej prusickiej tradycji już w 1140 roku miała być kaplica pw. Nawiedzenia Najświętszej Marii Panny. Jednak pierwsze źródłowe potwierdzenie jej istnienia pochodzi z 1312 roku. W 1528 roku kaplicę rozebrano, gdyż groziła zawaleniem. Na jej miejscu postawiono jednak nową i większą, a w 1555 roku urządzono przy niej plac ćwiczeń dla strzelców. Funkcjonował tu też cmentarz. Ostatecznie kaplicę zlikwidowano w 1803 roku, a cmentarz przed 1900 rokiem.
W 1900 roku z inicjatywy właścicieli Prusic, rodziny Hatzfeldtów, w tym miejscu wybudowano nowoczesny budynek, który miał stanowić przytułek dla ubogich. Przez pierwsze cztery lata, do czasu oddania Szpitala po drugiej stronie ulicy, opiekowano się tu też chorymi. Po II wojnie światowej szpital przestał działać, a tu w 1947 roku uruchomiono ośrodek zdrowia z lekarzem dr. Andrzejem Bullerem. Ośrodek zdrowia działa tu do dzisiaj.
