Prawo budowlane

Witam. Wykonawca remontu dokonał zmian w strukturze wewnętrznej mojego domu na moje życzenie (przesunięcie jednej ściany: wyburzenie starej i postawienie nowej o ok. pół metra; w drugiej częściowe usunięcie całej ściany). Nie poinformował mnie o tym, że potrzebne są jakiekolwiek projekty. W chwili obecnej straszy mnie zgłoszeniem do Urzędu Miejskiego i Nadzoru Budowlanego, że po pierwsze zapłacę sowitą karę a po drugie będę musiał przywrócić wszystko na swój koszt do stanu poprzedniego. Kto kogo może zgłosić? On mnie jako właściciela czy ja jego, że on dokonał samowoli budowlanej i nie poinformował mnie o fakcie wykonania stosownych projektów?