頂加修繕遇到問題，請有經驗的大大幫忙出出主意。多謝！

去年底在土城買了一棟五樓頂加，原屋況所以五樓和六樓都需要修繕，也計劃要各增添一個廁所。現在遇到一個問題，就是隔壁五六樓的住戶，一個六十多歲老伯，跑來跟我說，六樓那面牆當年是他蓋的，因為負重過高他打算要把那面牆拆掉。如果那面牆拆掉的話，意思是我家六樓兩間臥室一間廁所的墻也都沒了，必須要重蓋。

我直覺是認為他是來要錢的。請問網上大大，應該要怎麼應對？

跟他老人家撕破臉不是我的選項，因為頂加修繕本來就是游走法律邊緣，如果他去檢舉，玉石俱焚，誰都沒有好處。