我是2017年买的盛世御苑1号楼801室，2019年10月结清房款40多万后领取到钥匙并开始装修，装修过程中来了一个南姓的人对我施工进行阻拦，声称这套房子是开发商开发楼盘时给他许诺的三套置换楼房中的一套，并于2016年签定了协议，后经我与开发商取得联系，开发商告知我，姓南的这个人确属拆迁户，但是实际楼盘过程中并未拆除他的房子，协议是无效的，开发商说这套房子是我经过售楼部正规购买的，房子就是我的，让我只管装修，不用理会姓南的，让他有事直接找开发商。但姓南的不找开发商或者售楼部，就耍泼无赖在我房子不走，警员来了说经济纠纷，只能开发商解决，但开发商一直不出面，我该怎么办？