我家的房子原本是两层，然后出钱拖关系加了两层楼，这边规划比较严格，应该算是违建吧，现在建好了，钱给清了包工头，工人没拿到钱，每天来我家闹事，说什么要我们拿钱给工人，因为包工头跟我是朋友关系，找他把钱用了 没钱给工人 ，工人每天到我家来要钱，还威胁我们，说报警，告劳动局，不知道这样违建，会不会影响，导致房子被拆，现在不知道怎么办！