《中华人民共和国城乡规划法》明确规定，任何单位和个人不得擅自改变建筑物的用途和性质。如果在建房屋对相邻居民造成影响，则应当根据实际情况协商解决，并由建设单位负责进行补偿。 另外，《中华人民共和国建筑法》规定，建设工程开工前，建设单位应当按照国家有关规定向工程所在地县级以上人民政府建设行政主管部门申请领取施工许可证或者开工报告。未经批准，建设单位不得开工建设。因此，在征得当地相关部门同意的情况下，可以继续施工。