您好，根据我国相关法律规定，宅基地使用权人有权在其宅基地范围内进行建房及附属设施。如果您已经按照村委出具的证明信建造了房屋，并且没有违反任何法律法规的规定，那么您有权继续使用该宅基地并进行必要的维护和管理。然而，如果前邻居认为您的行为影响到了他们的权益，您可以考虑通过协商或调解解决纠纷。同时，建议您及时与村委会沟通，了解相关的政策规定，以便更好地保护自己的合法权益。