你好！根据中国法律规定，如果你认为村委未经你的同意就拆除了你的房子，并且在你不在场的情况下给你的儿子建房，这可能被视为违法。然而，具体的法律判断需要结合当地的法律法规和相关证据来确定。建议你尽快联系专业的法律顾问或律师进行详细的咨询和分析。他们可以为你提供更准确的法律意见和帮助解决问题。