家里买了别人的地做房子，应只用了一半的地做房子，另外一半没做，今年想把另一半地来继续做房子，卖的人尽然闹事情说“现在这块有他们的份了”，不让我做了，这是怎么回事？还有当时的证据。