我想问一下，我的男朋友他是部队的，但是他老家谈了个订婚的女朋友，他一开始也没有告诉我，休假期间他带我出去玩儿，他回家和那个女的也发生了关系，这应该是作风有问题，他的事被他家人知道后，他就肆意谩骂我，诋毁我，他从老家回来我去接他，由于他态度很恶劣，我就把他一些东西扣留了，请问我的行为犯法吗？他说要告我拿他的东西，后期我该怎么做？