几年前邻居开荒种茶，开荒的时候开到我的山有200平左右。前几天有跟邻居协商把开过我山头的地方还给我。两人已经一起去拉线划界限。他种在我山头上的茶树说不要。我就去砍掉。过几天他又报警说我砍他的茶树故意破坏他的财物。这样我该怎么处理呢。