我们两个是地邻。他是一老头，我地里面种的是药材，他犁地的时候把我家的药材给犁坏了，我到地里去问了一下他就骂我还推了我一下他女儿也在那里，上去一把抓住我头发了，我也抓住他女儿的头发了，后来别人把我们拉开了，我也回家了。过了一会我老公去地里看看我们的药材被毁成什么样，我老公刚到地里他女儿就往我老公身上扑，我老公把她推开了。他们非说我老公打他了，报了警，我把前因后果给警察说了一遍，警察看了看地 说了说他没他这样犁地的。他给警察说他这疼那疼的，要我们给他看病，我说我们没打他 警察也没法就说你给他看他给你看，要不你们两个都罚点钱，警察走了。到晚上他去诊所打针人家医生不给他打，他又打120住院去了(他有一个侄子是做律师的)他让村会计陪着他去我家让我赔钱，村会计不去，村会计打我电话说了下大概意思。我们没打他，我该怎么办？