隣に5kmぐらい離れたところに住んでいる他人名義の空き地があって、去年うちに買わないかと不動産屋通して打診されたが、田舎の使いみち無い土地なんで断った

それから全く手入れせずに草ぼうぼうで困って、地主に刈ってくれるよう市を通して何度も依頼してるが、腹いせなのか知らんぷりの放置プレイされてるんで、敢えて勝手に畑にして耕作してやろうかと思うけど、地主にバレて訴訟されたらどんな損害が考えられますか?