people accusing me of doing this. it starts getting to you after a while

意味がわかりません。分る方いますか？
起訴するって意味でしょうか？

この場合、人から非難されるとか、責められるとかそういうことだと思います。
しばらくこういう状態が続くと精神的にこたえるよ。という感じかと。 　

ん？自信ありませんが…翻訳ツールによると「因果応報」的に読めますが…つまり「非難している人に、そのうちにそれが及ぶ」とは前後の文脈から読めませんか？ 　

２の方の解釈は違います。Ｙｏｕと書いていますがこれは他人のことでなく、発言者の自分のことを客観的に言っています。なので１さんの解釈があっています。 　

「〜をしてると、皆がいちゃもんをつけてくるんだ。しばらく続けば、誰だって気になってくるよ。」
Res1さんと同じです。非難されるとか、責めるとかいう意味だと思います。

get to you っていうのは、「精神的に攻撃される・疲れる・気になる」という感じですか。
この人は me ではなく "you" と言ってますがつまり「誰だってそうだよね（私はそうだよ）」という意味合いかな。