以前大学院で学んでいた関係で、こちらで教鞭をとっている日本人の方と何度かお会いする機会があったのですが、その人は、アルコールやドラッグの問題を抱えているようです。

ですので、付き合いをすっぱりとやめたのですが、貸している本があって困っています。もう二度と会いたくないし、本はなくなったものとあきらめた方がいいですかね。

あきらめた方がいいと思います。

会うと面倒な事に巻き込まれそうだから
私も本は諦めた方がいいと思う。

どうしても大事な本なら本の受け取りのために一度会うしかないのでは。その後連絡あってもすべて無視でいけばいいだけ。

どうでもいいような本(または買えば手に入るような）なら嫌な思いしてまで会う必要はないでしょう。