Если Вы его при этом не ревнуете, а просто всегда хотите, то можно радостно пользовать и дальше. А вот если уже страдания и ревность, желание быть рядом с ним постоянно, то это уже больше не просто на секс, пусть и улетный, а на любовь похоже. А тут уже выбирайте, надо Вам это или нет.
У меня такое было, и в виде просто секса, и в виде любви. Просто секс оказался безопаснее для психики и полезней для здоровья