В твоей ситуации всего два выхода.
Принять и уважать его решение. Понять и, если он продолжает кричать о любви и желании тебя видеть, осознать, что он просто переводит все отношения на прежнюю стадию, то есть снова приезжать к тебе, когда захочется, и уезжать домой. Ты любишь и готова идти на такие условия. Что ж, твое право.
Другой выход – найти силы сказать себе «стоп». Знай, что варианта «Попробую его вернуть во что бы то ни стало» у тебя нет.