Вы сами ответили уже на свой вопрос – вы были с ним счастливы именно потому, что этот человек не имел никакого отношения к вашей жизни. С ним вы от вашей жизни на время освобождались. Такой эффект дают некоторые вещества.
Вы просто соскочили с иглы. Придется переломаться.