После возвращения из ссылки прежнего фаворита императрицы Алексея Шубина Лялин больше не появлялся при дворе. Он посвятил себя частной жизни. По словам современников, Лялин сильно переживал отставку от сердца Елизаветы и не мог видеть своего счастливого соперника.