Дальнейшая судьба Венеры напрямую связана с судьбой Летнего сада. После разрушительных наводнений 1777 и 1824 годов многие из скульптур, что оставались невредимыми, из Летнего сада убрали. Венера попала в Таврический дворец, откуда в середине XIX века была перенесена в Эрмитаж. Тогда-то за ней и закрепилось современное название – Таврическая.