Христиане могли проигрывать львам на арене, но в идеологической борьбе они победили. В 325 году н. э. император Константин запретил гладиаторские бои. К концу iv века закрылись все гладиаторские школы, в начале v века были запрещены травли. Римляне оставались верны себе – несмотря на запреты, и сражения и травли продолжались еще довольно долго. Но потом и власти императоров пришел конец, город опустел, многолюдные зрелища прекратились сами собой. В 1332 году традиция ненадолго воскресла: на арене Колизея устроили бой быков. Это был единичный случай – до нового времени Колизей использовался как монастырское общежитие, мастерская, часть оборонительных сооружений и, конечно, как строительный карьер, но кровавые зрелища туда уже не вернулись.
Колизей продолжал поражать воображение даже в состоянии полного запустения и заброшенности, но с течением времени римляне забыли, для чего это здание предназначалось. В средневековье одно из самых популярных мнений заключалось в том, что это храм бога Солнца и обитель демонов, над ним когда-то возвышался гигантский позолоченный купол, а построил его не кто иной, как поэт Вергилий, знаменитый некромант. По другой версии, это был дворец императоров Веспасиана и Тита (по крайней мере, императоров угадали правильно).