Если речь идет о прошлом, то используется модальный перфект (modal perfect), т. е. should + have + past participle: