Лейтенант Иванов был из бедной рабочей семьи. В 1934 году его отца, работавшего грузчиком, как сознательного комсомольца взяли в охрану тюрьмы, и в доме он стал считаться чекистом. Через какое-то время отец начал «работать» в расстрельной команде, им дали маленькую, но отдельную квартиру. Отец рос в званиях, стал старшиной, получил должность заместителя коменданта и был награжден орденом и именным оружием. Маленький Володька очень им гордился и твердо решил идти в чекисты.
В 1937‐м отец стал крепко попивать, уезжал в долгие командировки, несколько раз лежал в психушке. В начале 1938‐го его расстреляли. Семье было объявлено, что отец геройски погиб при выполнении ответственного задания партии. Иванов-младший, может, и усомнился бы, ему уже было тринадцать лет, и родителя он видел в основном пьяным, но отца посмертно наградили орденом, а им дали большую пенсию по потере кормильца. Орден шестикласснику Иванову-младшему вручали при всей школе.