Вспоминая детство и юность, папа говорил о постоянном недоедании и чувстве голода. Особенно тяжело было во время войны, когда его отец Асниэль ушёл на фронт. 

Но папа был единственным из четырёх братьев, который, когда его посылали отоваривать хлебные карточки, всегда приносил домой «довесок», не съедал его по дороге, несмотря на голод. Его мама Ольга (Хая) сказала, что только Рува будет ходить за хлебом, потому что он самый честный. ... 

Папа рассказывал: "Однажды мы с папой пошли в баню, а когда должны были возвращаться домой, уже наступил комендантский час. Асниэль вспомнил, что забыл пропуск. Он попросил меня бежать домой за пропуском. В подъезде моего дома двое сказали "Снимай пальто!". Ограбления по вечерам, особенно в подъездах, были очень частыми". 

Смерть Сталине в 1953 году была встречена в семье Зильберов, как облегчение. Папа помнил, как ночами не спал его отец Асниэль, боясь ночных арестов. 

Когда мне было три года родители купили половину частного дома на улице Полоцкой. У нас были две небольшие комнаты и огород. Но из-за нехватки денег, родители стали сдавать одну комнату квартирантам, которые часто сменялись. Мне было уже пять лет, когда комнату сняли две девушки-подруги Татьяна и Надежда. Татьяна училась на медсестру. Она стала брать меня с собой на работу к больным, которым Татьяна делала уколы. Тогда я впервые увидел, что люди, к которым мы приходили, живут в тесных коммунальных квартирах с тусклыми лампочками в длинных, заставленных старыми шкафами коридорах, с затхлым запахом старых ненужных вещей. Старые люди были немощны и одиноки.