Старший брат Жженова Борис в те годы учился на третьем курсе механико-математического факультета Ленинградского университета. Учился он хорошо, активно участвовал в общественной жизни вуза. Однако все это оказалось перечеркнутым после доноса, который состряпал на него кто-то из сокурсников. Тогда в Ленинграде, после убийства С. Кирова, органы НКВД проводили регулярные профилактические мероприятия и раскрывали «вражеские гнезда». В 1937 году наступила очередь ЛГУ. Когда чекисты явились в университет и стали по одному вызывать на допрос студентов, один из них и доложил, что Борис Жженов — враг народа. «Почему вы так решили?» — задали ему вопрос чекисты. «В декабре 34-го, когда мы все пошли прощаться с Сергеем Мироновичем Кировым, он это сделать отказался. Сказал, что у него нет теплой обуви, а он боится отморозить ноги. И добавил: если я пойду, Киров от этого все равно не воскреснет».
Этого заявления вполне хватило для того, чтобы обвинить Бориса Жженова в антисоветской деятельности и арестовать его. А следом настала очередь и его младшего брата — Георгия. Причем его арестовали тоже по доносу. Некий молодой актер написал, что тот во время съемок «Комсомольска» познакомился с военным атташе Америки и, находясь с ним в одном купе поезда, распевал песни, шутил и т. д. Этого оказалось достаточно, чтобы решить судьбу Жженова. Правда, арестовали его только со второго захода. Чекисты пришли за ним в последний съемочный день, и дирекция киностудии «Ленфильм» обратилась в НКВД с настоятельной просьбой отложить арест на один день, чтобы завершить съемки. И такое разрешение было получено. Актер благополучно отснялся и на следующий день был арестован. Им с братом «впаяли» 58-ю статью, дали по 8 лет и отправили в разные места: Борис попал в Норильск, а Георгий — в Магадан. А семью Жженовых выселили из Ленинграда.
Первые два года Жженов валил лес на таежных делянках Дукчанского леспромхоза (его напарником по двуручной пиле был советский разведчик Сергей Чаплин). А когда началась война, их этапировали в тайгу на золотые прииски. Там Чаплин погиб. Тысячу раз мог погибнуть и Георгий, однако судьба была милостива к нему, каждый раз отводя от него костлявую в самый последний момент. Например, в 1943 году он, будучи больным цингой, отмахал пешком по тайге 10 километров, чтобы добраться до прииска «17», где его дожидались две посылки, которые его мать еще в 1940 году отправила ему с воли. И он дошел. И хотя все содержимое посылок успело за три года испортиться, этот переход оказал на заключенного самое благотворное влияние. После него он вдруг понял, что выживет в этом аду.
А вот у его братьев судьба оказалась куда как печальнее: в 1943 году Борис умер в воркутинском лагере от дистрофии, а другого на глазах у матери расстреляли фашисты в Мариуполе.
Между тем в 1944 году Жженову вновь повезло — его приняли в труппу Магаданского театра. Театр был многожанровый: и опера, и оперетта, и драма, и эстрада, и цирк. Труппа состояла из 180 человек, причем 120 из них — зеки. Через этот театр прошли многие известные актеры и режиссеры: Леонид Варпаховский, Юрий Розенштраух, Александр Демич, Константин Никаноров, Вадим Козин и другие.
Именно в этом театре Жженов встретил свою первую жену, тоже актрису из Ленинграда по имени Лида. Ее арестовали как «врага народа» в 1937, приговорили сначала к расстрелу, но затем заменили его десятью годами лагерей. В 1946 году у них родилась дочь, которую назвали Аленой. В конце того же года они наконец освободились и вернулись на материк. Около года Жженов работал на Свердловской киностудии — фактически под гласным надзором. Потом его выгнали из-за отсутствия прописки, и он устроился в труппу маленького театра в городке Павлово-на-Оке. Но жизнь там продолжалась недолго. Уже в июне 1949 года (когда в стране началась вторая волна сталинских чисток) его вновь арестовали и бросили в горьковскую тюрьму. Через полгода объявили заочный приговор Особого совещания: ссылка в Красноярский край. Этап через всю Россию в Красноярск. Еще два месяца тюрьмы. И наконец, Норильск — Норильский заполярный драмтеатр, где он работал в качестве ссыльного актера вплоть до реабилитации в 1954 году (в этом же театре тогда играл и И. Смоктуновский).
