Об этом, в частности, свидетельствовало письмо преподавателя 2-й артиллерийской спецшколы в Москве В.В. Мартышина И.В. Сталину о плохой успеваемости и плохом поведении его сына Василия. В ответе В.В, Мартышину И.В. Сталин писал: «Василий — избалованный юноша средних способностей… Его избаловали всякие «кумы» и «кумушки», то и дело подчеркивающие, что он «сын Сталина», Я рад, что в Вашем лице нашелся хоть один уважающий себя преподаватель, который поступает с Василием, как со всеми, и требует от нахала подчинения общему режиму в школе. Василия портят директора, вроде упомянутого Бами, люди-тряпки, которым не место в школе, и если наглец-Василий не успел еще погубить себя, то это потому, что существуют в нашей стране кое-какие преподаватели, которые не дают спуску капризному барчуку». Сталин признавал: «К сожалению, сам я не имею возможности возиться с Василием. Но обещаю время от времени брать его за шиворот».
Как отмечал Владимир Аллилуев, для Сталина «в годы войны семья отодвигалась на совсем второстепенные позиции». После захвата немцами в плен сына Сталина Якова, военные старались держать другого его сына Василия в тылу, направив в Инспекцию ВВС.
В своей книге В. Аллилуев подробно описал нездоровую обстановку, которая сложилась в Зубалово, где жили дети Сталина и его другие родственники. По словам В. Аллилуева, «Василий познакомился с Каплером, а через него со многими деятелями литературы и искусства. В Зубалове начались гульбища и застолья, в них принимали участие А.Я. Каплер, Р, Кармен со своей красавицей женой Ниной», а также другие видные представители столичной интеллигенции. В атмосфере этих беспрерывных «гульбищ» и «застолий» «Василий сошелся с женой Р. Кармена, а у Светланы начался роман с Люсей — так звали Каплера».
Характеризуя личную жизнь лауреата Сталинской премии Алексея Каплера, Э. Радзинский, видимо, имел основания назвать его «главным сердцеедом столицы» и «плейбоем». Судя по воспоминаниям С. Аллилуевой, «главный сердцеед столицы» активно занялся «воспитанием» 16-летней дочери Сталина. По словам Аллилуевой, «он давал мне «взрослые» книги о любви, совершенно уверенный, что я все пойму».
Роман же Василия с Ниной Кармен сопровождался скандалами в Зубалово. А в это время, весной 1943 года, как писал Владимир Аллилуев, сын наркома Шахурина убил из трофейного «вальтера» дочку советского посла Уманского, а затем покончил жизнь самоубийством. Вскоре выяснилось, что дети Микояна, а также ряд других детей высокопоставленных лиц вели странную игру в подпольную фашистскую организацию, «фюрером» которой был сын Шахурина. Участники «подпольной организации» были подвергнуты аресту, а затем направлены на принудительные работы. (За год до этих событий сын Н.С. Хрущева Леонид после выхода из госпиталя весной 1942 года, оказавшись в пьяной компании, выстрелил по бутылке, поставленной на голову офицеру, и, промахнувшись, убил его. Дело Леонида рассматривал военный трибунал, ему грозил расстрел, но он был направлен на фронт.)
Узнав о скандалах в Зубалово, И.В. Сталин поручил Генеральному прокурору СССР разобраться в поведении Василия в отношении жены Р. Кармена. Василий получил 15 суток ареста, а 26 мая 1943 года И.В. Сталин как нарком обороны приказом снял В.И. Сталина с должности командира авиационного полка и запретил ему давать какие-либо командные посты «впредь до моего разрешения». Нарком обороны также приказывал: «Полку и бывшему командиру полка полковнику Сталину объявить, что полковник Сталин снимается с должности командира полка за пьянство и разгул и за то, что портит и развращает полк».
Лично вмешался Сталин и в отношения Алексея Каплера и своей дочери. Как вспоминала Светлана Аллилуева, Сталин неожиданно пришел в ее комнату, чтобы изъять письма и фотографии А. Каплера, объявил ей, что у того есть немало других женщин, и он, к тому же, является английским шпионом. По этому обвинению А. Каплер был арестован и сослан на пять лет в Воркуту.