А затем перешел на службу в Главный концессионный комитет при Совете Народных Комиссаров СССР – ведомство при Правительстве СССР, занимавшееся предоставлением концессий иностранным физическим и юридическим лицам для торговой и производственной деятельности. Концессии были необходимы для скорейшего восстановления разрушенной в годы гражданской войны промышленности.
Задачу Концессионному комитету В. И. Ленин ставил так: «На Концессионный комитет Госплана возлагается обязанность подбирать и сосредоточивать у себя подробные материалы о всех концессионных переговорах и концессионных делах РСФСР с иностранными капиталистами, ведущихся как в России, так и за границей».
Задачу-то ставил Ленин, а председателем Главконцескома был назначен Троцкий! Лев Давидович и взял в штат А. Д. Пергамента, с которым в 1925–1926 годах тесно сотрудничал. Вот этого Абраму Давидовичу в эпоху «большого террора» простить не могли. Уже в 1926 году исключили из ВКП(б), в которую он вступил в 1920 году в возрасте 17 лет. В 1927 году Пергамент был арестован органами ОГПУ за троцкистскую деятельность и сослан на два года в Вятскую губернию. В 1936 году приговорен Особым совещанием НКВД к пяти годам ИТЛ. Отбывал срок в Учпечлаге.
3 июня 1937 года при этапировании партии заключенных из Чибью (Ухтлаг) в Воркутлаг он составил вместе с семью другими этапниками письмо в ЦК ВКП(б) и Исполком Коммунистического Интернационала о незаконных репрессиях, о произволе администрации лагерей, о нечеловеческих условиях и рабском труде. А. Д. Пергаменту принадлежит инициатива составления письма и окончательная редакция. На это обращение власть откликнулась тем, что четыре соавтора письма из восьми 13 января 1938 года были приговорены тройкой УНКВД Архангельской области «за контрреволюционную деятельность» к расстрелу.
17 июля 1938 года лаготделение Верховного суда Коми АССР по ст. 58–10 и 58–11 УК РСФСР вынесло расстрельный приговор и А. Д. Пергаменту. Но 20 сентября определением спецколлегии Верховного суда РСФСР наказание в виде расстрела ему заменено на 10 лет ИТЛ и 5 лет ссылки. Работал он на заготовке и сплаве леса. «Отмотав» тюремный срок к 1948 году, освобожден и направлен на спецпоселение в пос. Акчатау Шетского района Карагандинской обл. В 1956 году реабилитирован Карагандинским облсудом «за отсутствием состава преступления». После реабилитации поселился в Москве.
При жизни отца я не был с ним знаком, лишь изредка слышал эту казавшуюся мне смешной фамилию (читатель, разумеется, знает, что пергаментом называют материал для письма из недубленой сыромятной кожи животных, используемый до изобретения бумаги, и древние рукописи на таком материале). Когда отец умер, я счел своим долгом сообщить об этом всем, чьи адреса были в его записной книжке. Абрам Давидович Пергамент откликнулся мгновенно:
«Дорогой Сергей Яковлевич!
Я получил Ваше очень печальное для меня сообщение. Примите, пожалуйста, от меня и других моих знакомых воркутян, знавших Якова Давидовича, самые искренние соболезнования по поводу кончины Вашего отца.
Мне довелось не только лично знать Якова Давидовича, но и в течение ряда лет работать с ним бок о бок в лагере, быть его другом. Все любили и глубоко уважали Вашего отца и как чудесного товарища, всегда бодрого, приветливого, неунывающего, умного и приятного собеседника, и как человека высокой принципиальности, героического характера, кристальной честности и чистой души, сохранившего и даже укрепившего свои действительно прогрессивные идеи, вопреки мраку и насилию сталинских времен.
К сожалению, так уже принято, что о человеке прямо говорят хорошее только прощаясь с ним навеки, а при жизни стесняются это делать и выражают ему свои чувства только радостью при встречах.
Желаю Вам и Вашим близким всего доброго. Был бы очень рад познакомиться с Вами. Крепко жму руку.
Ваш А. Д. Пергамент. 15.02.1971».