Обширные владения требовали рабочих рук. Крестьян покупали и привозили даже из других губерний. Для них было выстроено 20 одноэтажных каменных домиков. Всего в поместье работали 4 тысячи крепостных. Их руками были сооружены каменные дворы, винокуренный завод, рига, складские помещения, погреба и арочный мост через речку Жаленку. В усадьбе был разбит великолепный парк с прудами, посреди каждого пруда возвышался островок. Парк поражал богатством растительного мира.
В 1740 - 1746 годах в имении построили каменную церковь. Одной из наиболее интересных икон в ней была икона Грузинской божьей матери. С тех пор село стало называться Грузинами.
Дом в Грузинах, построенный Растрелли, поражал своими размерами, а великолепие внутренней отделки давало ему право называться дворцом. Всего в доме и двух смежных флигелях было 120 комнат.
Удивляли своими размерами и хозяйственные постройки. Конный двор, например, вмещал 250 лошадей. Скотные дворы, построенные из жженого кирпича, покрытые черепицей, вмещали до 600 голов скота. Обширными были и другие постройки - рига, оранжереи, теплицы, мастерские. В Грузинах был собственный каменный винокуренный завод, на котором вырабатывалось до 200 тысяч ведер спирта в год.
По просьбе Полторацких в начале XIX века архитектор В. П. Стасов реконструировал старые сооружения и руководил постройкой новых.
В 1785 году Екатерина II на пути из Вышнего Волочка в Москву решила посетить Грузины. Она вспомнила, что директор императорской капеллы Марк Федорович Полторацкий и его жена просили монархиню осчастливить Грузины своим присутствием, деликатно напомнив, что в свое время здесь побывала и Елизавета Петровна. Императрицу уверили, что дорога в Грузины коротка и приятна. Однако ближайший путь оказался неподготовленным для царского кортежа. Поехали дальней дорогой. В одном из селений крестьяне ухитрились подать Екатерине жалобу. В довершение всего Полторацкие забыли приготовить к приезду государыни свежее молоко, которым она любила утолять жажду. Императрица, видимо, разгневалась и скоро уехала.
А вот еще одно любопытное свидетельство, относящееся к Полторацким. А. П. Керн в своих воспоминаниях пишет: «Моя бабушка владелица Грузин Агафо-клея Полторацкая, красавица, но не умела ни писать ни читать, но была умна и распорядительна. Дала потомство в 22 человека, но все они были хорошо воспитаны. Агафоклея с помощью старосты управляла 4000 крепостных крестьян, являясь строгой и в некоторой степени жестокой женщиной. Жила в Грузинах в великолепном замке. Спальня была обита зеленым сукном, а гостиная отделана розовым мрамором…»
В первых числах марта 1829 года из Петербурга в Москву, для дальнейшего следования на Кавказ, ехал А. С. Пушкин. Миновав Торжок, он приказал свернуть с тракта в Грузины, к Полторацким.
Хозяином великолепного имения был в то время дядя Анны Петровны Керн генерал-майор К. М. Полторацкий - герой войны 1812 года. Он вместе с русским корпусом побывал во Франции. Константин Маркович был радушным хозяином и прекрасным собеседником. Поэт гостил здесь несколько дней. Он встретился с учителем Раменским. В благодарность за интересные рассказы из жизни народа Пушкин подарил ему роман Вальтера Скотта «Айвенго». На обложке поэт написал несколько строк из десятой главы «Евгения Онегина»:
Одну Россию в мире видя,
Преследуя свой идеал,
Хромой Тургенев им внимал
И, плети рабства ненавидя,
Предвидел в сей толпе дворян
Освободителей крестьян…
На титульном листе рукой А. С. Пушкина написаны еще четыре строки:
Как счастлив я, когда могу покинуть Докучный шум столицы и двора, Уйти опять в пустынные дубравы На берега сих молчаливых вод.
После Октябрьской революции бывшее имение перешло в ведение Народного комиссариата внутренних дел. Здесь была открыта детская колония. А в 1936 году в Грузинах устроили дом инвалидов.
Грузины - административный центр колхоза «Знамя труда». Здесь есть средняя школа, клуб, больница, льнозавод.
С Торжком Грузины связаны автобусной линией.
Раек - имение, известное с XVII века, ценный памятник архитектуры.
В июле 1787 года при владельце Ф. И. Глебове состоялась закладка каменных палат. Наблюдал за работами новоторжский архитектор Франц Иванович Буци (он же строил по проекту Н. А. Львова собор в Борисоглебском монастыре). Церковь в Райке построена позже - в 1798 году.
В строительстве Райка принимали участие крепостные каменщики и каменотесы Н. А. Львова. Сам Н. А. Львов занимался внутренней отделкой имения. Он же подбирал мебель, светильники, посуду. Участие Н. А. Львова, человека с изысканным вкусом, сказалось и в характере сооружений, в оборудовании усадьбы.