Старшие Ульяновы были людьми выдающихся качеств, а Илья Николаевич вне зависимости от последующей громкой славы второго сына в любом случае вошёл бы в историю России как крупный провинциальный деятель народного просвещения.
Всего чета Ульяновых имела шесть детей.
Самой старшей была дочь Анна. Она родилась в 1864 году ещё в Нижнем Новгороде. В 1883 году Анна поступила на Бестужевские Высшие женские курсы в Петербурге, но в 1887 году была арестована по делу о покушении Александра Ульянова на Александра III Романова и выслана под надзор полиции в Поволжье.
В июле 1889 года Анна вышла замуж за Марка Тимофеевича Елизарова (1862–1919), впоследствии видного большевика, сама вела партийную работу, после 1917 года заведовала отделом охраны детства в Наркомпросе, с 1921 года работала в Истпарте — Комиссии по истории Октябрьской революции и РКП(б). Умерла Анна Ильинична Елизарова-Ульянова в 1935 году.
Значение Анны Ульяновой-Елизаровой («Джемса») в предреволюционной истории партии оказалась, между прочим, более значительным, чем это обычно представляется, — в последний предреволюционный период она играла во внутрироссийской нелегальной партийной работе весьма крупную роль.
Старший сын — Александр, родившийся в 1866 году тоже в Нижнем Новгороде, окончил гимназию с золотой медалью, имел все задатки незаурядной личности, обладал глубоким аналитическим умом, поступил в Петербургский университет на естественный факультет, в 1885 году был удостоен золотой медали Совета университета за работу «Об органах сегментарных и половых пресноводных Annulata».
В свободной России Александр Ульянов наверняка стал бы крупным учёным. В царской России он стал революционером-народником и 8 мая 1887 года — в 21 год — был повешен за подготовку покушения на императора Александра III.
Александр и два его товарища были задержаны «с метательными снарядами» на Невском проспекте 1 марта 1887 года и заключены в Петропавловскую крепость. Мать, узнав об аресте сына 8 марта, сразу же выехала в Петербург и 14 марта подала прошение о свидании.
Царь дал согласие, написав директору департамента полиции П. Н. Дурново:
Ну, своим старшим сыном Мария Ульянова имела все основания гордиться, чего никак нельзя сказать об Александре III Романове, чей сын Николай и правил бездарно, и отрёкся бесславно, ибо убеждений не имел.
Дурново дополнил царскую резолюцию:
Читая это, невольно вспоминаешь слова шиллеровского Карла Моора: «О, люди, вы — порождения крокодилов». В целом с Моором согласиться нельзя никак, но в некоторых частных случаях, увы, приходится соглашаться.
И это — как раз такой случай.
Двухчасовое свидание матери и сына в присутствии надзирателя состоялось 1 апреля, в день именин Марии Александровны. Александр плакал, обнимал матери колени, но в своём решении был твёрд, сказав, что долг каждого честного человека — бороться за освобождение родины от задавленного положения.
— Да, но эти средства так ужасны, — возразила мать.
— Что же делать, если других нет, мама, — ответил сын.
Эту сцену мы знаем из воспоминаний Анны Ильиничны Ульяновой, но она явно не вымышлена, а просто запомнена дочерью по рассказу матери. Явно не апокрифичны и слова Владимира, который, узнав о словах старшего брата, заявил: «Мы пойдём другим путём».
ВЛАДИМИР был третьим ребёнком, а 4 ноября 1871 года в семье Ульяновых родилась ещё одна дочь — Ольга, погодок и, как вспоминал Дмитрий Ульянов, «самый близкий, лучший товарищ Володи в годы детства и юности». Умница, с характерными ульяновскими чертами лица, Ольга весной 1887 года окончила Мариинскую женскую гимназию, подавала блестящие надежды, тоже училась на Высших женских курсах в Петербурге, но в апреле 1891 года заболела брюшным тифом и 8 мая 1891 года — день в день через четыре года после казни Александра Ильича — скончалась на руках брата Владимира и матери.
Похоронили Ольгу на Волковом кладбище Петербурга, где позднее была похоронена и её мать.
16 августа 1874 года родился младший брат Володи — Дмитрий, умерший в 1943 году, а в феврале 1878 года появилась на свет младшая сестра Мария — «Маняша».