Герой рассказа провел все свое детство в не большом городе Княжье-Вено Юго-Западного края. Вася – это имя героя, он был сыном судьи. Рос мальчик, как беспризорник. Причиной тому была ранняя смерть матери (она умерла, когда мальчику было всего шесть лет), а отец полностью погрузился в свое горе и не замечал ребенка, ему было не до него. Мальчишка скитался по городу целыми днями, он был увлечен городскими тайнами и загадками. Все оставило глубокий след в его сердце и памяти.
Одной из загадок был замок стоящий на одном из прудов окружающих город. Раннее данный замок принадлежал некой графской чете. Но сейчас данное сооружение на половину разрушено, и читатель видит его разрушенные от возраста стены, а внутри жили люди, скитавшиеся и не имеющие своего жилья. Прототипом данного замка являлся дворец знатного рода Любомирских, носивших титул князей проживающих в Ровно.
Эти две четы не могли жить в понимании и согласии т.к. у них были разные вероисповедания, а также конфликт с прислуживающим графьям — Янушем. И этот самый Януш имел право решать, кому ныне разрешается жить в замке, а кто прочь должен уйти. Старый слуга оставляет там проживать избранных «аристократов», а изгои поселились в подземелье. Вася очень часто бывал в этом сооружении. Януш приглашал его к себе, но мальчика больше тянуло к изгнанным, он их жалел.
Многие из тех изгоев были известными людьми. Среди них были: полубезумный пожилой «профессор»; штык-юнкер Заусайлов; алкоголик и чиновник в отставке Лавровский; генерал Туркевич, а вот руководит всеми этими людьми — Тыбурций Драб. Вся его биография покрыта неизвестностью.
В один из дней Вася с товарищами пришли к ветхой церквушке. У них разыгралось желание заглянуть во внутрь. Товарищи помогают Васе в данном действе, подсаживают его к окну. Но увидев, что в церквушке они не одни и еще кто-то есть, ребята бросают Васю одного и убегают. Как, оказалось, там были дети Тыбурция: Васек и Маруся. Вася дружится с ребятами и частенько, потом приходил к ним в гости и приносил яблоки. Но о новых знакомых он никому не рассказывал.
Позже Валек показал Васе место обитания членов «дурного общества». Дети всегда общались в отсутствие взрослых, но в один из дней Тыбурций застал ребят вместе и не стал препятствовать их общению.
С наступление осени Маруся начинает болеть. Для того чтоб поднять ей настроение Вася просит у сестры куклу подаренную матерью при жизни. Маруся счастлива и кажется, даже слегка пошла на поправку.
Януш доносит судье о Васином общении с «дурным обществом», после этого его не выпускают из дома и он сбегает.
Марусино состояние здоровья становится все хуже и хуже… Вася решает не забирать куклу и оставляет ее девочке, ведь это ее хоть как-то ободряет.
По возвращению домой Васю опять запирают в доме и требуют ответа о том, куда он ходит, но Вася молчит. Отец мальчика просто в ярости от поведения сына… И вот вдруг Тыбурций принес куклу мальчику обратно.
Тыбурций рассказал отцу Васи о дружбе ребят и сообщает новость, что Маруся скончалась. Васю отпускают с ней простится, да и отец Васи осознал, насколько он далек был от сына.
