По вечерам, в театральные дни (по Воскресеньям, Вторникам, Средам и Пятницам), А. Д. всегда бывал в театре. По Вторникам – не-абонентный, бенефисный день того времени – А. Д. всегда платил двойную, тройную плату за свое кресло и литерную ложу семейства. Для особенно любимых им актеров плата эта увеличивалась иногда и в десятеро. В не-театральные дни происходили у него обыкновенные квартетные собрания (по Четвергам и Субботам), или большие музыкальные вечера, на которых принимали всегда участие, кроме самого А. Д. (первая скрипка), покойные М. М. Аверкиев, или С. П. Званцов (альт), М. П. Званцов, Гебель или Вилков (виолончель), К. К. Эйзерих (фортепиано) или нарочно приглашенные на зимний сезон артисты из Москвы. К. К. Эйзериха часто заменял тогда уже развертывавший свой талант воспитанник Нижегородского Александровского Дворянского Института М. А. Балакирев; иногда фортепьянную партию исполняла Е. М. Панова, дочь тогдашнего Нижегородского вице-губернатора, также хорошая пианистка. На чрезвычайных музыкальных собраниях исполнялись большие партии в роде Stabat Mater, Requiem (Русский текст для Requiem'а написан К. И. Садоковым).
Дом А. Д. был открыт не только для всех музыкальных знаменитостей, которые попадали в Нижний, но вообще для артистов, художников, писателей. Так не миновали этого дома покойный Щепкин, Мартынов и друг. Долго жил у него и получивший впоследствие известность композитор и музыкальный критик А. Н. Серов, когда он только что окончил курс в Училище Правоведения. На музыкальную деятельность Серова вероятно имел влияние Улыбышев, но впоследствии Серов разошелся с музыкальными воззрениями его [12]. Начало охлаждения Улыбышева к Серову было однако вовсе немузыкального свойства и относилось к Нижегородской деятельности Серова, как чиновника. Серов недурно рисовал, и до сих пор сохранился в семействе Улыбышевым нарисованный им вид Земского съезда со стороны Нижегородского кремля.
Иногда чрезвычайные музыкальные собрания в доме А. Д. заменялись домашними спектаклнаии. И те и другие привлекали к себе «весь город». Понятно, что многих и многих звало туда не одно художественное влечение, но более практическое желание хорошенько вкусить от завершавших каждое собрание обильных явств.
В клубе (тогда был в Нижнем всего один клуб – дворянский, или, как он тогда назывался – благородное дворянское собрание) А. Д. никогда не бывал. В карты он вовсе не умел играть и садился за карточный стол только изредка, в деревне, в глубокие ненастные осенние вечера, при чем случалось нередко, что с одной дамой червей объявлял 8 в червях. На балах в дворянском собрании (6 Декабря, или во время дворянских выборов) Улыбышев появлялся иногда, но допускал в своей бальной одежде некоторый компромисс: облекаясь во фрак, он сопровождал его какими-нибудь серенькими клетчатыми панталонами из легкой летней материи.