В 1785 году Екатерина II "Жалованной грамотой" утвердила всевозможные привилегии дворянству и определила для каждой губернии иметь свое Дворянское собрание, а также место для общих собраний.
В этом же году нижегородские дворяне решили построить “собственный дом и употребить на это 12 тыс. руб. из 53 тыс., имеющихся в казне.” Кроме этого, “каждый дворянин должен был внести по числу душ за ними и из их доходов по 20 коп. за каждую душу” крепостную.
Пока собирали средства, прикупили на аукционе за 600 руб. деревянный дом и сад у надворного советника Авдулина и на 17 руб. мебели. Но вскоре продали этот тесноватый и ветхий дом за 400 руб. и вместо него купили за 3 тыс. 700 руб. у майорши Володимировой каменный дом. Дворяне берегли свой дом и тщательно следили за ним, но здание ветшало, в нем было все-таки тесно, негде было торжественно, как подобает дворянству, отметить Рождество или Пасху, наконец, должным образом встретить почетных гостей.
В конце 1821 года Дворянским собранием выносится решение о необходимости “иметь для Депутатского собрания приличное помещение”, для чего “назначить на возобновление и устроение сего Дворянского дома от иждивений своих 105 500 рублей”.
С предложением составить необходимые планы и фасады Дворянское собрание обратилось к архитектору И. Е. Ефимову и заключило с ним “на условиях выплаты за сочинение плана, фасада, каменный Дворянский дом, за присмотр во все продолжение время строения... 3000 рублей”.
24 мая 1823 года состоялась торжественная закладка фундамента нового Дворянского дома. Вскоре оказалось, что определенных сметой денег недостаточно, и тогда было решено, что каждый год до полного завершения строительства дома собирать по восемь копеек с каждой крепостной души.
К концу года Дворянский дом под надзором архитектора Ефимова был построен и отделан. Состоялся торжественный молебен, и 6 декабря в белокаменном зале дворяне провели предрождественский бал.
Дом снаружи выглядел строго и внушительно, высокие колонны придавали ему великолепную торжественность. Внутри на первом этаже находились сени, присутственные места, две канцелярии, архивная комната и другие небольшие комнаты разного назначения; швейцарская при входе и длинный сквозной коридор. С первого этажа на второй вела парадная мраморная лестница. Между первым и вторым маршами лестницы огромное зеркало, которое подчеркивало величие и торжественность, далее передняя, две гостиные, столовая и буфет, из небольшого холла был вход в колонный зал с антресолями по всему периметру зала для гостей. Вход в Дворянское собрание всегда был свободным. Дом отапливали 23 печи, 13 из них были сделаны “с медными приборами, а остальные — с лаковыми”. Истопник получал 200 рублей годовых.
В Дворянском собрании в качестве почетных гостей бывали многие выдающиеся люди. Здесь в торжественной обстановке был зачитан Манифест об отмене крепостного права. Под управлением музыканта Улыбышева для дворян впервые в Нижнем был исполнен “Реквием” Моцарта. Здесь же музицировал и сам Милий Балакирев.
17 мая 1913 года в зале с белыми колоннами дворяне чествовали государя Николая II.
Сегодня в бывшем доме Дворянского собрания на углу Б. Покровской и Октябрьской (бывшей Дворянской) улиц размещается Дом культуры профсоюзов.