Одна из первых и самая многочисленная национальная община России — армянская община в Астрахани — начала формироваться в XVI веке, когда Армения стала ареной разорительных столкновений между Турцией и Ираном.
Армянские купцы Закавказья могли свободно торговать через Астрахань, поэтому город долгие годы сохранял ведущие позиции в торговле с востоком.
Помимо купцов, в городе жило множество ремесленников: ткачей, владевших мастерством выработки восточных тканей, сапожников и ювелиров.
Получая большую прибыль, все они не забывали вносить свой вклад в благоустройство города и строили мосты, церкви, торговые лавки, богадельни, учебные заведения.
В 1810 году для беднейших армян открылось Агабабовское училище с пансионом, библиотекой и врачом для учащихся. Средства на строительство и содержание пожертвовал Никогайос Агабабян, переехавший в Россию из Персии.
К концу XIX века семья Агабабовых владела рыбными промыслами, пароходами, шелковыми фабриками, кирпичными заводами.
Особняк на набережной Варвациевского канала (ныне набережная 1 Мая) был построен в 1894-1898 годах для братьев Гулюмовых. В 1909 году владельцем стал Давид Григорьевич Агабабов. По его заказу на территории усадьбы был возведен комплекс зданий, из которых сохранились жилой дом, флигель с торговым помещением в нижнем этаже и конюшня с каретником.