Дом построен купцом 1 гильдии,почетным гражданином города Пудожа, благотворителем А.П. Базегским, возглавлявшим в то время тройку ведущих торговцев города. До начала ХХ в. Пудож являлся «деревянным» городом, и особняк Базегских был единственным каменным жилым домом. Здание расположено по красной линии улицы Ленина (бывшей ул. Кутузовской). Со стороны ул. Горького к нему примыкает старый парк с регулярными посадками липы, лиственницы, клена, дуба и черемухи.
Здание каменное, двухэтажное. К основному массивному объему, покрытому четырехскатной вальмовой крышей, с восточной стороны пристроен небольшой объем лестничной клетки, с северной - два небольших крыла под трехскатными крышами.
Общее архитектурное оформление фасадов выполнено с использованием элементов позднего классицизма. Симметрию главного фасада нарушает смещенный к углу здания парадный вход с крыльцом под двухскатной крышей, опирающейся на изящные чугунные столбики. Окна второго этажа дома обрамлены наличниками сложного глубокого рельефа, дополненного треугольными сандриками. Окна первого этажа имеют меньшую высоту и более скромное обрамление в виде рельефного рамочного наличника. Фасады по вертикали разделены широким декоративным поясом и горизонтальными тягами.
Первоначальная планировка дома предполагала анфиладное расположение комнат с выделением нескольких изолированных помещений. Однако в советский период здание внутри неоднократно перестраивалось, и первоначальная планировка не сохранилась. Утрачены кафельные печи, а также лепнина, украшавшая интерьеры дома.
С 1918 года в здании располагается Пудожский детский дом.
Дом Базегских представляет историко-архитектурную ценность как пример купеческого особняка, построенного в традициях позднего классицизма, с хорошо сохранившимся экстерьером и историческим парком. Играет важную роль в формировании застройки исторического центра города.