Из старинного рода…
Несмотря на свои довольно высокие официальные должности, особенно в последующие годы, уже после отъезда из Вологды, Алябьев, видимо, придерживался довольно прогрессивных взглядов. Его жена, Анна Андреевна, была близкой родственницей известного просветителя Н. И. Новикова. В семье Алябьевых увлекались литературой, музыкой…