На памятной доске в церкви села Голубея прочел: "В память Строителя Храма сего графа Василия Дмитриевича Олсуфьева, родившегося в Москве 21 июля 1796 года, скончавшегося в Риме 11 февраля 1858 года, погребенного в Московско-Даниловском монастыре.
В вотчинном его селе Голубеях лета 1884 в благополучное царствование императора Николая I, благославления преосвящения Евлагия, епископа Орловского и Севского создан сей святой храм усердия графа гоф-маршала Василия Дмитриевича Олсуфьева".
Голубея - родовое имение графов. А поселок Олсуфьево рядом, за Десной.
"Олсуфьевы - графский и дворянский род. В XVII веке Василий Дмитриевич Олсуфьев был обер-гофмейстером при Петре I, брат его Матвей - обер-гофмейстером при Екатерине I. При Екатерине II статс-секретарем был Адам Васильевич Олсуфьев. Императрица часто посылала его к иностранным дворам. Сделала его сенатором и представителем Театрального комитета. Захар Дмитриевич Олсуфьев - генерал-лейтенант, во время война 1812 года командовал дивизией, а позже был сенатором. Василий Дмитриевич Олсуфьев (1796-1858 годы) был обер-гофмейстером и получил в 1856 году графский титул. У него было двое сыновей - Алексей и Александр. Алексей стал филологом".
В 1868 году, когда была построена железная дорога Орел-Смоленск-Рига, появилась станция Олсуфьево, получившая свое название от села Олсуфьево. Возник и поселок.