Громов активно участвовал и в храмостроительстве: перестраивал Смольный собор, жертвовал огромные суммы на возведение кафедрального петрозаводского собора во имя Сошествия Святого Духа и других храмов.
Будучи покровителем студентов Санкт-Петербургской консерватории, Василий Федулович входил в совет директоров этого заведения. Кроме того, он финансировал Общество защиты животных и Российское императорское общество садоводов.
Дача Громова в центре великолепного Лопухинского сада на Аптекарском острове в Санкт-Петербурге прославилась на всю столицу пышными праздниками и приемами. Владелец приглашал к себе не только первых лиц города, но и множество студентов Консерватории, которым оплачивал обучение и нередко предоставлял жилье.
Именно с этой Дачи на Аптекарском острове Василия Федуловича в последний путь провожала толпа в несколько тысяч человек.
Он был похоронен на Новодевичьем кладбище, в фамильном склепе.