Третий граф Батерст был колониальным секретарём (Secretary of State for War and the Colonies) и практически основателем Колониального офиса, в котором никто, кроме него, не служил так долго – 15 лет, с 1812 по 1827 год. В послевоенный (post-Waterloo) период колониальный секретарь был самой влиятельной фигурой в администрации Британской империи. Благодаря своему большому политическому опыту, уравновешенному характеру и прилежанию, граф Батерст, как никто другой, подходил для этой тяжёлой и напряжённой работы. Современники отлично понимали, что он был фигурой первого ранга в войне с Наполеоном, в дипломатии и внутренней политике империи. Он действовал всегда эффективно, был талантливым успешным администратором, хотя, ввиду особенностей своего характера, никогда не был авторитарным. Того же требовал от военных офицеров – губернаторов колоний, которых он назначал.
Одной из его обязанностей после войны 1812 года была организация миграции поселенцев с Британских островов в Канаду. Именно граф Батерст подписал указ об учреждении в Торонто King's College, ставшего впоследствии его первым университетом. Поскольку отделы департамента Батерст были разбросаны по всему миру, он, вместе с премьер-министром и министром иностранных дел, по-прежнему оставался постоянно вовлечённым в решение вопросов внешней политики. Во всех этих вопросах он умел давать нужные советы и находить правильные решения.
Все поколения Батерст были приверженцами консервативных взглядов, и 3-й граф Батерст имел натуру, не склонную к переменам. О его консерватизме ходили легенды. Тем не менее, он проявлял определённую гибкость, понимая необходимость приспосабливаться к меняющейся политической обстановке. Когда независимость получили колонии Испании и Португалии, ближайших британских союзников, он, сознавая опасность сопротивления растущему стремлению наций к самоопределению, пришёл к мудрому решению устранить политические ограничения для католиков. Гуманную позицию он занял также в вопросе уничтожения рабства, считая однако, что рабовладельцы должны получить от государства компенсацию за утраченную собственность.
Свою карьеру граф Батерст закончил Государственным тайным советником (1828-1830). Государственная служба заставила его покинуть старый родительский дом и переехать в Лондон, и только после ухода на пенсию он вернулся в свой родной Саенцестер. С тех пор его время принадлежало дому, семье и друзьям. Но длилось это недолго – через четыре года он скоропостижно скончался и, под погребальный звон колоколов аббатства в погружённом в траур городе, был похоронен в фамильном склепе рядом с прахом предков.
Несмотря на своё видное положение в центре Британского государства в течение четверти века и в колониях в течение полутора декад, граф Батерст остаётся в тени истории этого периода. Его чаще высоко оценивают в целом: всегда везде присутствовал, всегда во всём проявлял компетентность и надёжность. Он был бесстрастным формалистом – хоть, говорят, и не лишённым чувства юмора – и потому никогда не оставлял о себе яркого впечатления.
В этом отношении он был полной противоположностью блистательному, искромётному лорду Дафферин. Конечно, их разделяет около полувека – годы важных политических реформ в Англии, больших перемен в обществе – переход от века напудренных париков к веку железных дорог. И всё же... Батерст был застенчивым человеком; любил оставаться в тени, был старомоден, вернее вне моды вообще, не любил конфликты, всегда с привычной улыбкой на лице, мягкий и деликатный; его компанией наслаждались даже оппоненты. Кроме того, он был плохим оратором, зато ясно, чётко и понятно писал.
Вскоре eго имя было незаслуженно забыто, хотя он, несомненно, был честным, преданным делу человеком и, несмотря на всю мягкость своего характера, был твёрд и непоколебим в своих политических убеждениях. Он был настоящим рыцарем и в 1817 году официально стал Кавалером ордена подвязки.
Первое и пока единственное научное исследование биографии 3-го графа Батерст сделал наш современник, профессор истории Университета Западного Онтарио, Невилл Томсон. Его книга "Earl Bathurst and the British Empire", опубликованная в 1999 году, основана на архивных материалах, ставших доступными лишь в середине XX века. Фактически это – его политическая биография, 300 страниц не содержат почти ничего личного, так как личные архивы остаются всё ещё закрытыми для широкой публики.
3-й граф Генри Батерст умер в 1834 году, когда город Йорк только получил имя Торонто, и вся его история была ещё впереди. Леди Батерст имела слабое здоровье, её недомагание было основной темой корреспонденции между графом и его друзьями. Однако, она дожила до 75 лет, пережив своего крепкого мужа на семь лет. Их потомок и наследник графского титула, ныне здравствующий 9-й граф (Allen Bathurst, 9th Earl Bathurst) живёт в городе Саенцестер, в их родовом имении.
Помимо улицы Батерст в Торонто, именем Батерст назван один из крупных островов в Канадской Арктике и город Батерст в Нью Брансвике. Есть также остров и город Батерст в Австралии и улица Батерст в Сиднее.