Манчестер окружен на востоке Зелеными горами, а на западе горным хребтом Таконик. В черте города находится гора Равноденствия, которая считается самой большой местной вершиной и достигает 1173 метра в высоту.
Пешеходная тропа Лай-Брук-Фолс является известной местной достопримечательностью и ведет к одному из самых высоких водопадов в Вермонте.
Манчестер был основан в 1761 году Беннингом Вентвортом, который служил колониальным губернатором Нью-Хэмпшира и называл новые города в честь главных английских аристократов того времени. Вентворт назвал Манчестер в честь Роберта Монтегю, который когда-то был третьим герцогом Манчестерским, Англия.
Город стал известен своими железными рудниками, мраморными карьерами и мельницами, а также лесопилками. Появление железной дороги привлекло сюда множество туристов, которых звало в дорогу его выгодное расположение среди живописных гор. После Гражданской войны (1861 - 1865 гг) город превратился в курортный район, который процветает и по сей день.
Прибыль от туризма до сих является основной статьей дохода для города.