市中心有六个小山相连属，名为六岭。宋人在这里修建了镇边楼，地址为今文化馆所在处。地势较高，可纵览四方，俯视全城，古时自然有利于军事上的驻守防御。宋理宗曾在六岭题有“江山一览”、“烟雨奇观”八字，字迹今已无存。
1927年起，六岭定名为中山公园。1945年，六岭山坡建有“抗日胜利纪念碑，现完整如初。解放后在这里兴建文化馆和图书馆。
东山寺之东山与六岭隔邵水相望。宋代在此建寺，寺踞城内外街市区的中段，又濒临资邵二水，因此东山寺的钟声，既能闻于街巷闾里之间，又可达到行舟渔船之上。
宋代曾迁郡学于东山，著名学者周敦颐(濂溪先生)到这里讲学视察。为了纪念他的活动，明代在东山寺内建濂溪书院，是湖南最早的而又享有盛名的书院之一。清代著名学者邓湘皋长期担任过东山书院山长(即院长)。他是一个富有民族意识的知识分子。编印过《王船山遗书》、《宝庆府志》等多种典籍，他的《宝庆府志》有《岷藩录》一卷，对南明政权在邵阳的活动有详细记载。