秦汉以前，长沙蛮与武陵蛮有共同的来源，也被称为三苗、荆蛮。秦置长沙郡，辖今湖南东部、南部及湖北、江西之一部。汉代先设长沙国，后复改为长沙郡，其境内各少数民族被称为“长沙蛮”。

西汉初年，原长沙境内曾分出零陵、桂阳二郡，其境内的蛮亦被称为“零陵蛮”、“桂阳蛮”。

自东汉末至魏晋时期，长沙郡内又分出湘东、衡阳、昭陵诸郡，西晋时以洞庭湖以南、五岭以北之地置湘州，此后长沙蛮之名遂被“湘州蛮”取代。

南朝时，湘、粤交界处已有蛮族被称为“莫徭”。

隋唐时“莫徭”之称已遍及湖南中南部及广东北部诸蛮族。

宋代去“莫徭”之“莫”字，而直接称其为“徭”。