“山越”一词，最早见于《后汉书·灵帝纪》：“建宁二年(169年)九月，丹阳山越围太守陈夤，夤击破之。”其时徽州属丹阳郡。

山越是居住在先秦百越地区，以山区为根据地，汉、越二族劳动人民共同反抗地主阶级和封建统治的山寨式武装集团，他们有自己的经济基础。文献称其为“山越”，除了其分布地区同先秦百越居住区相吻合外，还体现了统治阶级蔑视越族人民，视越为“夷”、“蛮”、“贼”、“寇”这样一种大汉族主义思想。这里的“越”同“贼”、“寇”、“夷”是一个意思，是一种贬义祠。山越并不是一个民族实体。