桂阳郡，刘邦建汉，建立桂阳郡，属荆州刺史部管辖，实际为长沙国管辖（吴氏长沙国）。又在桂阳郡南部分出一桂阳县。

汉景帝时桂阳县为桂阳郡管辖。郡治在今天的郴州市区，领十一个县，其范围基本包括后世的郴州各个区县，甚至还有广东的北部的一部分，如阳山、含洭、曲江、浈阳、桂阳等县。

西汉初期的中央王朝直管15个郡，一些封国也管辖少数郡。桂阳郡就属于吴氏长沙国管辖。