其次，为统率当地驻军，还设立了都督府，有潭州中都督府、桂州中都督府、黔州都督府等。唐大历时还在辰州（治今湖南沅陵县）、溪州（治今湖南永顺县南）、锦州（治今湖南麻阳县西南）等设立团练守促观察使。安史之乱后又设节度使，即名军。以都督统领军事。潭州有钦化军，澧州有贞武军，江陵有永安军。这些州兵和边兵的主要任务就是对当地少数民族特别是莫徭进行军事镇压和控制。