Впервые о графстве Ним вместе с графством Руэрг упоминается в 837 году. Людовик I Благочестивый назначил Фулькоальда графом Руэрга и Нима. Фулькоальд был родоначальником Тулузского дома, который правил до XIII века.
На документе, относящимся к папской власти над монастырем Сен-Жиль, датированным 18 августа 878 года поставил подпись граф Раймунд. Похоже, что он был тем же лицом, с Раймундом, графом Альби и Раймундом II, графом Тулузы. Неизвестно, от кого унаследовал Раймунд графство Ним. Тот факт, что никаких дальнейших записей о Раймунде, относящихся к графству Ним не найдено, относящиеся к Раймунду после 915 года, можно объяснить тем, что Раймунд унаследовал от отца Эда графство Тулуза, после чего Ним перестал быть одним из его главных центров его владений. Других графов по имени Раймунд, относящихся к графству Ним в то время не было.
Неизвестно, был ли Ним после смерти Раймунда зависимым от графства Тулуза. 2 июля 972 года на слушаниях в Ниме присутствовал некий граф Раймунд. Этот документ может относиться либо к Раймунду II, графу Руэрга, либо к Раймунду IV, графу Тулузы.
В начале своей карьеры Раймунд V Тулузский титуловался графом Нима, как говорится в записях 15 декабря 1066 года. Впоследствии от также упоминался как граф Нима.
Ним частично принадлежал графам Руэрга и он вернулся к Гильому IV Тулузскому после смерти в 1063 году Берты, дочери графа Гуго Руэргского, вместе с графствами Агд, Руэрг, Юзес и виконтствами Безье и Нарбонна. В 1085 году, в правление Гильома, последний закрепил право владения графами Тулузы Нима, а также прочих графств.
Виконты Нима были вассалами Тулузского дома. Главами старшей ветви были графы Тулузы, а младшая ветвь шла от Эрменгола, графа Руэрга. Некоторые из них использовали титул графа Нима.