Raymonds ouders waren [[Pons van Toulouse]] en [[Almodis devan la Marche]]. Raymond zou tijdens zijn leven drie keer trouwen, zijn eerste vrouw zou een nicht van Raymond geweest zijn waarvan de naam nog onbekend is. Met haar kreeg hij [[Bertrand van Toulouse]], eerste in lijn voor de troonopvolging. Zijn tweede vrouw was Matilda, een dochter van [[Rogier I van Sicilië]]. Zijn derde vrouw was [[Elvira van Castilië]] , een natuurlijke dochter van [[Alfons VI van León|Alfons VI van Castilië]], met haar kreeg hij nog een zoon [[Alfons Jordaan van Toulouse]].
