完全に自業自得なんですけど愚痴聞いて下さい

旦那とは結婚して７年半で、交際期間含めると１３年の付き合いで
私が子供を産めない体質のせいで何度か離婚を考えていて
知人に相談したところ「でも７年半も結婚生活続けられてるのは相性がいいからだと思うよ」
という意見をもらって、それを旦那に話したところ
「俺は君じゃなくても誰とでも上手くいくよ」と言われました

旦那は交際した女性の数は２０人以上、でもその大半の人とは半年持たないで別れてきてます
大学生時代には４年同棲した彼女がいますが
彼女が旦那のことを嫌になって最終的にはその彼女は他にいい男性見つけて出て行きました

これの何が「俺は君じゃなくても誰とでも上手くいくよ」なんだろうかと腹立たしいです
ただの愚痴です すみません