Я вообще всегда за любовь и счастье. Но тут тоже "любимый" вызывает море вопросов. А уходить в никуда с ребенком, не имея достаточно финансов для обычной жизни, от в целом обычного мужа - это полная дурь. Выясняй все с любовником: почему он не хочет секса (очень вряд ли это благородство и принципы, поэтому сразу реши, устроит ли тебя его отсутствие дальше?), как вы будете жить, какие у него планы, что он ждет от тебя и т.п.
Но как правильно писали девочки, недостатки будут и нового мужчины 100%, причем в том числе и те, которые тебя будут раздражать. Так что бежать от мужа только потому, что у него есть недостатки - не стоит