Плыву по течению

Никогда бы не подумала, что попаду в такую ситуацию. Стыдно конечно. Так получилось, что я, живя 6 лет с мужчиной в «гражданском браке», влюбилась в другого. И вроде взаимно. Но вот теперь мучаюсь, потому что мой возлюбленный стал провоцировать меня на ссоры, хотя изначально с момента знакомства был в курсе, что я не свободна, и что уйти от мужа так просто не могу, нужно время. Он сам согласился, более того, говорил, что будем жить так как есть, ничего не меняя. И вот он стал ревновать. Спрашивает, сплю ли я с мужем, хорошо ли с ним в постели, и в этом духе. После подобных вопросов, мне становится стыдно, он раздражен, мы ссоримся, но он первый идет на примирение. При этом, уйти от мужа он не просит. На словах любит, а на деле получается, что его все «устраивает». Мне сейчас страшно что-то менять в жизни, поэтому плыву по течению..
P.S. мужа не люблю с тех пор, как узнала об его измене 2 года назад..