Отношения с бывшей женой

Здравствуйте, мне 37 лет. Мой мужчина был женат, вне брака у нас с ним родилась дочь, сейчас ей 3 года. Наши отношения продолжались постоянно. А три месяца назад он ушел из семьи, мы уехали в другой город и сказал что будет жить с нами. В браке тоже есть дочь, и сейчас его бывшая жена приехал с дочерью по его просьбе на отдых в наш город. Она поставила условия, чтобы каждый вечер и воскресенья проводил с ней и с дочкой. Ходил с ними на экскурсии и т.д. Я отпускаю, принимаю условия...но просто выжидаю когда она уедет и продолжится нормальная жизнь. Я ревную.И думаю что он не прав в отношении меня. Со мной ведь тоже надо считаться. Бывшая жена не дает ребенка чтобы он ходил и гулял один, только с ней вместе. Я стараюсь не ревновать, но у меня это плохо получается. Он все чувствует, даже если я молчу и не показываю вида, и говорит что я такая же истеричка как его бывшая жена. Что от чего ушел к тому и пришел. Что я была такая рассудительная и мудрая и он выбрал меня потому что с моей стороны не было бы препятствий для общения с ребенком, а на деле получается что я такая же...(((( Как мне поступить в данной ситуации?