Уйти, или остаться?

Здравствуйте! Меня зовут, Диана! я сильно запуталась, помогите мне пожалуйста, посоветуйте что делать дальше? Дело в том что 3 года назад я устроилась на работу новую, и там познакомилась с мужчиной, он женат у него трое детей, я не замужем, мне 25 лет, ему 40 лет! Мы с ним сдружились с начала, потом у нас появились чувства к друг другу, он начал провожать меня до дома, и в один из этих дней мы поцеловались, это был мой первый поцелуй, до него у меня никогда никого не было, но дальше поцелуев и объятие мы не заходили, потому что я девственница, и он сказал, что боится испортить мне жизнь, и всячески начал избегать меня, но я чувствовала, что он скучает по мне, и делала все, чтобы встретиться с ним, мы встречались, но мы не были любовниками, он всегда был честен со мной, все время говорит что я достойна лучшего и т.д. Я согласна с ним, но не знаю что, но что-то все время меня к нему толкает, не знаю любовь это или нет, я запуталась, за эти три года мы миллион раз ругались и мирились, ругались из за меня, я себя накручивала, и накидывалась на него! в конце мы мирились, обнимались, я добивалась своего и успокаивалась на некоторое время! и так у нас уже три года! сейчас у нас все по другому, мы не разговариваем совсем, разругались опять, он говорить, что хочет просто общаться со мной по работе и все.а я этого не хочу, я не знаю чего я хочу, я скучаю по нему, сегодня я позвонила ему и мы опять поругались, когда я сказала, что я уволюсь, он говорит, что если я уйду, то он тоже уйдет, и в конце говорит, так, не говори чушь, завтра приходи на работу и мы поговорим, чего он хочет, если я ему не нужна зачем меня там держать, я не понимаю этого, зачем? я уже с ума схожу, что мне делать, уйти или оcтатcя? мне нравится моя работа, коллеги, зарплата, но я не хочу его оставлять, если уйду будет мне больно, я его не понимаю, сам к себе не подпускает, но и не отпускает, что это?