Муж не ночует дома

Добрый день! В семейной жизни мы новички, свадьба была 27 января 2012 года, до этого встречались на протяжении 4 лет, сейчас живем совместно на съемной квартире, муж периодически не ночует дома, а остается у матери, но туда он приходит только переночевать, а вечернее время проводит со своими друзьями, меня просто ставит перед фактом, что едет завтра к матери и точка, на все мои попытки поговорить и объяснить, что так делать нельзя, что у нас семья, он не реагирует и говорит, что в этом такого, все будет нормально. Вследствие - у меня депрессия, слезы и прочие недуги, я объяснила ему, если его так тянет туда, в свой прошлый мир, пусть поживет у матери, а там посмотрим, на что он отвечает, что раз я так настаиваю, он приедет, но не выполняет обещания. Подскажите как быть, развестись сейчас - это глупо, т.к. только начали семейную жизнь, но и оставлять так нельзя...