我同意你说的女方已经决定要回去是对男方的不尊重，这样是不行的。
但我是想说男方需要明确地跟老婆沟通，表达出自己究竟介意什么，然后双方才能进行有效沟通。不要因为面子而含糊其辞，这样同样不可取。