从孩子生完老公就去别的屋睡觉！他说孩子吵、他睡不好！我一直和他说他也不肯回来住！怎么办？