如果男方认为夫妻感情因女人回娘家不管孩子的行为导致破裂的，男方可以向法院提起离婚诉讼。离婚需要准备起诉书一式两份、结婚证的原件、身份证及复印件，以及诉讼费用，去被告经常居住地或者户籍所在地的人民法院提起离婚诉讼。法院经过审理后，依据夫妻感情是否已经破裂，来判决是否准予离婚。女人回娘家不管孩子可以起诉离婚吗的法律依据

《民法典》第一千零七十九条

夫妻一方要求离婚的，可以由有关组织进行调解或者直接向人民法院提起离婚诉讼。

人民法院审理离婚案件，应当进行调解；如果感情确已破裂，调解无效的，应当准予离婚。

《中华人民共和国民法典》：第四章　离婚　　第一千零七十九条　夫妻一方要求离婚的，可以由有关组织进行调解或者直接向人民法院提起离婚诉讼。\n人民法院审理离婚案件，应当进行调解；如果感情确已破裂，调解无效的，应当准予离婚。\n有下列情形之一，调解无效的，应当准予离婚：\n（一）重婚或者与他人同居；\n（二）实施家庭暴力或者虐待、遗弃家庭成员；\n（三）有赌博、吸毒等恶习屡教不改；\n（四）因感情不和分居满二年；\n（五）其他导致夫妻感情破裂的情形。\n一方被宣告失踪，另一方提起离婚诉讼的，应当准予离婚。\n　　经人民法院判决不准离婚后，双方又分居满一年，一方再次提起离婚诉讼的，应当准予离婚。