当然可以要回了，作为孩子的监护人，他听不到自己的义务，那么另一方是有权利要回抚养权的。
一般来说，孩子在吃母乳期间。男方是很难获得对孩子的抚养权的。除非女方自己愿意主动把孩子抚养权让给男方。所以这种事情最好是跟女方私下协商解决，让她主动同意把孩子还给男方才行。
女方照顾孩子不周的情况下可以拿回孩子 ，你可以直接走法律路线
