律师，你好，18年9月离婚的，刚离婚他就带别的女人住家里了，住了没几天，公婆回来了女的也走了，之后男方在家里赌博，输了20万，年底三番两次去找前妻，就在年前回来了，什么手续也没有，19年3月份出去打工，就没管过家里，两个孩子上学，生活，没给家里一分钱，可是跟之前住在家里几天的女人转账不断，（听说是一起出去打工了），淘宝记录都是给那女人买的东西，借前妻一万多不到两万，子女分配是一人一个，一年多没管过一个，请问律师，他借前妻的钱能要回来吗？