如果女人是以诈骗的手段取得男人的钱，那么应该向法律机构申诉，依法取回钱款。若女人是小人得寸进尺而得到男人的钱，男人有权要求女人归还。如果男人只是自愿把钱给了女人，那么它就不是诈骗，男人没有权力要求女人归还。