我是女方，女儿三岁，夫妻俩目前分居，女儿去年及之前基本是在她爷爷奶奶家住，共同女儿年前开始在我爸妈家住。现在我已经在另一个城市上班，女儿我单方面托付给我爸妈照顾，男方家不肯，要下去把孩子接走，我是不同意的，然后我目前不在爸妈家，请问我该采取什么措施来护住女儿不被他们带走?