小孩归属姐姐和姐夫离婚，协议中双方无…

小孩归属姐姐和姐夫离婚，协议中双方无共同财产，无共同债务，小孩归男的，女方每月支付500抚养费，现父亲希望双方和好，男方同意，却和某女子有暧昧，每日住在某女子处，至今未出现过，小孩一直是我姐姐带着，我想请问下王律师，这种情况能否起诉我姐夫，将小孩的抚养权归我姐姐