女方有外遇提出离婚的，男方不能仅仅以此为由要求其退彩礼。
女方有外遇提出离婚彩礼一般是不用归还的，但是有下列情形的，离婚后男方是可以请求女方返还支付的彩礼：
1.双方未办理结婚登记手续的;
2.双方办理结婚登记手续但确未共同生活的;
3.婚前给付导致给付人生活困难的。
第二和第三两项,应当以双方离婚为条件。之所以要作出如此规定,是因为目前我国很多地方给付彩礼的情况还较为普遍,如果对彩礼问题完全不管,可能会使一些当事人的财产权益受到严重损害。
【法律依据】

《最高人民法院关于适用婚姻家庭编的解释(一)》第五条,当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民法院应当予以支持：


(一)双方未办理结婚登记手续;


(二)双方办理结婚登记手续但确未共同生活;


(三)婚前给付并导致给付人生活困难。


适用前款第二项、第三项的规定，应当以双方离婚为条件。