被恶意拍下之后又申请退款影响到店铺的服务质量怎么办？

7月8日，淘宝网对搜索规则进行调整，加大了卖家服务质量因素的权重，通过对网店综合评判，让诚信的卖家及商品获得更多用户的关注和机会，提高消费者购物体验，让消费者买到能让用户找到质量更优、物流更快、服务更好的产品及服务。这个是很好的出发点，我举双手赞同！
可是这几天以来，遇到了这样的事情，昨天晚上22点多，有客户上线，很快的问了是否有货之后，很爽快的拍下，然后付款，心想终于成交一单了，可是忙到夜里2点下线之后很疲惫的躺下休息，在夜里三点多的时候竟然收到旺旺手机短信，那人说货不要了，要申请退款，我看了一眼信息之后回复好，结果早上6点多睡得正香的时候又收到短信，还是那句话货我要申请退款，我回信息说 好，即使您申请退款淘宝也是要您拍下24小时之后才可以申请的呀，客户不说话了！搞得暑热的夏天一大早的好觉也没有了，郁闷中，申请了消保，加入了7天无理由退换货，即使他收到货了淘宝也是要支持无理由退货的，何况我现在还没有发货，自然很爽快的就答应他了！我想也是店铺服务质量的提现吧，但是新的规则调整之后，退款率也在卖家服务质量因素里面，而且还有很大的权重，但是真的遇到了这样拍下之后又申请退款的怎么办呢?这是刚刚遇到的事情，其实这样的单子之前已经遇到几次了！
唉 店铺的服务质量！让我左右为难哦！