拒绝买家退款申请后，买家申请了客服介入，如果这时我们同意退款后，还会有影响吗？

之所以拒绝退款是因为买家上传的物流单号一直没有物流信息，8月2号上传了一个单号，一直没有物流信息，多次联系买家，买家一直说寄回来了，但是一直没有收到，直到8月9号才有了物流信息。有3天时间确认收货，但是从江苏那边发到我们河北秦皇岛3天是不够的，我们一直盯着物流，希望在快到期的时候能收到，结果还是没有收到，因为这个买家打电话不接，只和我们短信联系，而且就回那么几个字，所以我们无法相信这个买家，货物没收到，谁知道买家寄回来的是什么。所以我们先拒绝退款，因为拒绝退款以后还有7天时间，收到以后确认没问题就会给买家退款，但是我们8月11号刚拒绝退款，买家就申请了客服介入，这样的话对我们店又会有影响了！！而且是纠纷退款，我也是醉了，截止到发帖时间8月12日上午9点30，我们依然没有收到这个件，而此时假如我们没有拒绝退款，款已经自动打给买家了。。。。我预计如果快件正常的话，今天下午会收到，此时我们商家还可以操作同意退款（显示客服已介入处理）这时我们要是同意了退款会不会直接算我们纠纷退款？还是我们等着小二处理。。请各位大神支招。如何才能不计入，不影响数据。