被买家恶意退款不退货，没有及时拒绝完成退款有影响吗？

客户收到货一个星期后来退款不退货，理由说我们卖假货，也没有联系上买家，买家号也是0信誉，没有及时处理完成退款有影响吗？