买家退货说退错了让我拒收？

买家退货说退错了让我拒收，之后再把正确的货物退给我，但是淘宝已经因为买家信誉好先把钱打给买家了，这样我拒收了之后等于是钱货两空啊，这个该怎么处理？