布料轻微气味，买家恶意申请退货退款，质量问题，退款后又投诉违背承诺，让退运费？

买家恶意申请退货退款，质量问题，让他修改不修改，威胁差评。想着退回来就算了，退款后又投诉违背承诺，让退运费。我想问如果我不妥协了，不退他运费，淘宝会怎么处置？