衣服扣子掉了，顾客要以质量问题退款，怎么办？

衣服扣子掉了，我们说可以给换一件，顾客又说衣服小了，要我们承担运费退货，我说质量问题我们可以承担运费换，但如果个人原因问题就需要顾客自己出，最后我们也妥协说给返邮费了，然后就说我们态度不好，蛮横，不肯