运费太高亏很多，买家付款了，要求买家退款不做这单生意可以吗。买家不同意退款，投诉我有什么处罚？

买家打了很长时间的价给了他优惠，不过发货时运费特别高，不想做这单了，通知买家退款买家不同意，要投诉，我会受到什么处罚？