缺货，告诉客户，客户自己故意及时申请退款，然后投诉想获取5块钱。怎么办？

问问大家，有个人来我家我买货，拍的时候，我告诉他这个缺货，发不了。他就是故意不退货，然后3天后投诉我，说我未按照约定时间发货。这个理由能成立么？