商家不予退还的，您可以向当地的消费者协会投诉，消费者协会解决不了的，您可以向当地的工商部门进行投诉，仍然解决不了的，您可以向法院起诉。具体解决办法如下：
1、消费者卡如果不退钱，在无法取得协商的结果下，应该拨打12315消费者热线进行投诉，由消费者协会来处理该项纠纷，但是前提是必须符合退款原则，不得随意投诉，影响商家的正常经营；
2、在消费者协会介入后仍然无法解决退钱纠纷时，消费者可以依法向人民法院提出行政诉讼，要求商家退还消费者卡内的余额。
会员充值退费规则：
“退卡不退钱”是一种典型的霸王条款。消费者办理这种提前交款性质会员卡，从法律上讲卡内的金额属于预付款，一旦消费者在消费过程中出现问题，商家应该向消费者返还卡内全部余款。
发卡企业或售卡企业应依单用途卡章程或协议约定，提供退卡服务。
发卡企业或售卡企业应将资金退至与退卡人同名的银行账户内，并留存银行账户信息。卡内资金余额不足100元（含）的，可支付现金。而第二十二条还规定，发卡企业终止兑付未到期单用途卡的，发卡企业和售卡企业应向持卡人提供免费退卡服务，并在终止兑付日前至少30日在备案机关指定的媒体上进行公示。
综上所述，充值卡不退钱可以去当地的消费者协会投诉，消费者协会解决不了的向当地的工商部门进行投诉，仍然解决不了的，可以向法院起诉。
【法律依据】：
《中华人民共和国消费者权益保护法》第三十九条
【争议解决的途径】消费者和经营者发生消费者权益争议的，可以通过下列途径解决：
（一）与经营者协商和解；
（二）请求消费者协会或者依法成立的其他调解组织调解；
（三）向有关行政部门投诉；
（四）根据与经营者达成的仲裁协议提请仲裁机构仲裁；
（五）向人民法院提起诉讼。