商场买的衣服退货时间主要依据《中华人民共和国消费者权益保护法》第二十四条的规定。具体而言，有以下几种情况：
如果消费者购买的衣服存在质量问题，可以在购买之日起七个自然日内选择进行退货处理。
如果商场没有明确规定不接受无任何理由的退货申请，消费者有权自收到商品之日起的七个自然日内提出退货要求，并且无需向经营者提供具体的退货原因和理由陈述。
根据《中华人民共和国消费者权益保护法》第二十五条的规定，消费者定作的商品、鲜活易腐的商品、在线下载或者消费者拆封的音像制品、计算机软件等数字化商品以及交付的报纸、期刊等商品，是不适用无理由退货的。
综上所述，商场买的衣服在存在质量问题时，消费者可以在7天内退货；如果商场允许无理由退货，则消费者可以在收到商品后的7天内退货，无需提供理由。但特定商品如消费者定作的商品等，则不适用无理由退货的规定。
建议：
购买商品时，建议消费者先了解商场的退货政策，以便在需要退货时能够更顺利地进行操作。
如果商品存在质量问题，应尽快与商场联系，按照商场和法律规定进行退货处理。
