婚姻维持时间短离婚时不一定退彩礼。离婚后退还彩礼的情况只有两种：婚前给付并导致给付人生活困难；双方办理结婚登记手续但确未共同生活；所以只要双方当事人之间没有出现上述情形，男方无权要求女方退彩礼钱。
《最高人民法院关于适用<中华人民共和国民法典>婚姻家庭编的解释（一）》第五条
当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民法院应当予以支持：
（一）双方未办理结婚登记手续；
（二）双方办理结婚登记手续但确未共同生活；
（三）婚前给付并导致给付人生活困难。
适用前款第二项、第三项的规定，应当以双方离婚为条件。
