当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民法院应当予以支持：

　　（一）双方未办理结婚登记手续的；

　　（二）双方办理结婚登记手续但确未共同生活的；

　　（三）婚前给付并导致给付人生活困难的。

　　适用前款第（二）、（三）项的规定，应当以双方离婚为条件。
所以你还是需要退的。可以协商少退些。

您好，依据法律规定您应当退还，但是实践中，法院可能会考虑你们一起生活的情况判决适当退还。如果您十分不情愿，可以等对方诉讼，依据判决来解决。