根据我国相关法律规定，婚姻关系存续期间的婚前个人财产归各自所有。因此，在没有共同财产的情况下，通常不需要退还彩礼钱。但具体情况还需结合当地的具体法律法规和双方的具体协议来确定。 如果双方有明确的约定或协议，则按照约定处理；如果没有约定，可以向法院申请调解或者诉讼解决。在处理此类纠纷时，建议双方进行充分沟通，寻求友好协商的方式解决问题。同时，也可以考虑聘请专业的律师提供帮助，以确保自己的合法权益得到保护。