首先，根据您的描述，您在加盟过程中已经支付了一定的费用，包括但不限于加盟费和可能的培训费等。如果您在寻找合适的门店时遇到了困难，并且决定不再继续合作，那么根据合同条款，您有权要求退款。 然而，如果公司声称“没有退钱的说法”，并且坚持认为应该收取违约金，这可能是基于一些特定的原因或条款。例如，如果合同中规定了提前终止合同需要支付一定的违约金，或者如果公司的行为违反了其作为加盟商应承担的责任。 在这种情况下，建议您与公司进行详细沟通，了解具体情况并寻求法律意见。如果您对公司的解释不满意，您可以考虑通过法律途径解决问题，以保护自己的权益。同时，确保保留所有相关文件和证据，以便在未来处理此类问题时能够提供支持。