在交通事故中，责任认定书是确定各方责任的重要依据。如果保险公司在理赔过程中引用了“责任认定书上写着离开现场”这一条款，那么这可能会影响保险公司是否赔付的问题。 然而，您提到的“责任认定书没有写明责任方逃逸”，并且“当时他在那里拿钱”，这些信息表明可能存在一些争议和复杂性。在这种情况下，建议您与保险公司进行详细的沟通和协商，了解保险公司的具体规定和处理流程，并根据实际情况提出合理的解决方案。同时，也可以考虑聘请专业的律师协助处理，以确保权益得到最大程度的保护。 重要的是要明确一点，在任何情况下，及时、准确地提供所有相关信息对于维护自身合法权益至关重要。如果您需要更具体的法律建议，请咨询一位经验丰富的法律顾问。