一、《中华人民共和国劳动民法典》第39条明确指出，以欺诈、胁迫的手段或者乘人之危，使对方在违背真实意思的情况下订立或变更劳动合同的；用人单位违反法律、行政法规强制性规定的，以及用人单位的规章制度违反法律、行政法规强制性规定导致劳动合同无效的。二、根据上述规定，如果用人单位以欺诈、胁迫的手段或者乘人之危，使劳动者在违背真实意思的情况下订立或者变更劳动合同的，该劳动合同是无效的。三、如果合同是有效的，则按照法律规定执行，即劳动者有权要求用人单位支付经济补偿金和赔偿金等。四、综上所述，在用人单位与劳动者没有签订劳动合同的情况下，如果没有证据表明双方存在合法有效的劳动关系，仅凭用人单位出具的考核罚款单无法证明劳动者与用人单位之间存在劳动关系。因此，建议您收集更多的证据来证明劳动关系的存在，如工作服、工资流水、考勤记录等。如果您需要专业的法律帮助，请联系您的法律顾问或律师事务所。