被派遣劳动者不符合录用条件或严重违纪违法，以及不胜任工作等情形用工单位可以要求退回被派遣劳动者。这样，劳务派遣单位依据劳动合同法的有关规定，可以与被派遣劳动者解除劳动合同。由于用工单位不是被派遣劳动者的用人单位，其与被派遣劳动者之间不存在劳动合同关系，所以一般只能退回原公司进行处理。《中华人民共和国劳动合同法》第九十二条：劳务派遣单位违反本法有关劳务派遣规定的，由劳动行政部门责令改正；逾期不改正的，以每人5000元以上10000元以下的标准处以罚款，对劳务派遣单位，吊销其劳务派遣业务经营许可证；用工单位给被派遣劳动者造成损害的，劳务派遣单位与用工单位承担连带赔偿责任。