您好，我是刚毕业的应届毕业生，我在毕业时与用人单位签订了三方协议，但现在已经工作半年了，用人单位也没有与我们签订劳动合同，所以，我想咨询下，我要是离职拿回我的档案的话，是否要向用人单位支付违约金，要是不需用，而用人单位又要违约金的话我应该怎么办？