在您的情况下，您可能遇到了公司未明确告知罚款或扣款行为的情况。根据《劳动法》的规定，雇主应当在与员工签订劳动合同前或者劳动合同中明确规定任何罚款或扣款的条款，并且在支付工资时一并说明。如果雇主未能做到这一点，则可能会导致违反相关法律规定。 然而，在这种情况下，您是否可以要求公司退还这500元的罚款或扣款呢？这个问题需要具体分析，因为不同地区的法律法规和公司的内部政策可能有所不同。如果您认为该行为违反了相关法律规定，建议您尽快联系当地的劳动监察部门进行咨询和投诉，以维护自己的合法权益。同时，您可以考虑聘请一位专业的法律顾问来帮助您处理此事。