你好！我想咨询一个问题：单位扣了职工的住房公积金，开始几年是按时上缴到当地住房公积金管理中心的，后来由于单位资金紧缺，扣了职工的住房公积金，但又没有上缴，现在职工退休了，要支取公积金，就要求单位把扣了又没上缴的连同单位补贴一起退，而单位只退扣了职工的那部分，单位补贴部分不退，单位这样违法吗？