根据您描述的情况，由于您只是承包了清理垃圾这一块的工作，并且也没有签订任何免责协议，因此工地上不会承担直接责任。但是，如果工地上存在疏忽或者管理不当导致事故发生的可能性，则可能会被追究相应的法律责任。 建议您尽快与工地上沟通，了解具体的责任分配和赔偿方案。同时，可以考虑收集相关证据，如监控录像、目击证人等，以便在必要时作为索赔依据。 此外，如果您对赔偿金额或责任分配有疑问，也可以寻求法律专业人士的帮助，以确保自己的合法权益得到保障。