雇佣人可以要求被雇佣人赔偿材料损失。在建筑工程中，雇主要求支付给工人材料费用是合理的。如果雇主未能提供足够的材料或材料质量不符合标准，雇员有权向雇主索赔材料损失。然而，雇主是否有权从工人的工资中直接扣取这部分费用，则需要根据当地的劳动法规定进行判断。建议咨询当地的专业法律人士以获取准确的法律意见。