《行政处罚法》第三十一条规定。“违法行为在二年内未被发现的，不再给予行政处罚。涉及公民生命健康安全、金融安全且有危害后果的，上述期限延长至五年。”因此，如果行政处罚决定书已经送达并确认，但当事人拒绝签字或无法找到，则行政处罚决定仍然可以生效。但是，建议您在处理此类情况时，尽量联系当事人进行沟通，并尝试寻找其他方式来确保行政处罚能够得到有效的执行和遵守。如果您需要进一步的帮助，请咨询专业的法律顾问。