您好！根据我国《社会保险法》的规定，职工应当参加基本养老保险，由用人单位和职工共同缴纳基本养老保险费。您在1998年至2004年担任村党支部书记期间，虽然没有与所在单位建立劳动关系，但仍然应视为具有劳动关系，因此应当为您的基本养老保险缴费。您可以向当地人力资源和社会保障局提出申请，并按照规定进行补缴。同时，建议您及时了解相关政策法规，以便更好地维护自身的合法权益。