在处理涉及未成年人抚养权变更的案件时，通常要求双方当事人共同参与签署相关文件。因此，在你的情况中，如果你和前夫都同意变更抚养权，那么你们应该一起到法院或律师事务所，由律师协助起草并签署变更抚养权协议书。 在签订协议时，你需要确保协议的内容能够充分保护孩子的利益，并且符合当地法律法规的规定。此外，考虑到孩子年龄较小可能对某些条款理解不深，最好让有经验的律师进行指导。 请记得在签署任何重要文件之前，仔细阅读所有条款，并咨询专业人士以确保你的权益得到妥善保障。