只要你们能够达成离婚协议，自己再次约定孩子抚养权即可，到婚姻登记机关办理离婚登记的时候把协议书交给婚姻登记机关及具有法律效力。你们复婚的时候，原来离婚时约定的孩子抚养权内容已经失效，不再具有约束力。重新约定就行了。
