海外入台证跟国内申请入台证

下个月想带宝宝去台湾看爷爷奶奶，回武汉看外公外婆
1. 已在加拿大办了多次入台证
2. 行程是加拿大 - 台湾 - 武汉，武汉 - 台湾 - 加拿大。在台湾都会待上两个星期
3. 回到武汉后肯定会去办大通证，现在有个问题是，我比对了一下海外办的入台证跟国内的。唯一的差别就是海外入台证上有一栏位是写著护照号码，国内申请的是写著通行证号码。除此之外完全一模一样。我可以就用大通证 + 海外申请的入台证去台湾? 还是我需要在国内重新申请入台证?