胎记会跟着人长大的原因涉及多个方面，主要包括：

1. 神经嵴细胞迁移异常：这可能导致皮肤发育异常，使得胎记的大小和形态随人一起生长。

2. 血管发育异常：血管数量或分布位置的改变可能导致局部毛细血管扩张或增生，形成红色或紫色的胎记，并随着个体的生长发育而增大。

3. 遗传因素：部分类型的胎记可能受到遗传的影响，若家族中存在相关基因突变，则后代患病风险增加，并且这些胎记有可能随着个体的生长而增大。

4. 激素水平变化：激素水平的变化会影响皮肤细胞的生长和分化，导致某些区域的色素沉积增多，形成胎记，而这些胎记也可能随着激素水平的改变而发生变化。

5. 皮肤组织损伤后的修复反应：当皮肤受到外伤或其他伤害后，为促进伤口愈合，机体可能会过度生产黑色素，形成褐色或黑色的胎记，这些胎记可能随着伤口的愈合过程而增大。

需要注意的是，不同类型的胎记其生长原因可能存在差异。因此，如果发现胎记有增大或其他异常变化，建议及时前往医院，由专业医生进行诊断和治疗。