传说楚霸王项羽在攻克秦都咸阳、火烧阿房宫时，连同这十二铜人也一起毁掉了。

又有传说十二铜人并未被毁掉，由于十二铜人是秦始皇生前的喜爱之物，所以在秦始皇陵墓营造好后，十二铜人和其它精美的物品一起被当作随葬品而葬于陵墓。

更有传说秦始皇陵，其实早在两千年前就已经被项羽挖了，毕竟以项羽对秦始皇的痛恨，这种事并不是干不出来。

这也是为什么现今，那些考古工作者不敢挖掘秦始皇陵的原因，当年项羽攻克咸阳时，对秦始皇恨之入骨，一把大火烧掉了阿房宫，如果真有秦始皇陵不可能没有人知道，项羽是否挖了它现在没有史料记载，而且是否有人早已盗墓，里面的东西是不是早已被洗劫一空，也无人敢肯定，现在的里面到底有多少有价值的东西，是否还具有开采意义，谁也不敢肯定。

对今人而言秦始皇陵非常神秘，但对项羽那个时代的人来说就不一样了，虽然秦始皇必然会下令封口，不让人知道自己的陵墓建在什么地方，怕自己死后被人打扰，但动用了七十万万工匠，历时三十八年，如此大的动静瞒得了一时，却瞒不过三十八年之久，只要有心人想要打听，绝对不会查探不到。