以外，很难染指西班牙的势力范围。心理不平衡的英国嫉妒西班牙抢到的巨额财富，就怂恿海盗专门袭击西班牙的船只，并为之提供庇护所。与此同时，欧洲一些亡命之徒也沦为了海盗，在美洲沿海抢劫过往商船，特别对抢劫西班牙的运金船更感兴趣。
于是许多西班牙的运金船因为海盗、风暴、礁石等原因沉没在了大海之中，静静的躺在那里，至今少有人问津。据不完全统计——大约每隔30个小时，就有一般船葬身于海底。在全球海洋中，沉睡在海底的大小船只至少有100万艘以上。大海里的巨大财富也吸引着无数人的眼光，早在公元前460年，波斯王泽克西斯一世就曾雇用一位著名的希腊潜水员西利斯，从沉船中打捞起了许多金银财宝。
在公元1686年的时候，北美人威廉·菲普斯靠一次打捞沉船竟成为世界上最富有的人。那是西班牙运金船队在离西印度群岛伊斯帕尼奥拔岛海湾90海里的地方触礁沉没40年后的事。菲普斯遇见了一位运金船队的幸存者，从中了解到船失事前后的情况。1681年，菲普斯独自来到英国，经多方奔走，并费尽口舌，终于打动了国王查理二世，支持他进行打捞。但菲普斯时运不佳，首次打捞失败，激怒了查理二世，将他投进了监狱。
1686年获赦出狱后，菲普斯仍重操旧业。他总结了第一次的教训，先雇用24名能潜入30米深海的采珠潜水员，在运金船队沉没处方圆几海里的海底进行探索。事有凑巧，一个潜水员发现了一个奇特的珊瑚，本想捞起来作个留念，谁知捞出水面后才发现它竟是由白银粘结而成的。沉船终于找到了!经过了40多天的打捞，他们总共捞获黄金25磅、白银27000余磅、金银器皿1000余件。这些财宝多沉在水深仅11米的海底，而更多的船只沉睡在大海深处，静待后人的挖掘。
而在我国南海地区，我们中国人还没收获自己祖先的宝藏呢！但许多外国探险者却已经打捞起好几艘中国古代沉船了，从上面打捞出的瓷器多达几万件，甚至是十几万