A ragadozókkal nem sok bajuk van, bár a kardszárnyú delfinek és a fehér cápák néha széttépnek egyet-egyet közülük. Annál többet szenvednek az élősködőktől.

A déli elefántfókákat szervezetten csak Déli-Georgia szigetén vadászták a 19. század végétől, de az állomány annyira megritkult, hogy a vadászat gazdaságtalanná vált. A körülmények szabályozása után 1909-ben kezdték újra a fókák öldösését, amit 1964-ben fejeztek be. A 20. században összesen 260 ezer déli elefántfókát lőttek le Déli-Georgián – szinte kizárólag felnőtt hímeket. Napjainkban az elefántfókák védett állatok: a déli elefántfókák ma több, mint félmillióan vannak.