2. Big Mom
Kejatuhan Big Mom dimulai saat dia membentuk aliansi bersama Kaido di daerah Wano.
Sebelumnya, Big Mom sudah dibikin malu oleh Luffy yang berhasil kabur hidup-hidup dari Whole Cake Island.
Saat perang besar meletus di Onigashima, Big Mom takluk oleh duet Eustass Kid dan Trafalgar Law.
Sama seperti Kaido, nasib Big Mom juga belum diketahui pasti usai kalah dan jatuh ke dasar Wano.
3. Shirohige
Berbeda dengan Kaido maupun Big Mom, Shirohige sudah lengser sebagai jauh sebelum perang di Wano.
Dalam hal ini, Shirohige tak lagi menjadi bagian Empat Kaisar setelah gugur dalam perang di Marineford.
Usai Shirohige meninggal, giliran Kurohige (Marshall D Teach) yang mengisi posisi tersebut.
Sebelum Teach menjadi Empat Kaisar, dia pernah menjadi anak buah Shirohige selama beberapa waktu.
Namun, Teach kemudian membelot dengan membunuh Thacth dan merampas Buah Iblis Yami Yami no Mi.
Tak hanya itu, Teach juga bahkan mengambil Buah Iblis Gura Gura no Mi dari Shirohige yang sudah mati.