PHP yapılandırması ile alakalı bir sorun olsaydı resimler ya hiç ya da bazen yüklenmezdi diye düşünüyorum. Sanırım öyle bir problem yok gibi burada. Yavaşlığın sebebi, sunucuda modsecurity benzeri gibi herhangi bir güvenlik yazılımı yüklüyse eğer ondan kaynaklı olabilir.

İnternetinizden kaynaklı sorun olup olmadığını tespit edebilmek adına farklı bir cihaz ve yine farklı bir internet ile resim yüklemeyi deneyebilirsiniz.
Yine aynı şekilde yavaşlığın WordPress'den veya modsecurity'den kaynaklı olup olmadığını sunucuya cPanel/Plesk dosya yöneticisiyle dosya yükleyerek kontrol edin. Eğer dosya yöneticisi ile hızlı yüklüyorsa en azından sunucudan veya network'den kaynaklı bir sorun yok demektir.