Bunun için özel bir eklenti varmı bilmiyorum ancak eklenti ile yapma zorunluluğun yok. Html/css kod kullanarak çok basit bir şekilde yapabilirsin.

Mesela örnek olarak sağ tarafa bir adet 120x600px reklam ekleyelim. Aşağıda verdiğim kodu header.php veya footer.php dosyasını açıp uygun bir yere yapıştır:

Alt alta 2 tane eklemek istersen:

Bir adet sayfa aşağı indikçe gelen reklam eklemek istersende: