Aslında söylenenlerin aksine o bileşenlerin değiştirilmesi münkün ama hem kalıcı bir çözüm olmaz hem de yeni bir bileşen yapmak kadar uğraştırır. O yüzden özel bileşen yapman lazım. Nasıl yapılır dersen buyur sana bir sürü kaynak.

Video (İngilizce)
Let's Create a Basic Wordpress Widget - Part 1
Let's Create a Basic Wordpress Widget - Part 2
Let's Create a Basic Wordpress Widget - Part 3

Kullanılan API
Widgets API

Türkçe kaynak arıyorsan "wordpress temaya özel bileşen yapımı" araması yaparak birçok kaynak bulabilirsin.