Şu eklentiyle istediğinizi yapabilirsiniz sanırım: https://wordpress.org/plugins/advanced-permalinks/

Veya bu tarz bir gelişmiş kalıcı bağlantı düzenleme eklentileri ile yapmanız lazım.