Merhaba hocam,

bunun için öncelikle eklenti kurmalısınız.

Google XML Sitemaps ve Yoast benim bildiğim bu iki eklenti var.
Google XML Sitemaps sadece xml site haritası oluşturmak için kullanılıyor
Yoast ise seo eklentisi olarak içerisinde site haritası oluşturmada var.

Eklentilerden seçtiğiniz eklentiyi ekleyin ve aktif edin.