Azure ile ilgili bütün herşey için microsoftun belgelerinden faydalanabilirsiniz. Bahsettiğiniz işlemi azure cli ile kolayca yapabilirsiniz.

ref: https://docs.microsoft.com/tr-tr/azure/dns/dns-web-sites-custom-domain