Jquery ile yapman mümkün. Aşağıdaki sayfayı incele yaparsın.
https://stackoverflow.com/questions/25397372/how-to-remove-or-change-html-extension-in-my-url-using-javascript-or-jquery