Файл sitemap.xml и https — как писать?
Да, причем все. 
Чередование протоколов может привести к неправильной индексации сайта поисковыми системами.
И если уж сайт поддерживать шифрование, то перенаправлять всех, кто идет на http:RewriteEngine On
 RewriteCond %{HTTPS} !=on
 RewriteRule ^.*$ https://%{SERVER_NAME}%{REQUEST_URI} [R,L]
Lici если в sitemap ссылки у Вас прописаны с http://, то конечно нужно поменять на https://.
По теме переезда еще почитайте:Переезд с HTTP на HTTPS: главное – ничего не потерять!
Google Рекомендации по настройке HTTPSМигрируем на HTTPS 