網絡爬蟲和非ASCII字符的sitemap.xml在URL中

Question

我們的一個網站有非ASCII（非英語）字符：

http://example.com/kb/начало-работы/оплата 

我不知道怎麼做網絡爬蟲（Googlebot的特別）處理這些情況呢？這些網址是否必須進行編碼或其他處理？

Answer 1

我認爲這是最好的網址編碼。這是標準。