Поддержка мультиязычных веб серверов

Некоторые веб-серверы могут поддерживать механизм согласования языка содержимого. В этом случае по одному URL может выдаваться несколько различных документов, в зависимости от языковых предпочтений клиента.

Для индексирования всех страниц таких серверов предназначена клманда VaryLang, задающая список языков, разделённых пробелами, которые будут запрашиваться при индексировании каждого URL, имеющего несколько языковых вариантов.

Пример использования:

 
VaryLang "ru en fr"

При индексировании будут запрашиваться копии документов на русском, английском и французском языках.