A набор параметров, которые можно использовать для указания, какой тип контента обхода, что URL-адресов ползать, и насколько глубоко и когда ползать.