Как рандомизировать широкое ползание с помощью скраски, индексированной A-Z ⇐ Python

[Anonymous]

Я пытаюсь выполнить очень широкий ползание со скребкой. Я следовал основным инструкциям для широкого ползания от документов, но мне интересно, почему я вижу результаты, которые индексируются в том, что, кажется, является буквенный порядок.

Код: Выделить всё

asomething.com
1-afoobar.com
001-bar.com
aafoo.com
betabar.com

Сокращенные результаты не являются ровно в алфавитном порядке, но после сотен новых элементов они все, по -видимому, начинаются с числа или очень рано в алфавите, что указывает на какую -то сортировку. Кажется, это противоречит идее широкого ползания. У кого -нибудь есть указатели на то, почему они находятся в очереди и как это скрежетают, и как лучше «рандомизировать» очередь?

Подробнее здесь: https://stackoverflow.com/questions/794 ... ndexed-a-z