[crawler]

Несколько скриптов одновременно - это что-то с тредами. Посмотри как именно ты запускаешь скрипты. Наверняка ты их запускаешь "неправильно" или они у тебя пользуются одними и теми же ресурсами поэтому ждут друг друга.