Не знаю, как там образ создавали, но он еле работает, образ от блекниндзи работал быстрее.
Макс Максимов, в этом образе установлено 1,5 ГБ ОЗУ. Соответственно у Вас должно быть больше 2 ГБ ОЗУ, а желательно 3 ГБ для комфортной работы. Также желательно 2-ядерный процессор (1 ядро для виртуалки, 2-е для остальной системы). Чтобы образ работал быстро, нужно в настройках самой VMware сделать следующие изменения: меню "Правка" - "Настройки" - закладка "Память" - выбрать опцию "Установить все виртуальные машины в памяти RAM зарезервированной узлом". Таким образом, ваша виртуалка полностью разместится в ОЗУ и не будет свопиться (использовать файл подкачки винды), но для этого нужно иметь от 2,5 ГБ ОЗУ. В образе блекниндзи, не помню точно, 1 - 1,1 ГБ ОЗУ.
Подводя итог, наш образ, в отличие от образа блекниндзи, имеет больший "запас прочности", но требует более мощного компьютера. Если Вы собираетесь всерьез работать с Хрумером, тогда Вы оцените наш образ, т.к. он может выдержать большую нагрузку и количество потоков (виртуалка внутри меньше свопиться), соответственно работает стабильнее, плюс экономится Ваше время. Если у Вас слабый компьютер, тогда и возникают разные "проблемы" и "зависы". Отсюда становится непонятно, как Вы собираетесь профессионально использовать XRumer...
4 Гг ОЗУ думаю, что больше чем достаточно.
виснет в определенный момент, даже скажу в какой два раза зависала намертво:
при использовании соцплагина отрабатывает проект, все отлично, делаю выход из текущего аккаунта - виснет соцплагин и сам хрумер намертво, при этом хреф пашет в нормальном режиме
4 гига, проц intel i3, поставил "Установить все виртуальные машины в памяти RAM зарезервированной узлом" щас потестю. Можно как то без перезагрузки вари поставить больше ядер ? И не могли бы вы сделать дамп форума ботмастреа или выложить какой нибудь туториал по хруму. Спамать то понял как, но хотелось бы научится делать это правильно.
Макс Максимов, какое количество занимаемой Хрумером оперативки на момент вылета? Также скиньте последние ссылки с лога, на которых споткнулся Хрумер (желательно фрагмент самой базы с 20 ссылками до и 20 после).
Где посмотреть логи ? И как определить количество занимаемой памяти, не могу же пол часа на работающий хрумак смотреть ...
Макс Максимов, в папке Logs - логи, Logs\имя_проекта\LastURL id_.txt последняя позиция ссылки в базе. Количество ОЗУ определяете очень просто: Ctrl+Shift+ESC запускаете диспетчер задач. Он рисует график использования памяти. Ради общего дела, уверен, можно немного потерпеть и посматривать на Хрумер. Вы ведь хотите докопаться до причины вылетов?
Цитата
Хрум работал на 10потоках, не думаю что тут оперативка виновата
Дело не в потоках, а в загружаемых сайтах. В них могут быть вирусы, может страница быть бесконечно большая и т.д.
Проверяйте не браузером, а Хрумером. Можно вырезать проблемный фрагмент базы, запустить на прогон и посмотреть, что будет. Если прикинуть логично, то нужно брать гораздо больший диапазон (500 до и 20 после ссылок), поскольку страница может подгружаться довольно долго и в логе текущая позиция убежит далеко вперед от проблемной, если Вы понимаете, о чем я. Чтобы не проходить заново все хорошие ссылки, можно отфильтровать базу по успешным + полу + неуспешным, остануться непройденные, и запустить по ним прогон - так даже лучше будет.
Александр Денисов, читайте шаг 7: нужно приостанавливать виртуалку либо переводить в спящий режим. Сам стационарный компьютер после этого можно перезагружать и выключать сколько душе угодно.
Да, с проксями дело худо. Напарсил проксей, из 200 анонимными оказались всего десяток. Плюс ко всему большая часть проксей, тех, что в паблике - она используется такими же как мы, тысячами пользователей, соответственно - перегружена, работает медленно, а через недолгое время также улетает в бан. Нужны платные непубличные прокси (про это собственно в справке по Хрумеру так и написано).
Попробовал порегить профили (по стандартной базе и еще по паре баз), результат оказался не очень ) Из выборки в 400 форумов получилось всего около 20 реальных профилей. Возможно дело в базе, нужно парсить руками новые базы, обучать. Тем более что на нормальных незаспамленных форумах стоят всякие хитрые защиты (с поворотами картинок и прочими трудностями), просто так хрумер их не возьмет.
P.S Да, аналогично произошел вылет на 460-какойто строчке базы. Сохранил 2 папки, как сказано в инструкции, потом восстановил образ из снимка виртуальной машины, засунул папки на свои места, сменил базу, но результаты почему-то не сохранились. Да, еще не совсем понял с антикапчей - получается, хрумер сначала пытается разгадать капчу своими силами, а после скольки-то неуспешных попыток переходит на anticaptcha. Только вот как будет работать антикапча, если ключ антикапчи прописывается руками в конфиг-файл, а настройки из этого конфига программа подхватывает только после перезапуска, который, как известно, производить нельзя? Так понимаю, можно расчитывать только на встроенный модуль распознавания капчи?