Страница 3 из 10

Re: Вопросы по работе "Парсер ссылок"

СообщениеДобавлено: 10 июн 2012, 16:10
svitok
В системе антибан есть такая кнопка найти куки в браузере. Но она почему то неработает почему?
2. При внесении куки в ручную при выходе программы они не сохраняются и приходится вносить их заново это же касается и системы antigate.
3. если парсить допустим в google.ru и google.com.ua (куки вносить вместе google.ru,google.com.ua или достаточно одного?)
4. Можно ли видео сделать по парсингу в яндексе. Не смог разобраться как то все запутано.

Re: Вопросы по работе "Парсер ссылок"

СообщениеДобавлено: 10 июн 2012, 16:48
Турист
Ну вот же, чуть выше было
Кнопка автоподстановки кук не активна, в текущей версии куки необходимо вставлять самостоятельно.

У меня вопрос. В проверке ссылок ставлю 10 потоков. Сколько сижу наблюдаю, активных потоков 2. Почему так?

Re: Вопросы по работе "Парсер ссылок"

СообщениеДобавлено: 11 июн 2012, 06:22
XseoN Founder
Сколько сижу наблюдаю, активных потоков 2. Почему так?

Проверка ссылок не требовательна к системным ресурсам, требовательна к соединению. Если из 10 запущенных потоков в работе находятся только 2, то соответственно 8-и потокам не удалось запуститься, причина, возможно, в соединении, обратитесь в поддержку, необходимо посмотреть через TeamViewer в чем может быть причина.
Видео работы проверки ссылок
Еще раз напомню, - при работе в ОС Windows XP необходимо использовать программу TCPZ или ей подобные, которые разблокируют число полуоткрытых TCP/IP соединений, в XP данное значение залочено и равно 10.

Re: Вопросы по работе "Парсер ссылок"

СообщениеДобавлено: 11 июн 2012, 07:57
XseoN Founder
При внесении куки в ручную при выходе программы они не сохраняются и приходится вносить их заново это же касается и системы antigate.

Запускайте программу от имени администратора, все внесенные данные в программе сохраняются - видео.

Re: Вопросы по работе "Парсер ссылок"

СообщениеДобавлено: 11 июн 2012, 08:39
XseoN Founder
если парсить допустим в google.ru и google.com.ua (куки вносить вместе google.ru,google.com.ua или достаточно одного?)

Достаточно внести куки google.ru ИЛИ google.com.ua

Re: Вопросы по работе "Парсер ссылок"

СообщениеДобавлено: 11 июн 2012, 12:14
Турист
Если из 10 запущенных потоков в работе находятся только 2, то соответственно 8-и потокам не удалось запуститься,
сегодня запустил на 50 потоков, в работе тоже 50 :)
кстати делал проверку ссылок, проверила явно не все. Сохранил в файл. Теперь запускаю по новой на проверку, после сохранения теперь будут дубли в проверенных?

Re: Вопросы по работе "Парсер ссылок"

СообщениеДобавлено: 11 июн 2012, 18:03
XseoN Founder
после сохранения теперь будут дубли в проверенных?

Возможно, прогоните Результат в "Парсер ссылок ---> Удаление дублей строк ---> Удаление дублей доменов"

Re: Вопросы по работе "Парсер ссылок"

СообщениеДобавлено: 12 июн 2012, 17:38
GASPAR
Турист писал(а):
кстати делал проверку ссылок, проверила явно не все.


Кстати, я тоже заметил, что проверяет не все ссылки, остаётся непроверенными от 5 до 10 ссылок.
Так же точно и прокси, при проверке остаются непроверенными 3-6 прокси. :(

Re: Вопросы по работе "Парсер ссылок"

СообщениеДобавлено: 13 июл 2012, 22:27
svitok
Мне кажется что в парсере ссылок нужно добавить просмотр синтаксиса запросов поисковых систем в браузере. Так как хочется видеть соответствует ли синтаксис тем запросам которые я хочу получить при парсинге и при необходимости откоректировать запрос перед поиском

Re: Вопросы по работе "Парсер ссылок"

СообщениеДобавлено: 14 июл 2012, 04:36
XseoN Founder
Мне кажется что в парсере ссылок нужно добавить просмотр синтаксиса запросов поисковых систем в браузере

В Гугле можно просто вставить текст запроса в поисковую строку и посмотреть на выдачу. Но при парсинге через прокси, выдача Гугла меняется, т.к. он ИМХО ориентируется на страну источника запроса (страну, где находится прокси), поэтому выдача разная.
В Яндексе по большому счету можно вставить сам текстовый запрос без дополнительных параметров в поисковую строку и посмотреть на выдачу, или добавить к полному поисковому запросу "http://www.yandex.ru" и вставить полученную строку в строку браузера, но опять же, при парсинге через прокси имеются вариации в выдаче.
Хотя удобней, конечно же, без этих манипуляций, есть смысл реализовать, поставим в очередь.

З.Ы. Вчера закончил работу над устранением некорректной работы ПК XseoN c файлом, сформированным в XseoNMaster, так же доработан сам XseoNMaster в части работы с Юникодом. На очереди работа с капчей YaBB.