Вопросы по работе "Парсер ссылок"

Здесь обсуждаются технические вопросы работы ПК XseoN

Модератор: XseoN Founder

Re: Вопросы по работе "Парсер ссылок"

Сообщение svitok 10 июн 2012, 16:10

В системе антибан есть такая кнопка найти куки в браузере. Но она почему то неработает почему?
2. При внесении куки в ручную при выходе программы они не сохраняются и приходится вносить их заново это же касается и системы antigate.
3. если парсить допустим в google.ru и google.com.ua (куки вносить вместе google.ru,google.com.ua или достаточно одного?)
4. Можно ли видео сделать по парсингу в яндексе. Не смог разобраться как то все запутано.
Доступная интернет реклама для вашего бизнеса
svitok
 
Сообщений: 123
Зарегистрирован: 06 май 2012, 15:04
Откуда: Украина

Re: Вопросы по работе "Парсер ссылок"

Сообщение Турист 10 июн 2012, 16:48

Ну вот же, чуть выше было
Кнопка автоподстановки кук не активна, в текущей версии куки необходимо вставлять самостоятельно.

У меня вопрос. В проверке ссылок ставлю 10 потоков. Сколько сижу наблюдаю, активных потоков 2. Почему так?
Турист
 
Сообщений: 15
Зарегистрирован: 28 сен 2011, 15:32

Re: Вопросы по работе "Парсер ссылок"

Сообщение XseoN Founder 11 июн 2012, 06:22

Сколько сижу наблюдаю, активных потоков 2. Почему так?

Проверка ссылок не требовательна к системным ресурсам, требовательна к соединению. Если из 10 запущенных потоков в работе находятся только 2, то соответственно 8-и потокам не удалось запуститься, причина, возможно, в соединении, обратитесь в поддержку, необходимо посмотреть через TeamViewer в чем может быть причина.
Видео работы проверки ссылок
Еще раз напомню, - при работе в ОС Windows XP необходимо использовать программу TCPZ или ей подобные, которые разблокируют число полуоткрытых TCP/IP соединений, в XP данное значение залочено и равно 10.
XseoN Founder
Администратор
 
Сообщений: 803
Зарегистрирован: 08 июл 2010, 14:26

Re: Вопросы по работе "Парсер ссылок"

Сообщение XseoN Founder 11 июн 2012, 07:57

При внесении куки в ручную при выходе программы они не сохраняются и приходится вносить их заново это же касается и системы antigate.

Запускайте программу от имени администратора, все внесенные данные в программе сохраняются - видео.
XseoN Founder
Администратор
 
Сообщений: 803
Зарегистрирован: 08 июл 2010, 14:26

Re: Вопросы по работе "Парсер ссылок"

Сообщение XseoN Founder 11 июн 2012, 08:39

если парсить допустим в google.ru и google.com.ua (куки вносить вместе google.ru,google.com.ua или достаточно одного?)

Достаточно внести куки google.ru ИЛИ google.com.ua
XseoN Founder
Администратор
 
Сообщений: 803
Зарегистрирован: 08 июл 2010, 14:26

Re: Вопросы по работе "Парсер ссылок"

Сообщение Турист 11 июн 2012, 12:14

Если из 10 запущенных потоков в работе находятся только 2, то соответственно 8-и потокам не удалось запуститься,
сегодня запустил на 50 потоков, в работе тоже 50 :)
кстати делал проверку ссылок, проверила явно не все. Сохранил в файл. Теперь запускаю по новой на проверку, после сохранения теперь будут дубли в проверенных?
Турист
 
Сообщений: 15
Зарегистрирован: 28 сен 2011, 15:32

Re: Вопросы по работе "Парсер ссылок"

Сообщение XseoN Founder 11 июн 2012, 18:03

после сохранения теперь будут дубли в проверенных?

Возможно, прогоните Результат в "Парсер ссылок ---> Удаление дублей строк ---> Удаление дублей доменов"
XseoN Founder
Администратор
 
Сообщений: 803
Зарегистрирован: 08 июл 2010, 14:26

Re: Вопросы по работе "Парсер ссылок"

Сообщение GASPAR 12 июн 2012, 17:38

Турист писал(а):
кстати делал проверку ссылок, проверила явно не все.


Кстати, я тоже заметил, что проверяет не все ссылки, остаётся непроверенными от 5 до 10 ссылок.
Так же точно и прокси, при проверке остаются непроверенными 3-6 прокси. :(
GASPAR
 
Сообщений: 64
Зарегистрирован: 13 апр 2012, 19:28
Откуда: Украина

Re: Вопросы по работе "Парсер ссылок"

Сообщение svitok 13 июл 2012, 22:27

Мне кажется что в парсере ссылок нужно добавить просмотр синтаксиса запросов поисковых систем в браузере. Так как хочется видеть соответствует ли синтаксис тем запросам которые я хочу получить при парсинге и при необходимости откоректировать запрос перед поиском
Доступная интернет реклама для вашего бизнеса
svitok
 
Сообщений: 123
Зарегистрирован: 06 май 2012, 15:04
Откуда: Украина

Re: Вопросы по работе "Парсер ссылок"

Сообщение XseoN Founder 14 июл 2012, 04:36

Мне кажется что в парсере ссылок нужно добавить просмотр синтаксиса запросов поисковых систем в браузере

В Гугле можно просто вставить текст запроса в поисковую строку и посмотреть на выдачу. Но при парсинге через прокси, выдача Гугла меняется, т.к. он ИМХО ориентируется на страну источника запроса (страну, где находится прокси), поэтому выдача разная.
В Яндексе по большому счету можно вставить сам текстовый запрос без дополнительных параметров в поисковую строку и посмотреть на выдачу, или добавить к полному поисковому запросу "http://www.yandex.ru" и вставить полученную строку в строку браузера, но опять же, при парсинге через прокси имеются вариации в выдаче.
Хотя удобней, конечно же, без этих манипуляций, есть смысл реализовать, поставим в очередь.

З.Ы. Вчера закончил работу над устранением некорректной работы ПК XseoN c файлом, сформированным в XseoNMaster, так же доработан сам XseoNMaster в части работы с Юникодом. На очереди работа с капчей YaBB.
XseoN Founder
Администратор
 
Сообщений: 803
Зарегистрирован: 08 июл 2010, 14:26

Пред.След.

Вернуться в Технические вопросы

Кто сейчас на форуме

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 5

cron