Форум АНТИЧАТ

Форум АНТИЧАТ (https://forum.antichat.xyz/index.php)
-   ICQ (https://forum.antichat.xyz/forumdisplay.php?f=13)
-   -   [FAQ] по добыче прокси для брута (https://forum.antichat.xyz/showthread.php?t=156507)

mff 14.11.2009 16:29

[FAQ] по добыче прокси для брута
 
FAQ по добыче прокси для брута.

В этой статье мы рассмотрим следующие способы добычи прокси:
  1. Сканирование
  2. Сёрчинг
  3. Личинг
  4. Граббинг
Так же рассмотрим некоторые методы проверки на прокси (чек), сортировки, фильтрации, проверки на страны и т.д.
Я не буду здесь описывать, что такое прокси сервер и мы не будем рассматривать ряд устаревших программ.


Сканирование ip адресов и последующая их проверка (чек) на прокси.
Сканировать можно по стране или по определенному диапазону на определённые порты.

Диапазоны.
Диапазоны стран можно взять на сайтах:
http://www.proxyserverprivacy.com/ipaddress_range.php
http://www.ipaddresslocation.org/ip_ranges/get_ranges.php
http://www.find-ip-address.org/ip-country/
http://www.proxysecurity.com/ip-address-range.php

и т.д. Весь диапазон ip адресов: 0.0.0.0-255.255.255.255

Порты.
Мы будем сканировать на порты:
Http: 80, 8080, 3128
Socks4 и Socks5: 1080

Это основные порты. Есть очень много других хороших портов, на которых есть прокси пригодные для брута icq, например: 81, 82, 6855, 8000, 8082, 8090, 8888 и т. д.

Как же узнать, на какие порты сканировать?
Есть много способов, я предложу один из простых и верных. Регистрируемся на нескольких прокси форумах:
http://proxyfire.net/forum/
http://dcsproxy.com
http://forum.my-proxy.com
http://proxygod.com/forum/

Собираем все прокси что там выкладывают за сегодня, удаляем дубликаты (как их удалить читайте ниже) и засовываем оставшееся в брут .Brutal. Ставим "Cleanup" на час и отдыхаем. Потом, после клинапа смотрим порты ;)

Весь диапазон портов: 0-65535


Proxyfire

Качаем Proxyfire Master Suite Free 1.22 или покупаем ProxyFire Master Suite Professional 1.22($29)
Можно найти крякнутую версию, Google в помощь.

Proxyfire - это целая лаборатория для работы с прокси. Можно выкидывать весь старый софт! Вам больше не нужны: сканнеры, грабберы, личеры, сёрчеры, чеккеры, бат-криейдеры, фильтры, дубликат-ремоуторы, парсеры отчётов сканнера и прочий мусор. Proxyfire объединяет все эти утилиты в одной компактной программе, поэтому мы будем работать с ним. Proxyfire не требует установки и с ним очень удобно работать на дедике. Есть скрытый режим.

Приступаем к настройкам программы.


Settings

http://s60.radikal.ru/i169/0911/83/93eb8805f32a.png

Здесь есть окно редактирование прокси судей (Proxy Judges). Их можно нагуглить, а можно сделать свои, надёжные. Для этого вам понадобиться зарегистрировать несколько хостингов и разместить там скрипт azenv.php:

PHP код:

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
<html xmlns="http://www.w3.org/1999/xhtml" xml:lang="en" lang="en">
<head>
<title>AZ Environment variables 1.04</title>
</head>
<body>
<pre>
<?php
foreach ($_SERVER as $header => $value ) {
    if(
strpos($header 'REMOTE')!== false || strpos($header 'HTTP')!== false || strpos($header 'REQUEST')!== false) {
    echo 
$header.' = '.$value."\n";
    }
}
?>
</pre>
</body>
</html>

В программе указать путь к этому файлу, нажмите "Add" и пропишите как на скриншоте:

http://s54.radikal.ru/i145/0911/c6/ea8178f6ad33.png

На самом деле легче это сделать вручную, заходим в папку с программой, открываем файл check.ini и пишем в нём:
Код:

[0]
Status=BAD
Verify_http=1
Verify_tunnel=1
Verify_ssl=0
Deleted=0
Url=http://jerry4.freehostia.com/judges/azenv.php
azenv=1
custom=0
UrlCustom=http://www.google.com/intl/zh-CN/
StrLevel1=<title>Google
StrLevel2=<title>Google
StrLevel3=<title>Google
StrIP=
TunnelHost=www.google.com
TunnelPort=443
SSLUrl=https://www.google.com/accounts/ManageAccount
SSLKeyword=<title>Google
Checked=1
[1]
Status=OK
Verify_http=1
Verify_tunnel=1
Verify_ssl=1
Deleted=0
Url=http://joshua2.freehostia.com/judges/azenv.php
azenv=1
custom=0
UrlCustom=http://www.google.com/intl/zh-CN/
StrLevel1=<title>Google
StrLevel2=<title>Google
StrLevel3=<title>Google
StrIP=
TunnelHost=www.google.com
TunnelPort=443
SSLUrl=https://www.google.com/accounts/ManageAccount
SSLKeyword=<title>Google
Checked=1
[2]
Status=OK
Verify_http=1
Verify_tunnel=1
Verify_ssl=1
Deleted=0
Url=http://leroy2.freehostia.com/judges/azenv.php
azenv=1
custom=0
UrlCustom=http://www.google.com/intl/zh-CN/
StrLevel1=<title>Google
StrLevel2=<title>Google
StrLevel3=<title>Google
StrIP=
TunnelHost=www.google.com
TunnelPort=443
SSLUrl=https://www.google.com/accounts/ManageAccount
SSLKeyword=<title>Google
Checked=1

и т.д. Потом сохраняем и перезагружаем программу, заходим во вкладку Settings и видим наши пути к прокси судьям. 10 будет достаточно, подходящий хостинг из бесплатных freehostia.com


Proxy Filter
Все мы знаем, что прокси могут иметь разный вид, к порту приписывают различную информацию, порт 8080 и 808 (это одно и то же), переодически нужно удалять дубликаты, перемешивать прокси листы, удалять прокси с ненужными портами и т.д.
Современнее и новороченнее фильтра-парсера, чем в Proxyfire я не встречал! Это машина для работы с прокси листами.
В окно "In" можно пихать любой мусор, Proxyfire вытащит из него прокси.

http://s42.radikal.ru/i095/0911/31/1c086f6ba4e7.png


P-Scan
Вкладка "Scanner". Здесь можно включить "Auto Check", задать приоритет "Scan process Priority". Устанавливаем количество потоков "Threads". Если у вас интернет канал 6 метров и более ставим 3000 потоков. Проверить скорость интернет соединения можно здесь: http://2ip.ru
Таймаут "Timeout(s)" ставим от 5 до 12, для брута нам нужны быстрые прокси. Выбираем метод сканирования "TCP" (метод "SYN" сейчас не работает, на сколько мне известно). Далее вбиваем диапазоны, которые будем сканировать, диапазоны должны быть вида:
Код:

xxx.xxx.xxx.xxx xxx.xxx.xxx.xxx
http://s53.radikal.ru/i141/0911/ac/ee6d0265224e.png

Можно сканировать диапазоны определённой страны, можно сканировать просто свои диапазоны, а можно создать диапазоны из хороших прокси. Для этого переходим на вкладку "Make IP Ranges", вбиваем хорошие прокси в окно "Input proxies here", выставляем на сколько расширять диапазоны до и после "Up Expand" и "Down Expand" 1000 - оптимальное число. Можно отсеять по странам, жмём кнопку "Sel..." и выбираем страны. Далее жмём "Go" видим в соседнем окне сгенерированные диапазоны и ниже порты.

http://s57.radikal.ru/i158/0911/2f/49f94e2a4c3e.png

Жмём "Copy to Scanner" и мы опять во вкладке "Scanner".
Proxyfire сканирует на 1 порт, на тот, что первый прописан в списке.


P-Search
Очень эффективный способ поиска прокси. Если вам нужно быстро найти рабочие прокси - это то что вам нужно.
Здесь всё просто, выбираем поисковый движок: Google, Baidu, Yahoo! или MSN. Далее меняем код, жмём "Edit" напротив интересующего нас поисковика:
  • Google
    Код:

    [search]
    name=Google
    engine=http://www.google.com/search?hl=en&lr=&as_epq=%KEYWORD%&start=%PAGE%
    link_start=<li class=g>
    link_end=</a>

  • Baidu
    Код:

    [search]
    name=Baidu
    engine=http://www.baidu.com/s?wd=%22%KEYWORD%%22&cl=3&pn=%PAGE%
    link_start=<td class=f>
    link_end=target="_blank"

  • Yahoo!
    Код:

    [search]
    name=Yahoo!
    engine=http://search.yahoo.com/search?p=%22%KEYWORD%%22&ei=UTF-8&b=%PAGE%
    link_start=<a class=
    link_end=</a>

  • MSN
    Код:

    [search]
    name=MSN
    engine=http://search.msn.com/results.aspx?q=%22%KEYWORD%%22&first=%PAGE%
    link_start=<h3>
    link_end=onmousedown


После выбора поисковика устанавливаем количество потоков "Serch Threads:" (в free версии оно ограниченно пятью!).
Можно так же включить "Auto Check" проверка прокси после достижения установленного вами количества найденных прокси.
Жмём "Keywords" и пишем там хорошие прокси с портами, их и будем искать + то, что вместе с ними выкладывают :) Жмём "Go".

http://s48.radikal.ru/i121/0911/40/447bb9ebebf9.png


P-Leecher

http://s46.radikal.ru/i114/0911/fc/6d1da68c50ea.png

Другими словами граббер прокси. Тут так же всё просто, устанавливаем "Loop" и "Auto Check" если надо. Указываем количество потоков и количество тем. Жмём "Edit Forum List" вбиваем туда наши прокси листы.
Прокси листы можно легко нагуглить, вот мой старый лист (нужно чекать) http://dump.ru/file/3764102



Check
Прокси чеккер. Жмём кнопку "Options...", далее выставляем потоки "Threads:" я ставлю 300 как то больше и не надо. Повтор "Retry:" 0
Далее указываем, нужно ли прогонять, через уже настроенный нами фильтр, прокси перед чеком "Filter proxies in the Proxy Filter Tab before Check"
Показать время отклика "Show response time"

http://i041.radikal.ru/0911/8f/60601de1c36d.png

Тут есть одна хитрая кнопка на панели "SOCKS4/5" нажав на нее, откроются 2 текстовых файла с разделёнными Socks4 и Soсks5 прокси

http://s03.radikal.ru/i176/0911/16/e7897b49d1b7.png


Proxylist
Когда дедик ребутнут админы, вам нужно зайти сюда, чтобы забрать прокси, которые вы сканировали или искали.

http://i034.radikal.ru/0911/f1/1ff98fc92b1f.png



Проверка на прокси (чек) при помощи .Brutal
Не все гуд прокси после чека будут пригодны для брута. Если вы не хотите упустить не одного пригодного для брута прокси сервера - чекайте брутом! Для этого качаем .Brutal с офф. сайта. Вбиваем полученные ip в файлы: https.txt, socks4.txt или socks5 соответственно. Если вы вбили около 30 000 ip адресов, то устанавливаем "Cleanup" где то на час - полтора. После клинапа забираем гуд прокси.


P.S. Моя первая статья. Большого всем PPS :)

mff 14.11.2009 17:40

Цитата:

Сообщение от gormoney
Спасибо за тему очень познавательно теперь будит меньше растрат!

Спасибо! А на что вы тратили? :)
Я вот часто встречаю темы, где идёт обсуждение сервисов по продаже "элитных" прокси. Не разу не покупал это гавно! Для брута оно не пригодно. Хорошие насканенные прокси должны жить от 3 недель до нескольких месяцев и давать хороший pps. У меня есть цепочки прокси, которые уже 8 месяцев работают ;)

И вот еще, я не знаю не одного достойного сервиса по продаже прокси. Делайте выводы. :)

Nyter 14.11.2009 17:46

mff в каком отношении ставишь потоки при бруте на насканеных прокси?

gormoney 14.11.2009 17:47

Я покупал на анонимсфере ппс был 4 максимум на брутале и дедик был с хорошей отдачей.. короче фигня бабло за паблик можно сказать)
mff к тебе вопрос ,ты этими способами вытягивал прокси с каким максимальным PPS ??

mff 14.11.2009 17:54

Цитата:

Сообщение от Nyter
mff в каком отношении ставишь потоки при бруте на насканеных прокси?

Всё зависит от дедика.
Примерно: входящая\исходящая скорость интернета на деде 16\8, 600-700 хороших насканенных прокси = 1600 - 3000 потоков на бруте. Для каждой машины тут индивидуальный подход.
Цитата:

Сообщение от gormoney
Я покупал на анонимсфере ппс был 4 максимум на брутале и дедик был с хорошей отдачей.. короче фигня бабло за паблик можно сказать)
mff к тебе вопрос ,ты этими способами вытягивал прокси с каким максимальным PPS ??

:D 400 PPS мой рекорд :cool:

satana8920 14.11.2009 18:11

блин тему только что создали а я уже задолбался ее чистить!!!
завязывайте флудить народ!

iroot 14.11.2009 21:04

Спасибо, хорошая и главное актуальная статья. И пора вопросов тут же:
1. Зачем нужны Judges?
На сколько я понял для того чтобы вытянуть инфу о скорости, адресе и порте прокси? Как я понимаю сканер во время сканирования пытается соединиться через предпологаемый адрес прокси и порт с нашим судьей и если это получается вытаскивает нужную инфу из заголовков ответа судьи.
2
Цитата:

Порты.
Мы будем сканировать на порты:
Http: 80, 8080, 3128
Socks4 и Socks5: 1080

Это основные порты. Есть очень много других хороших портов, на которых есть прокси пригодные для брута icq, например: 81, 82, 6855, 8000, 8082, 8090, 8888 и т. д.
Чем отличаются прокси для брута от обычных прокси, кроме времени ответа(как я понимаю оно должнобыть у оных очень малым) и почем здесь порт? На сколько я пониимаю я могу юзать прокси для брута так же и для гуляния по нету.

Хочу заметить что насколько я понял при использовании метода P-Search поиско прокси будет производиться через поисковики..поэтому нужно довольно большой таймаут, потому что гугл любит банить если видит робота.

iroot 14.11.2009 21:18

Если кому нужно сабж с лекрством, прошу сюда _ttp://downloads.ziddu.com/downloadfile/5595818/proxyfire.v1.22.zip.html

Nyter 14.11.2009 21:40

статья хорошая, спасибо!
прокси-судей можно ещё создать при помощи проги "stan".
Она создаст Proxy-Judges , к примеру, на деде с прямым ИП.
нужно просто запустить эту маленькую прогу, указать порт и прокси-судья готова!

скачать Stan

iroot 15.11.2009 03:03

Гы..а ты просто антивирусом проверяй перед тем как заюзать ;) У меня KIS ничего не прочекал.


Время: 04:55