Софт-Портал

граббинг это

Рейтинг: 4.4/5.0 (824 проголосовавших)

Категория: Windows

Описание

Рыбалка в интернете - граббинг, skynet, skystar-2, skystar-3

Что такое граббинг - рыбалка в Интернете ?

Скажем сразу. Для " рыбалки - граббинга " не требуется подключение к интернету. т.е. Вы можете получать на свой компьютер файлы (фильмы, MP3, архивы с программами и др.) совершенно бесплатно.

* ВНИМАНИЕ! Данный вид деятельности никаким образом не относится к сервису СпейсЛинк, а является лишь возможностью, которой Вы можете пользоваться на свой страх и риск. Ниже приведенные рекомендации, советы и программы общедоступны в Интернете.

Многие спутники кроме трансляции телевидения и радио, используют также передачу интернет трафика.

Не секрет, что абсолютное большинство провайдеров не используют шифрование трафика. Вообще говоря, шифрование возможно, и сделать это не так сложно как может показаться. Однако это будет неудобно для пользователя.

Напрашивается резонный вопрос - если поток не зашифрован, можно ли из этого потока (а ведь там сотни или даже тысячи пользователей) достать те файлы, которые они загружают? Да, можно. Но с некоторыми ограничениями:

  • Первое, и пожалуй самое неприятное то, что имена загружаемых файлов неизвестны. В протоколе http имя файла (а точнее полный путь к файлу) передается на сервер. Обратно с сервера (в нашем случае эта информация как раз и проходит по спутниковому каналу) в http response header'е отправляется его медиа тип, дата модификации и несколько других менее интересных полей.
  • Второе, ограничение состоит в том, что если пользователю, по каким то причинам не придут некоторые пакеты, они будут перезапрошены. Правильней будет сказать, что они будут заново переданы сервером, если от машины пользователя не придет подтверждение о получении. Если же пакет потеряет ваша машина, никто вам помочь не сможет.
  • Третье: пользователи ведут себя ужасно. Они недогружают файлы, загружают их по нескольку раз, просто проверяют на месте ли их файлы или загружают несколько килобайт из многомегабайтного файла, а потом догружают остаток через неделю. Но что хуже всего: вместо действительно полезных и интересных вещей, они грузят всякий хлам и мусор :)
  • Вам наверно интересно как реагируют пользователи на то, что их закачку можно перехватить? По всякому реагируют. Но обычно даже противники сего безобразия :) хотя бы для интереса, на время присоединяются к нему, чтобы посмотреть, что же это такое.
    Как относятся провайдеры? Как любые коммерческие организации - если это не задевает их интересов, они ничего не предпринимают. Вроде бы убытков они от этого не несут. Вероятно даже наоборот, ведь простые модемщики попробовав спутник на скорость, часто сами подключаются к спутниковому интернету.

    граббинг это:

  • скачать
  • скачать
  • Другие статьи, обзоры программ, новости

    Спутниковая рыбалка - ловим файлы в облаках

    Спутниковая рыбалка - ловим файлы в облаках

    Оказывается ловить рыбку можно не только в воде, но и в небе. Посвященным сразу становится ясно, что речь здесь пойдет о спутниковой рыбалке или "интернет-граббинге". ну а тем кто впервые слышит о небесной рыбалке будет интересно о ней узнать.

    Пару слов о терминологии: граббинг в спутниковом интернете - это перехват спутниковых интернет потоков.

    Ввиду широковещательного характера работы спутникового интернета возможно принимать информацию предназначенную другим пользователям. С помощью "интернет-граббинга" можно абсолютно бесплатно "выуживать" на свой компьютер различные файлы, которые передаются со спутника пользователям - это могут быть видео-фильмы, музыкальные файлы, архивы с программами и многое другое, причем вам совсем не обязательно иметь подписку на спутниковый интернет и вообще быть подключенным к интернету!

    Граббинг не имеет никакого отношения к сервисам спутниковых провайдеров, и даже наоборот, многие интернет провайдеры шифруют интернет-трафик, что бы исключить его перехват.

    А вот извлечь из незашифрованного потока файлы, предназначенные другим пользователям не составляет труда, но есть ряд ограничений.

    Во-первых: неизвестны имена загружаемых файлов, передающихся в спутниковом потоке и с ними надо что-то делать, в противном случае на жестком диске компьютера скапливается много хлама из-за невозможности сортировки файлов по именам. Помогает функционал программ-грабберов позволяющий настраивать параметры захвата, такие как: тип файла, его размер, что дает возможность на стадии захвата файлов произвести предварительную фильтрацию ненужного мусора и совершенно бесплатно получать огромное количество видео-фильмов, дистрибутивов с ПО, MP3 и многое другое.

    Во-вторых: граббинг - это процесс реального времени, если интернет-приложение пользователя потеряет часть пакетов, оно их просто перезапросит и они будут заново переданы сервером, а вот у перехватчика подобной возможности нет. При потере пакета вашей машиной, помочь вам уже никто не сможет.

    Стремительный рост популярности программ перехвата спутникового потока напрямую связан с Россией, только в нашей стране народ стремится получить халяву любыми путями, и даже придумал очень верное название граббингу - спутниковая рыбалка .

    Действительно, прослеживается аналогия: нужно знать место, где будет клевать - (спутник, транспондер, PID), а также время когда ловить файлы. Надо подобрать снасти и удочку - настроить программу на ловлю конкретной рыбы (типы и размеры файлов). Рыбка может легко сорваться с крючка - прием файла может прерваться и он будет потерян. Улов необходимо тщательно сортировать. Легальность данного занятия остается под вопросом - вы спокойно копируете личную информацию, принадлежащую другому пользователю.

    Могут ли к вам применить какие-либо санкции ?
    Вопрос спорный: таких случаев ещё не было и к тому же это головная боль спутниковых провайдеров, они пересылают незашифрованные данные, да и потом как узнать, что именно вы получили чужую информацию, связь то односторонняя и только на прием.

    По поводу спиннингов - лучшим считается программа SkyNet.
    Почему? Она бесплатная и распространяется в открытом виде, а значить вы сможете модифицировать ее код под свои нужды, в ней много интуитивно понятных и простых инструменов настройки - например можно настроить фильтр на отлов файлов с определённым расширением и размером.

    Удачной Вам поклевки!

    Магистральные усилители (Бустеры) PicoCell для расширения зоны покрытия. Применяется в помещениях больших размеров: холлы, магазины, офисы, загородные дома, бары, рестораны и пр. Нажмите, чтобы увеличить

    Организация беспроводной сети на оборудовании Ubiquiti Нажмите, чтобы увеличить

    Распределение интернет и локальной сети на оборудовании Cisco Нажмите, чтобы увеличить

    Организация усиления сотовой связи в Торговом центре более 3000км.м. на оборудовании Picocell в составе: Репитер SXL E900 и 2 магистральных Бустера BST E900 Нажмите, чтобы увеличить

    Организация усиления GSM+3G сигналов сотовой связи в офисных помещениях более 2000кв.м. на оборудовании Picocell в составе: Бустер BST2000, Бустер BST1800, комбайнер 900/1800/2000 Нажмите, чтобы увеличить

    Организация усиления сотовой связи в офисе на оборудовании VEGATEL Нажмите, чтобы увеличить

    Установка внешней направленной антенны для усиления сотовой связи с помощью крана-манипулятора Нажмите, чтобы увеличить

    Организация усиления сотовой связи в Торговом центре более 3000км.м. на оборудовании Picocell в составе: Репитер SXL E900 и 2 магистральных Бустера BST E900 Нажмите, чтобы увеличить

    Подготовка проектной документации для системы усиления сотовой связи Нажмите, чтобы увеличить

    Организация системы усиления сотовой связи на частоте 1800Мгц в составе репитера Telestone 1800 GSM Нажмите, чтобы увеличить

    Магистральный усилитель Бустер RF-Link 2100-30-30 для усиления 3G связи на частоте 2000Мгц Нажмите, чтобы увеличить

    Организация усиления 3G сигнала сотовой связи на оборудовании Picocell и RF-Link: Репитер Picocell SXP2000 и Бустер RF-Link 2100-30-30 Нажмите, чтобы увеличить

    Установка внешней мультидиапазонной антенны на крыше частного дома Нажмите, чтобы увеличить

    Организация усиления GSM+3G сигналов сотовой связи в офисных помещениях более 2000кв.м. на оборудовании Picocell в составе: Бустер BST2000, Бустер BST1800, комбайнер 900/1800/2000 Нажмите, чтобы увеличить

    Установка внутренних панельных GSM/3G антенн в потолочном пространстве офисного здания Нажмите, чтобы увеличить

    Установка внутренних антенн и прокладка кабеля под потолком Армстронг Нажмите, чтобы увеличить

    Текст песни вы соглашаетесь - привет перевод, слова песни, видео, клип

    Текст песни вы соглашаетесь - привет

    На этой странице находится текст песни вы соглашаетесь - привет, а также перевод песни и видео или клип.

    вставая на механизм, уносящий вглубь
    я видел эти отчаянные глаза с сорванными предохранителями
    пораженные блеском чужой мечты
    они есть везде, и даже здесь они ждут
    следуя за малейшим колебанием ветра
    ведь это намного интересней и веселей
    своих собственных сороковатных вселенных
    в них, как в зданиях без окон, танцуют
    отвратительные флешбеки в костюмах зверей

    самоанализ критичен и потрошит
    вместо того чтобы лечить
    я ощущал себя живым посреди лесополосы
    пытаясь погасить
    этот раздробленный лишь вмерумонотонный образ
    все может тронуть
    все может тронуть в попытке
    убить в себе этот вязкий клей
    в который вступили все пытаясь вырваться
    из собственных тел

    убей в себе
    недоношенность
    вагонами способов
    как разрезанная и склеенная заново лошадь

    дети играют в паралич в мокрых от
    талого снега дворах среди домов
    в каждом из которых есть глухая стена
    подарившая привычку
    видеть но не замечать, вечноспеша
    ведь ты искал и нашел свой болевой порог
    радуясь случайным вещам

    а руки похожие на заточенные под нож вилки
    резали на мелкие потом обессилевшее сейчас
    отгораживаясь колючим одеялом
    от настоящего,
    также как и эти
    проезжающие мимо, откровенно
    чистые холсты
    спрятанные под куртками

    но в их паспортах фото пост мортем
    глаза затекают, превращаясь в
    наполненные белком соты
    и на тарелках вносят
    с приборами столь несъедобное слово спасен

    и смех как скрип тормозов
    не возвращен
    не найден
    не утерян
    ни что в этом мире уже не изменит
    фенологию офортом
    отпечатанную на пластике
    схватившемся с первым рассветом
    как корабли цепляются за причал

    я думал об этом пока не появились
    зубчатые губы
    глотающие эскалаторные ступени
    и я поплыл глазами вверх
    чтобы наткнуться на твои
    и сказать привет.

    rising on the mechanism, blowing inland
    I saw these desperate eyes ripped fuses
    affected shine a strange dream
    they are everywhere, and even here they wait
    following the slightest fluctuation of the wind
    it's much more interesting and fun
    sorokovatnyh their own universes
    in them, as in buildings without windows, dancing
    hideous flashbacks in costumes of animals

    critical self-reflection and guts
    Rather than treat
    I felt alive in the midst of forest plantations
    trying to extinguish
    This shattered the image of a vmerumonotonny
    All can touch
    everything can move in an attempt to
    kill themselves this sticky glue
    which entered all trying to escape
    from our own bodies

    kill a
    prematurity
    Wagons methods
    how to cut and re-glued horse

    children play in the paralysis of the wet
    melting snow courtyards among the houses
    each of which has a blank wall
    gave the habit
    see but not notice vechnospesha
    because you searched for and found a pain threshold
    rejoicing random things

    and hands like a sharpened knife fork
    then cut into small exhausted now!
    fenced off prickly blanket
    from the present,
    as well as the
    passing by, frankly
    net canvas
    hidden under jackets

    but in their passport photos Post Mortem
    numb eyes, turning into
    filled cell protein
    and cymbals make
    with devices such inedible word saved

    and laughter as the creaking of brakes
    not returned
    not found
    not lost
    nothing in this world will not change
    phenology etching
    printed on the plastic
    Grabbing the first dawn
    the ships dock cling

    I thought about it until he came
    toothed mouth
    swallowing escalator steps
    I swam up eyes
    to stumble upon your
    and say hello.

    Смотрите также:

    GraBBinG или Спутниковая рыбалка

    Ангбанд GraBBinG или Спутниковая рыбалка - Теория

    GraBBinG или Спутниковая рыбалка - Теория

    Спутниковый граббинг (grabbing) или спутниковая рыбалка (как привыкли говорить на просторах СНГ) - это достаточно новое течение в мире хека, хотя к хеку оно относится лишь косвенно, и скорее только из-за своей нелегальности. Так что же это такое спросите Вы?

    Я начну немного издалека, чтобы впоследствии было понятнее с чем именно приходится иметь дело.

    Небольшой экскурс в историю: спутниковый интернет появился не так уж давно, развитие его началось в середине 90-х годов. Настоящее бурное развитие спутниковый доступ получил в 1999-2000 годах после выхода на рынок EuropeOnline. Анонсированный EON безлимитный доступ на скорости более мегабита за 20 долларов в месяц был достаточно интересным предложением на то время. Компания эта распалась в скорем времени, так как не учла специфику нашего рынка. Начали подключатся малые провайдеры, домовые и офисные сети, что неминуемо сказалось на пропускной способности и скорости соответственно. Но сейчас на рынок вышло большое кол-во компаний, которые наученые ошибками прошлого очень успешно работают и набирают обороты с каждым днем. Основными плюсами спутникового интернета являются: 1)Вседоступность (вам не нужно наличие кабелей, сетей, телефонных линий, радио-точек и т.п. Сигнал со спутника есть абсолютно везде); 2)Высокие скорости; 3)Достаточно низкие цены.

    Теперь немного о принципе, по которому работает асинхронный спутниковый инет:
    Запрос пользователя через любое доступное наземное подключение (DialUP, DSL, выделенная линия, радиоканал, GPRS, EDGE и т.п.) поступает на сервер спутникового оператора. Сервер получает необходимые данные из интернет, отправляет их на спутник, пользователь посредством спутниковой антенны и DVB-приемника получает запрошенные данные.
    Таким образом по наземному каналу мы отсылаем лишь небольшое кол-во запросных пакетов, а весь основной приемный трафик идет уже через (тоесть закачки файлов, загрузки страниц и пр.). Соотношение объемов отправленной/полученной информации приблизительно 1:50 при серфинге и 1:540 при закачке файлов.

    Ну что, теперь думаю можно переходить ближе к делу.
    Граббинг или спутниковая рыбалка - это перехват трафика пользователей спутникового интернета. Так как спутник с орбиты транслирует этот поток на всю зону покрытия и трафик этот в большинстве случаев передается в незашифрованном виде, то это значит, что мы имея спутниковую антенну и DVB-карту можем этот трафик перехватить.
    Вообще говоря, шифрование возможно, и сделать это не так сложно как может показаться. Однако это будет неудобно для пользователя. Ну а если пользоваться чьими-то услугами неудобно - что ж, это может предопределить выбор поставщика этих самых услуг.
    Напрашивается резонный вопрос - если поток не зашифрован, можно ли из этого потока (а ведь там сотни или даже тысячи пользователей) достать те файлы, которые они загружают? Да, можно. Но с некоторыми ограничениями.

    Первое и пожалуй самое неприятное то, что имена загружаемых файлов неизвестны. В протоколе http имя файла (а точнее полный путь к файлу) передается НА сервер. Обратно с сервера (в нашем случае эта информация как раз и проходит по спутниковому каналу) в http response header'е отправляется его медиа тип, дата модификации и несколько других менее интересных полей.

    Второе ограничение состоит в том, что если пользователю, по каким то причинам не придут некоторые пакеты, они будут перезапрошены. Корректнее будет сказать, что они будут заново переданы сервером, если от машины пользователя не придет подтверждение о получении. Если же пакет потеряет ваша машина, никто вам помочь не сможет. Вам возможно потребуется много терпения и настойчивости, чтобы все работало безукоризненно.

    А теперь о приятном.
    Сам процесс граббинга происходит таким образом:
    1 - вы выбираете какие расширения закачивать (у меня например это *.avi, *.wmv, *.mpeg, *.flv, *.mp3, *.jpg, *.rar)
    2 - выбираете в каких размерных дипазонах качать каждое расширение (у меня например *.avi качаются в пределах от 300 мб до 1.5 гб, тоесть все файлы данного расширения, которые весят меньше 300 мб или больше 1.5 гб, качатся не будут)

    Вы спросите меня: "и сколько ловится добра?"
    Отвечаю: Ловится очень много! Но это прямо зависит от провайдера и его тарифных планов (тоесть где анлимы, народ качает больше).
    Моё любимое "рыбное место" - это спутник Express AM22 53°E, провайдер SkyDSL (очень крупный провайдер с анлимами). За ночь я вылавливаю пару-тройку фильмов, сериалов дофигища тянут, типа Lost, Prison Break, Jerico, музыки в мп3 пару-тройку гигов, немеренно роликов с youtube.com и подобных сайтов в flv-формате, свежий софт всегда на блюдечке в архивах с кряками и серийниками, обоев и прочей графики вагон просто - с трудом пересматриваю всю. Много файла идет качают с платных сайтов - это в основном касается здесь оно запрещено и мп3. Короче 20 гиг за ночь - это не проблема!
    Таким образом у меня нету надобности тянуть многие вещи из интернета, что экономит мне кучу денег!
    Граббинг хорош тем тем, что вам не нужно подключаться к провайдеру, чтобы им заниматься, соответственно все НА ШАРУ!
    Приходится только учитывать, что вам нужно закупить оборудование для перехвата, стоимость которого будет в районе 80-100$. И еще прийдется все время апгрейдить винты - у "рыбаков" места всегда мало!
    Провайдеры конечно знают о граббинге, некоторые борются, а некоторые просто закрывают на это глаза. Зачастую многие пользователи граббинга вскорем времени становятся пользователями спутникового инета, почувствовав его скорости. Именно так произошло и со мной кстати.

    Ну и в завершении статьи хотелось бы немного сказать о софте, который собственно и разгребает весь поток, перехваченный со спутника.
    Одним родоначальников граббинга является товарищь с ником S.O.V.A, именно он одним из первых начал задумываться над перехватом и расшифровкой перехваченного спутникового трафика и вскоре начал реализовывать это программно. Он создал программу, которая называется SkyNet. Именно эта программа была одним из первых "перехватчиков" спутникового трафика. На данный момент она развивается уже благодаря многим другим программистам и ИМХО является самой успешной, так как качество улова у нее очень высокое. Программа эта имеет консольный вид, практически все настройки находятся в текстовом файле, управление программой осуществляется только с клавиатуры. Но есть и аналоги с "дружественным" интерфесом, типа SkyGrabber, неплохие отзывы также имеет программа Manna, но лично мне она не нравится. Вобщем каждый сможет выбрать для себя софт по-душе - новичкам будет удобнее вникнуть в суть с помощью SkyGrabber-а, а профи не захотят юзать ничего кроме SkyNet-а.

    На этом я думаю можно статью заканчивать. Она является вводной и лишь поверхностно все описывает. Я написал ее для того, чтобы проверить интерес аудитории нашего форума к данной теме. Если же это будет интересно народу, то начнем все тщательно разбирать в моих следующих статьях. Поэтому жду ваших каментов.

    Персональный сайт SATMan - Спутниковая рыбалка (граббинг)

    Спутниковая рыбалка (граббинг)

    Рыбалка со спутника, рыбалка на спутнике, интернет рыбалка, или как ей ещё называют спутниковая рыбалка (граббинг) — приём со спутника файлов, передаваемых другим пользователям без их ведома бесплатно. Есть и другое название — граббинг (grabbing).

    Как же работает граббинг

    Спутник передаёт данные на огромную территорию всем пользователям одним потоком и только ваша карточка и специальные программы может выбирать из всего потока то, что передаётся конкретному данному пользователю. Но с помощью специальных программ можно получать весь поток, то есть абсолютно весь, который идёт со спутника, вне зависимости от того какому из пользователей передаётся информация. Таким образом, можно перехватывать файлы, которые заказывал и, конечно же, оплачивал кто-то другой ^_^. и при этом не оплачивать за них траффик вот такая вот узаконенная халявка получается. Это и есть спутниковая рыбалка граббинг.

    Программы для граббинга

    skynet - создатель S.O.V.A. наверное самая популярная и лучшая программа для спутниковой рыбалки (В данный момент актуален клон от KTOD'a)

    manna - отличная прога для граббинга (спутниковой рыбалки) автор программы mcngine

    betasky - автор S0RRY

    skygrabber - применяется обычно только начинающими пользоваться спутниковой рыбалкой (очень легок для освоения и имеет приятный графический интерфейс).

    Что такое граббинг, или «спутниковая рыбалка»? Энциклопедия статей

    Что такое граббинг, или «спутниковая рыбалка»?

    «…Для того чтоб рыбачить и сидеть в Интернете, есть 2 способа, в обоих используется стримридер через роутер, второе - это если рыбачить через универсальный пид, то надо пропатчивать дрова скайстара, если не делать этого, то надо убрать пид, на котором сидишь в Интернете, кроме того иногда надо соблюдать поочерёдность запуска, сначала скайнет или манну, потом уже скайстар. »

    Из разговора с граббером

    …И я его не понял. Но после долгой беседы и небольшого личного опыта могу теперь понять, что он имел виду и Вам на пальцах объяснить. Итак, что же такое граббинг или «рыбалка»? Это лишь очередное чудо технологий, с помощью умельцев и любителей банальной халявы, объединенное в простую фразу «спутниковая рыбалка».

    По словам самих «рыбаков», очень интересное занятие, правда, отбирающее довольно большое количество времени, места на винчестере и электроэнергии. Спутниковая рыбалка - получение на халяву всего хлама, который кто-то качает. При хорошей настройке программного и аппаратного обеспечения можно довольствоваться не одним десятком свежих фильмов, html-страниц, фотографий, видеороликов, mp3-файлов, программ, чуть ли не каждые 5 минут встречаются обновления антивирусных баз для Norton Antivirus и много чего другого. Одним словом, никогда не знаешь, какую информацию примешь в следующие несколько секунд. Правда, чем-то напоминает рыбалку? Сравните сами - нужно знать место (спутник, транспондер, PID) и время где ловить. Нужно настроить удочку (программы) на лов конкретной рыбы (типы и размеры файлов). Рыба может сорваться - прием файла может остановиться и тот будет потерян (дисконт). Приходится постоянно сортировать улов. Стоит отметить, что перехват информации из спутникового потока - процесс реального времени, причем перехватчик, в отличие от оригинального получателя информации, не может воздействовать на процесс.

    Как это работает?

    Подавляющее большинство провайдеров спутникового интернета, по непонятным причинам, не используют шифрование трафика. Организация шифрования трафика возможна, и сделать это относительно несложно. Вероятно, это будет неудобно для пользователя. А если поток не зашифрован, то из него можно достать те файлы, которые загружают пользователи (а ведь там сотни или даже тысячи пользователей). Но есть некоторые особенности:

  • В протоколе http имя файла передается на сервер. Обратно с сервера (в нашем случае эта информация как раз и проходит по спутниковому каналу) отправляется его медиа-тип, дата модификации и несколько других менее интересных полей, но имена загружаемых файлов неизвестны. Частично эта задача решается при помощи специальных программ - если в свойствах файла есть что-либо идентифицирующее его - например MP3-тег для музыкальных файлов.

  • Если пользователь по каким-то причинам не получил некоторые пакеты, они будут перезапрошены. Они будут заново переданы сервером, если от машины пользователя не придет подтверждение о получении. Если же пакет потеряет ваша машина, никто вам помочь не сможет.

  • Пользователи могут недогружать файлы, загружать их по нескольку раз, просто проверяют, на месте ли их файлы или загружают несколько килобайт из многомегабайтного файла, а потом догружают остаток через неделю. Как следствие - множество «битых» файлов

  • И, самое неприятное: вместо действительно полезных и интересных вещей, пользователи грузят всякий хлам и мусор.

    Основной плюс «рыбалки» - не требуется подключение к Интернету, т.е. можно получать на свой компьютер файлы совершенно бесплатно, ведь многие спутники кроме трансляции телевидения и радио, используют также передачу интернет-трафика.

    Что надо для граббинга:
  • Тарелка (желательно акриловая, но граббинг будет работать на любой)
  • DVB карта. DVB-карта предназначена для приема данных спутникового Интернета, а также спутниковых каналов телевидения и радио. Сгодится почти любая.
  • Моток кабеля.
  • Навыки промышленного альпинизма - надо же как-то повесить тарелку.
  • Еще можете приобрести ротер - вещь не обязательная, но весьма полезная, т.к. тарелку можно будет удаленно вращать.

    На один компьютер можно поставить две, три, сколько угодно DVB карт, но тогда стоит иметь несколько винчестеров и процессор помощнее.

    Многие считают что граббинг - это аморально, противозаконно. Вы получаете чужой трафик без ведома владельца, злостно копируете его личную информацию: музыку и фильмы (за которые он, возможно, заплатил), корреспонденцию и. да, порно, в основном порно. Другие не видят тут ничего противозаконного. Как телевизор смотришь - просто есть антенна, и ловишь передачи. Здесь та же система. Только «ловишь» файлы, которые качают другие, причем ничего за это не платишь. Или как радио - настраиваешь и слушаешь. И очень часто даже противники сего «безобразия» хотя бы для интереса, на время присоединяются к нему, чтобы посмотреть, что же это такое.

    Провайдеры, как любые коммерческие организации, если это не задевает их интересов, ничего не предпринимают. Убытков провайдеры от граббинга не несут. И даже есть в этом свой плюс - многие простые смертные, люмпены-модемщики, попробовав спутник на скорость, часто сами подключаются к спутниковому интернету.
    Shkolazhizni.ru

    Постоянный адрес статьи

    Послать ссылку на этот обзор другу по ICQ или E-Mail:

    Разместить у себя на ресурсе или в ЖЖ:

    На любом форуме в своем сообщении:

  • Граббинг: методы, проблемы

    Граббинг: методы, проблемы


    Многие веб-мастера порою из-за чрезмерной занятости, а иногда (причем это «иногда» преобладает) из-за своей лени не желают продолжать наполнение любимого проекта контентом вручную. Первая мысль, которая действительно посещает в этот момент – автонаполнение или граббинг. как профессионально именуют данный процесс. Суть граббинга заключается в использовании материалов чужих сайтов посредством RSS-лент или прямым «слизыванием» веб-страниц с последующим исключением конкретных элементов в ручную или автоматически (в зависимости от используемой программы).

    Граббинг может быть построен на ручном создании php-кода, но чаще он реализуется за счет конкретных модулей. Например, для вордпресс наиболее популярными из тех, что находятся в свободном доступе и являются бесплатными, лично я считаю: WP-o-Matic, ElSa grabber, FeedWordPress. Отличия у них незначительны, так как все из них, по сути, ориентированы на работу с RSS. единственное, что некоторые готовы грузить помимо текста картинки, другие нет, одни функционирует без лишних заморочек, другие в автоматическом режиме работают исключительно при настройке cron’а. Однако не столь интересно, как это все дело устанавливается и настраивается (для каждой CMS – это стандартные процедуры), сколько, какие плоды и санкции можете вы навлечь на свой ресурс.


    Если говорить о типичном граббинге. то для самых простых операций вам понадобится лишь RSS-линк. устанавливаете лимиты, и, вуаля, наполнение пошло. Если программа-граббер посложнее и пофункциональнее, то первым делом стоит обрезать левые линки, так как они добавляются вместе с RSS-потоком. левые теги, рекламные моменты, если они есть и тому подобное. С простенькими прогами все это приходится делать вручную.

    С какими проблемами можно столкнуться?

    Проблема номер один – не уникальность текста. Конечно, такие ресурсы, как утверждает большинство, эффектно вылетают из поисковиков, однако на личном опыте проверил, что даже полный копипаст отлично индексируется и ничуть не бракуется. Суть проблемы лежит в правильности настроек всего процесса и везении. Под настройками понимается не только оптимизация ресурса, но и количество используемых потоков, причем с разных ресурсов, в разные разделы. Однако решать проблему можно иным способом – уникализацией контента, естественно, автоматической (раз уж мы ленивые и всего хотим похалявнее). Для этого применяются, как правило, два варианта: синонимайзинг с дополнительными фишками (типа перестановки абзацев и перемешивания предложений) и автоперевод с других языков посредством задействования сервиса гугла и ajax. Оба варианта доступны либо в самих грабберах-модулях, либо добавляются отдельными модулями, причем отдельные модули отлично перехватывают тексты с грабберов и обрабатывают на лету. Для полного счастья можно задействовать и перевод и синонимайзинг (ядерная смесь!). На этом этапе проблемы происходят именно с синонимами – базы данных придется искать, качать и вставлять либо вручную, с помощью копирования, либо с помощью вашей панели управления на хостинге.

    Проблема номер два – сами RSS-ленты. Увы, сейчас все запускают в этот поток только урезанные новости, и приходится обходить данный алгоритм. Можно, конечно, поискать те ресурсы, которые дают полную ленту, однако это очень долго. Данную проблему лично я решаю с помощью сервиса FeedEx. Разработчики постарались максимально насытить свой сервис примочками, так что он половину лент на ура раскрывает из краткого вида до полного. Остается готовую ленту добавить в свой модуль.

    Проблема номер три – отсутствие ленты. В этой ситуации вам придется искать и юзать грабберы, которые вообще не используют ленты, а занимаются копированием всей страницы (но такие, как правило, либо платные и дорогие, либо сырые и беспонтовые). Есть и другое решение проблемы – использование сервисов, которые любой сайт преобразуют вам в RSS-канал. останется только копировать и юзать. Одним из известных мне сервисов является Feed43.

    Если вы будете учитывать все вышеперечисленное, а также серьезно отнесетесь к данной проблеме, то сможете получить вполне достойный результат, однако помните, копирование материалов – не есть гуд, а создание типичного ГС грозит банном. Не тратьте свои силы зря, если не уверены в результате!

    1click - сайт полезных статей???

    Спутниковый граббинг: файлы с неба.

    Спутниковый граббинг – это получение чужого трафика, без ведома владельца. У спутникового граббинга есть, как плюсы: вы спокойно копируете личную информацию: музыку, фильмы, корреспонденцию и т.д. Но есть у граббинга и минусы: постоянные обрывы файлов, приличные затраты на оборудование (покупать лучше всё самое лучшее, так как у вас не будет возможности «докачать» файл, надо скачивать всё целиком и без ошибок).

    Первое о чём вам придется задуматься – это об оборудовании:
    • Спутниковая тарелка - желательно купить более дорогую акриловую, которая стоит около 100$, но зато она позволит вам скачивать файлы в любую погоду, и в любое время суток. Стоит учесть, что на пути сигнала не должно быть крупных объектов, а лучше вообще, чтоб было чистое небо.
    • Ротер – это устройство, которое вращает спутниковую тарелку, вещь конечно, не обязательная, но очень полезная, ведь тарелку можно будет удаленно вращать. Плюсы от этого очевидны: вы сможете охватывать большее число спутников, и искать тот, который вам нужен.
    • DVB карта – подойдёт почти любая, но лучше всех работает SkyStar 2, во-первых, с ней меньше всего поблеем с настройкой, а во-вторых, будет меньше разрывов связи.
    • Куча проводов и альпинист-любитель. который способен повесить тарелку.
    DVB карт можно ставить любое количество, но тогда стоит иметь несколько жёстких дисков, так как один очень быстро заполниться, и процессор пошустрее.

    Принцип спутникового граббинга


    1. Спутниковый граббинг возможен потому, что спутник не способен передавать информацию пучком именно тому пользователю, который её запросил (т.е. сигнал не способен идти в определённую тарелку). Он передаёт информацию кучей, на всю видимую поверхность. И лишь потом компьютер пользователя (или ресивер) её сортирует и, анализируя заголовки, пытается найти информацию, которая принадлежит ему.
    2. Спутниковый граббинг возможен потому, что информация не шифруется. Провайдерам просто не выгодно шифровать информацию, так как это отнимет дополнительные ресурсы (придётся покупать более мощное оборудование), к тому же каждому клиенту придётся выдавать индивидуальные ключи.
    3.Перекроют ли спутниковый граббинг. Ближайшее время НЕТ. Ведь для этого надо разработать быстрый и эффективный способ шифровать данные и защитить ключи от взлома.
    4. Буду ли к вам применены какие-либо санкции? Скорее всего нет, во-первых случаев таких ещё не было, во-вторых виноваты во всём провайдеры (это они пересылают данные всем подряд), ну а в-третьих доказать, что вы получили чужую информацию невозможно (ведь тарелка работает только на приём и передавать данные не может!).

    Допустим, вы купили всё оборудование, установили его, что делать теперь?

    С DVB картой проблем быть не должно, но лучше, если вы установите не заводской драйвер, а найдёте одну из последних версий (для SkyStar 2 даже существует версии специально заточенные под граббинг).

    Теперь осталось найти программу для граббинга. Их много, но лучшая - SkyNet.
    1. Она, как и все подобные программы, бесплатная
    2. Её исходный код открыт, и вы можете самостоятельно модифицировать его.
    3. Она удобная для пользователей, так как в ней предусмотрены фильтры и разные настройки (например, ручной отлов файлов с определённым расширением).
    4. Её пользуются почти все. Если вы спросите у кого-нибудь, то вам посоветуют именно SkyNet .

    Теперь вам осталось узнать PID ы доступа к интернет трафику, и характеристики транспондера. Характеристики транспондера указываются на сайте провайдера, предоставляющего услуги Интернета. Также PIDы можно искать специальной утилитой для программы ProgDVB "Pidscanner". Она распространяется бесплатно, и найти её не составит труда.