Como pesquisar e baixar arquivos impopulares e antigos na internet

Principalmente arquivos de mídia. Totalmente legítimo, sem brincadeiras.

Às vezes acontece, você quer baixar o álbum de música de 2007, do artista conhecido por 3.5 pessoas, como um espanhol Ska-punk ou um conhecido speedcore europeu. Recebi o arquivo torrent, importe-o para o cliente, baixe rapidamente até 14,7% e … é isso. O dia, a semana passa, mas a porcentagem de dados baixados não é aumentada. Você está procurando por esse álbum no mecanismo de busca, tropeça em fóruns com links apenas para usuários cadastrados com "mensagens úteis", você se registra lá, inunda rapidamente 5 mensagens em tópicos antigos e finalmente obtém links para sites de compartilhamento de arquivos como rapidshare e megaupload, que estão cem anos a partir de agora.

Infelizmente situação muito comum quando você tenta baixar algo antigo.

Isso acontece. Ultimamente, infelizmente, acontece cada vez mais: os detentores de direitos autorais e as autoridades responsáveis ??pela aplicação da lei aceitam o compartilhamento de arquivos seriamente; No ano passado, vimos fechados ou apreendidos o KickassTorrents, BlackCat Games, what.cd, btdigg, torrentzeu, EX.ua, fs.to, torrents.net.ua e todos os outros sites. Embora seja provável que você não enfrente grandes problemas ao encontrar novos filmes e filmes de TV / animação mesmo apesar do aumento repetido de conteúdo de motores de busca, rastreadores torrent e compartilhamento de arquivos, procurando por fonte de filme (DVD ou Blu-Ray) ou apenas Os rasgos de TV não ingleses e não-russos de 7 anos de idade podem ser desafiadores.

Por que você já precisaria disso?

  • Falta de lançamentos de DVD para algumas séries
    O filme poderia ter sido apelidado e exibido na TV em algum país, mas nunca em DVD. Os Cappers o rasgam e carregam para sites de compartilhamento de arquivos ou via Bittorrent, então o DVD é lançado em outro país sem dublagem de áudio tampado, por exemplo, um francês. As pessoas são forçadas a baixar DVDRip de alta qualidade sem dublê francês ou com uma velocidade de TV de qualidade relativamente baixa.
    À medida que os tempos passam, cada vez menos pessoas baixam o TVRip francês, ele foi excluído dos sites de compartilhamento de arquivos devido à inatividade do arquivo. Fazer o download desta versão torna-se uma tarefa bastante não trivial.
    Pode-se resolver o problema através do som do áudio da TV para o DVD, mas ninguém fez isso e a versão da TV morreu.
  • Diferentes conteúdos de TV e DVD
    Por exemplo, Daria perdeu quase toda a música da versão de TV devido a problemas legais com o re-licenciamento para DVD. Durante muito tempo, as pessoas estavam enfrentando uma escolha entre assistir a versão completa com toda a música e qualidade de vídeo ruim ou boa aparência de versão em DVD, mas sem música.
  • Diferença regional
    Estes são verdadeiros para o vídeo e a música. A série WITCH foi exibida com 4 aberturas diferentes, apenas uma das quais entrou em DVD.
    As versões japonesas de álbuns de música são conhecidas por faixas extras, que estão faltando em qualquer outra edição.

Como você já pode entender, todos têm razão própria. Onde transferimos arquivos antipopulares e antigos?

Usenet

Usenet é uma rede distribuída de servidores que sincronizam dados entre eles. A estrutura do Usenet se assemelha a algo no meio entre fóruns e e-mail: os chamados "newsgroups" (categorias Usenet) possuem estrutura em árvore. Os usuários Usenet podem se juntar a grupos, ler e escrever. Assim como no e-mail, as mensagens Usenet têm assunto, o que ajuda a organizar tópicos de discussão.
Atualmente Usenet é usado principalmente para o compartilhamento de arquivos.

História da Usenet

Emergido em 1979, a rede usava conexões de modem direto para transferir informações usando UUCP e geralmente era um instrumento para comunicações de texto. Naquela época a Usenet era concorrente do BBS; havia gateways especiais entre Usenet e Fidonet.
À medida que a internet vem, a mensagem Usenet mudou para a pilha TCP / IP, usando o NNTP, que ainda é usado mesmo fora do Usenet (por exemplo, você pode ler muitas listas de correio público usando gmane e feeds RSS via gwene e , ao contrário da lista de correio usual, Você sempre pode voltar ao histórico, antes de se inscrever nessa lista.)

Com mais velocidade de linha, modems modernos e seus protocolos, no início do 90, o Usenet tornou-se um terreno para transferências de arquivos: warez, música e vídeos. O algoritmo é semelhante a um no Email: o arquivo é cortado em várias peças (volumes), codificado usando caracteres imprimíveis em codificação de 7 bytes usando Base64 ou uuencode e enviado para o grupo de notícias.
A codificação de 7 bits adiciona cerca de 30% de sobrecarga de transferência de arquivos. A especificação Usenet é permitida usando a maioria dos símbolos ASCII, e não apenas impressos, assim, o novo algoritmo de codificação de arquivos eEnc surgiu em 2001, somando apenas 1-2% de despesas gerais. Ele cita apenas símbolos de linha nova, bytes NULL e sinal igual (=). yEnc ainda é o algoritmo principal das transferências de arquivos Usenet.

Verificação de integridade e recuperação de volume corrompido é alcançada com o Parchive

Antes de 2008, os grandes provedores usenet armazenavam arquivos binários por apenas 100-150 dias ("tempo de retenção"). Desde 2008, os maiores fornecedores pararam de excluir qualquer coisa e armazenar arquivos para sempre, de modo que você pode baixar arquivos de 8 anos sem nenhum problema, enquanto os provedores de tamanho médio armazenam arquivos por mais de 1000 dias, o que não é exatamente ruim também. Hoje em dia, a comunicação de texto sobre Usenet é quase inexistente; A rede é usada principalmente como armazenamento de arquivos.

Por volta de meados de 2001, a rede foi detectada pelos detentores de direitos autorais, obrigando os provedores da Usenet a excluir conteúdos protegidos por direitos autorais, o que influenciou em grande parte a consistência de lançamento. Alguns provedores criaram sistemas automáticos para excluir arquivos sob direitos autorais, permitindo aos detentores de direitos autorais excluir informações por conta própria. Para parar ou, pelo menos, desacelerar a exclusão de arquivos, os entusiastas começam a fazer upload de arquivos com nomes de arquivos ofuscados ou usar arquivos protegidos por senha, adicionando-os em sites de índice de arquivos privados, somente para convidados, posteriormente. Esses lançamentos não podem ser encontrados ou baixados pelos meios usuais.

Na Rússia moderna, a Usenet é conhecida por apenas algumas pessoas, apesar de estar entre dois vínculos de trabalho com o oeste em 1991 (o segundo é Fido).
Atualmente, o Usenet é mais popular em países com leis de direitos autorais rigorosas com multas para download ou upload de conteúdo protegido por direitos autorais. A Alemanha é um exemplo desse país.
Ao contrário do Bittorrent, você não pode determinar o endereço IP dos usuários no Usenet, a menos que com a colaboração com o provedor ISP ou Usenet.

Conecte-se ao Usenet

Muito provavelmente, você não poderá se juntar à rede de forma gratuita: você terá pouco tempo de retenção (10-30 dias) ou baixa velocidade, ou mesmo acesso a grupos de notícias somente de texto. Você precisa comprar o acesso de qualquer provedor ou revendedor Usenet. A maioria dos provedores oferece dois tipos de acesso: assinatura mensal com dados não medidos (ilimitados) e plano de dados sem limite de tempo (bloco). Se você estiver interessado em baixar arquivos algumas vezes por mês, o acesso ao bloco é bom para ir.
Os maiores provedores são: Altopia , Giganews , Eweka , NewsHosting , Astraweb .

Agora, de alguma forma, você precisa obter o arquivo nzb com metainformation. Isso é algo como um arquivo .torrent para Usenet. Vamos usar o mecanismo de pesquisa do indexador se você não possui um.

Indexadores

Os indexadores públicos estão cheios de spam e vírus, suas capacidades de pesquisa são medíocres, mas, no entanto, são boas para arquivos velhos carregados há 5 anos ou mais.

Aqui estão alguns deles:

Os indexadores gratuitos com requisito de registro são mais adequados para arquivos frescos. Sua estrutura de catálogo é boa, os lançamentos não têm apenas o nome, mas a descrição e a imagem.

Eu recomendo especialmente os dois últimos, eles são capazes de procurar lançamentos ofuscados.
Existem índices focados apenas em um assunto, por exemplo, anizb para anime e albumsindex para música.

Fazendo o download da Usenet

Vamos tentar baixar o FP , um filme impopular e principalmente desconhecido de 2011, o BDRip 1080p do qual não pode ser encontrado na internet usual.
Você precisa encontrar o arquivo nzb e importá-lo para o programa de download como NZBGet ou SABnzbd .

Vá para nzbking.com , procure "the.fp.2011".

Este arquivo tem apenas 1 parte de 3867. Você não pode baixar esse arquivo, o indexador mostra isso em vermelho.

Os arquivos protegidos por senha geralmente são falsos.

A segunda página nos mostra um sinal de DVDRip apropriado – o tamanho do arquivo é bom, sem senha.

A terceira página mostra-nos BDRip e vários DVDRips, que parece bom (com base no tamanho do arquivo e na data de upload).

Escolha os arquivos que deseja baixar, pressione "Baixar NZB", importe .nzb em NZBGet ou SABnzbd com dados da conta Usenet configurados.
O arquivo está sendo baixado com velocidade total do link ISP.

À medida que o arquivo acabou de fazer o download, o NZBGet descompactaria automaticamente os arquivos e os excluiria, mantendo apenas dados descompactados. Você obteve 6.74 de dados, que foi carregado 4.5 anos atrás, em apenas 15 minutos, hooray!

IRC / DCC / XDCC

O Internet Relay Chat é um protocolo antigo para comunicações de texto que ainda é popular entre desenvolvedores de software de código aberto, administradores de rastreadores de torrents, amantes de anime e autores de CnCs de botnet, por sua simplicidade. Emerged em 1989, o IRC rapidamente se tornou o padrão para conversas de texto na internet por longos anos, e concedeu sua popularidade ao ICQ e Jabber apenas em meados dos anos 2000. Transferência de arquivo de suporte IRC usando DCC, que foi usado pela primeira vez para o compartilhamento automático de arquivos pelo Xabi, no Xabi DCC (daí o nome – XDCC).

Agora você tem canais IRC e até servidores inteiros apenas para transferências de arquivos usando o XDCC. Quase qualquer grupo de lançamento de anime, às vezes mesmo sem um site, tem seu próprio bot, que serve todos os arquivos do grupo. A popularidade do XDCC é impulsionada pela facilidade de usar e administrar bots de compartilhamento de arquivos: o carregador só precisa fazer o upload do arquivo usando o FTP, por exemplo, e o bot irá adicionar esse novo arquivo ao índice e notificar os usuários do canal dele (se for um novo episódio de uma série de TV como exemplo).

As redes especiais IRC privadas são usadas para warez, frescos e não tão filmes, música, jogos, botas. XDCC é dificilmente conhecido pelas agências de direitos autorais, é por isso que você pode encontrar muitas coisas que você não pode encontrar em outros lugares.

Indexadores

A maioria (mas não todos) Os bots XDCC são indexados com scripts especiais, fornecendo uma interface web para o mecanismo de busca.

Indexadores de conteúdo genérico:

Anualizadores de Anime:

Como fazer o download do IRC

Você precisará do cliente IRC. Quase todos os clientes irão funcionar, a grande maioria dos clientes suportam DCC. Junte-se ao servidor, dependendo do conteúdo que lhe interessa e faça o download.
Os maiores servidores com livros :

  • irc.undernet.org, #bookz room
  • irc.irchighway.net, #ebooks room

Warez :

  • irc.criten.net, #elitewarez room
  • irc.infatech.net, #elitewarez room
  • irc.scenep2p.net, # the.source room

Filmes :

  • irc.abjects.net, #moviegods room
  • irc.abjects.net, # quarto de besta-xccc

Animação ocidental e japonesa :

  • irc.rizon.net, #news room
  • irc.xertion.org, # sala do cartoon-world

Todos os bots aceitam !find ou @find comandos para procurar arquivos, enviando resultados de pesquisa com uma mensagem direta. A procura de uma consulta popular irá levá-lo literalmente a enviar spam com resultados de pesquisa, por isso é sã para usar o comando @search quando disponível. Este comando irá desencadear o botão especial do indexador para enviar resultados de pesquisa em um arquivo em DCC.

Vamos tentar baixar "How Music Got Free" – um ótimo livro sobre indústria da música, tecnologias de compartilhamento de música e uma pessoa que roubou quase 2000 álbuns diferentes e carregou-o na internet.

O bot reage a pedido @search e envia resultados em um arquivo de texto zipado em DCC.

Vamos enviar uma consulta de solicitação de download ao bot.

E aceite-o!

Se você encontrou um arquivo usando o indexador de arquivos, não precisa procurá-lo no canal. Basta enviar uma consulta de download ao bot imediatamente usando o comando do site do indexador.

DC ++

A rede de conexão direta é baseada na arquitetura cliente-servidor, onde todas as comunicações que não são de compartilhamento de arquivos são feitas via servidor, que é chamado de hub. O DC ++ suporta o compartilhamento de diretórios inteiros, pode procurar tipos de arquivos exatos (áudio, vídeo, arquivos, documentos, imagens de disco) e possui mecanismo de pesquisa que não está vinculado ao nome do arquivo. DC ++ é mais conhecido pelo converso de compilação, o que foi muito útil nas redes locais dos primeiros dias.
Esses centros eram populares na Rússia, alguns deles eram mantidos pelos próprios ISPs. O ISP "GoodLine" da Sibéria anunciou o próprio hub DC ++ em tabuleiros publicitários e até teve um software especial dentro de set-top boxes para entregar os novos filmes à TV.
Esse foi o maior hub do mundo, com mais de 100000 usuários.

Devido à facilidade de compartilhamento de arquivos (você só precisa colocar um tic contra o diretório para ser compartilhado), você pode encontrar lixo exótico e exótico, o que é, como o usuário pensa, nem sequer lembrar, mas ele ainda compartilha com os outros, apenas em caso.

O videotutorial de 11 anos é sembrado por 3 pessoas. Ninguém gostaria de vê-lo, acredite.

Como baixar de DC ++

Você precisará de qualquer cliente DC ++. FlylinkDC ++ é um bom para o Windows (também é compatível com o Bittorrent). Os usuários do Linux escolhem o EiskaltDC ++ ou a Web do AirDC ++ .

Junte-se a alguns hubs DC ++, quanto melhor, melhor. O DC ++ hublist está disponível nos próprios clientes, mas você também pode acessá-lo usando esta página web especial e copiar o endereço a partir daí.

Eu recomendo que você configure "Modo Ativo" e configure o encaminhamento de porta, caso contrário você não poderá baixar os arquivos dos usuários em "Modo Passivo" e seus resultados de pesquisa serão limitados.

Procurar e fazer o download é auto-explicativo: digite consulta de pesquisa, escolha o tipo de conteúdo, se desejar, pressione "pesquisa", clique duas vezes no resultado da pesquisa para fazer o download. Você também pode ver uma lista de todos os arquivos compartilhados do usuário exato (e baixar todos os arquivos da pasta selecionada) clicando com o botão direito do mouse no resultado da pesquisa e selecionando o item de menu correspondente.

Se o arquivo que você estava procurando não foi encontrado, vale a pena repetir sua pesquisa de tempos em tempos. As pessoas tendem a iniciar o cliente DC apenas quando precisam baixar algo, então você precisa pegar a onda para encontrar arquivos desses usuários.

A busca simultânea de vários arquivos pode ser difícil devido às limitações do protocolo NMDC. Os resultados da pesquisa podem misturar-se e aparecer para diferentes consultas de pesquisa, é por isso que é mais seguro realizar apenas uma pesquisa por vez. Os hubs ADC não têm essa limitação, mas eles são desistentemente inexistentes (seu URI começa com adc:// , não dchub:// ).

Indexadores

A pesquisa incorporada encontra arquivos apenas nas listas de usuários on-line, é por isso que os indexadores são muito convenientes para pesquisar arquivos raros.

Tanto quanto eu sei, o único indexador DC ++ é spacelib.dlinkddns.com (e é outro endereço é dcpoisk.no-ip.org ). A pesquisa é construída com o mecanismo Sphinx com suporte de morfologia. Os resultados da pesquisa consistem em links ímpares que você pode adicionar à fila de download no cliente DC ++.
Às vezes, está para baixo por longos tempos. Por exemplo, a última vez que acabou por 2 meses seguidos.

eDonkey2000 (ed2k), Kad

O ed2k é um protocolo de transferência descentralizada de arquivos com hub centralizado para consultas de pesquisa e estabelecimento de conexão entre usuários, assim como o DC ++. Itr costumava ser o protocolo # 1 para o compartilhamento de arquivos para todos os grupos sociais antes da invasão do servidor mais popular, o Razorback 2, em 2006 e a crescente popularidade do BitTorrent.

O eDonkey 2000 ainda está vivo. Simplesmente por causa do protocolo descentralizado Kad, que foi implementado logo antes do Razorback 2 e o servidor cliente original ficarem fora de serviço.

Você pode encontrar quase o mesmo conteúdo do que em DC ++: séries de TV antigas com diferentes dub, várias músicas, jogos, warez, livros de programação antigos, livros de matemática e biologia. Claro, novos lançamentos estão aqui também. O protocolo suporta a funcionalidade do bate-papo, mas é improvável que você possa usá-lo como desativado por padrão em todos os clientes, suas mensagens simplesmente não serão exibidas.

Como fazer o download a partir do eDonkey2000 / KAD

Como você pode imaginar, você precisará do cliente ed2k. aMule é uma boa escolha para o Linux. Os usuários do Windows provavelmente devem usar o eMule , embora não esteja sendo atualizado desde 2011.
É altamente recomendável configurar o encaminhamento da porta para poder baixar dos usuários por trás do NAT (LowID).

O processo de pesquisa e download é muito semelhante a um no DC ++. Digite consulta de pesquisa, obtenha resultados de usuários online, clique duas vezes no arquivo para começar a baixar.
O resultado da consulta será mostrado mesmo que nenhum dos usuários o tenha na íntegra, mas apenas partes dele.

Vamos encontrar " We Live In Public ", um documentário menos conhecido de 2009 sobre a internet dos anos 90. Uma parte deste filme conta sobre o serviço de transmissão de vídeo pseudo.com a partir de 1993, que é uma rede de internet moderna, que foi parcialmente anunciada.

Basta digitar consulta de pesquisa, pressionar o botão e aguardar os resultados:

Clique duas vezes para começar o download.

Fazer o download de um arquivo pode levar semanas ou mesmo meses. Por algum motivo desconhecido, a maioria dos usuários do ed2k tem velocidade desagradável na internet e aparece na rede por apenas algumas horas por semana, ou menos. Seja paciente.

Soulseek

Soulseek é uma rede centralizada para compartilhamento de música em p2p, criada em 2000 por um dos desenvolvedores da Napster. É conhecido na comunidade IDM, e ainda está em desenvolvimento ativo. Os bate-papos em grupo e privados, o compartilhamento de arquivos entre amigos e amigos, a pesquisa de tags e bitrate estão entre outras coisas desta rede.
Algumas consultas de pesquisa são censuradas.

O SoulseekQt proprietário oficial é o mais popular, com dois clientes não oficiais também disponíveis: Nicotine + e Museek + .

DHT BitTorrent

Todos os clientes BitTorrent modernos são capazes de encontrar pares usando tabela hash distribuída (DHT). Este recurso é usado não apenas por empresas orientadas para direitos autorais para monitorar usuários e enviar mensagens de violação de direitos autorais, mas também por indexadores DHT, para receber o arquivo torrent com infohash de uma consulta DHT de terceiros e salvá-lo no banco de dados. Esses indexadores podem ser úteis para encontrar torrents raros ou não publicados por nome de arquivo ou diretório ou pesquisar torrents similares com potencialmente mais sementes.

O indexador mais conhecido, mas hoje em dia, é btdigg , os outros sites vieram substituí-lo:

Os indexadores DHT são conhecidos por viver vidas curtas: dois dos meus favoritos, fastbot e BTKitty.red, são inacessíveis quando escrevo este artigo.

Sites de compartilhamento de arquivos e servidores de FTP

Quase todas as regiões possuem seu próprio site local de compartilhamento de arquivos, que é popular entre o grupo lingual exato. Por exemplo, você pode encontrar muitos conteúdos checos e eslovacos no uloz.to; zone-telechargement.ws é bom para conteúdo francês, enquanto chomikuj.pl é para mídia polonesa.

Os indexadores de FTP não encontram o arquivo solicitado com tanta frequência, mas tentam, contudo:

Os sites de compartilhamento de compartilhamento de arquivos também não são tão eficazes, mas não se esqueça deles:

Você pode encontrar muitos conteúdos no ex.ua até muito recentemente, mas infelizmente está fechado agora, que pena.

Como pesquisar lançamentos de cena

Nem sempre é suficiente procurar apenas o nome do conteúdo, você pode deixar os lançamentos da cena escorregar com seus dedos.

A cena de Warez , muitas vezes referida como The Scene , é uma comunidade subterrânea de pessoas que se especializam na distribuição de material protegido por direitos autorais, incluindo programas de televisão e séries, filmes, música, videos musicais, jogos (todas as plataformas), aplicativos (todas as plataformas) , ebooks e pornografia. A cena é destinada a ser escondida do público, sendo apenas compartilhada com aqueles dentro da comunidade. No entanto, como os arquivos eram comumente vazados fora da comunidade e sua popularidade crescia, alguns indivíduos de The Scene começaram a filtrar arquivos e enviá-los para fileshosts, torrents e ed2k.

https://en.wikipedia.org/wiki/Warez_scene

Os lançamentos de cenas são conhecidos por nomes curtos ou intencionalmente ilegíveis para impedir que ele procure com os meios usuais pelo nome do arquivo. Para determinar o nome apropriado, você deve procurar o lançamento da cena em um indexador de lançamento de cena especial: layer13.net , pre.corrupt-net.org e predb.me .

Vamos determinar o nome do lançamento de cena do We Live In Public from PUZZLE, usando Layer13:

NFO nome é "puzzle-wlip.nfo". Os nomes dos arquivos estão em 99% dos casos são os mesmos que o nome NFO, então vamos tentar procurar "puzzle-wlip" em um indexador Usenet:

Como podemos baixar uma imagem de DVD, hooray!

Os motores de busca comuns como o Google nem sempre são seu amigo útil. Primeiro, o Google segue o DMCA e elimina (esconde) conteúdo com direitos autorais. Em segundo lugar, pode ser bastante trivial encontrar conteúdo com símbolos especiais: tente procurar WITCH , e você receberá os resultados da bruxa , da bruxa e da bruxa Blair .
Prefiro o DuckDuckGo , o Bing e o Meta Search Engine SearX – às vezes você encontra materiais indisponíveis em qualquer outro lugar.
Se você está interessado em um lançamento de linguagem exata, é correto procurar por um nome localizado que você pode obter da Wikipedia, IMDb ou outros sites similares.

Anime loves é livre para usar o anidb, que armazena todas as informações sobre todos os lançamentos. A informação do grupo geralmente contém o link do site ou o canal IRC onde você pode conversar com seus membros e baixar arquivos usando o XDCC.

Além da fonte, resolução de vídeo, linguagem de áudio e legendas, anidb armazena o hash TTH para DC ++ e ed2k link para eDonkey2000 de cada arquivo conhecido.

O fim

É assim que eu busco arquivos na internet. Este artigo não contém coisas óbvias como encomendar discos da Amazon ou Ebay ou pesquisar em rastreadores Torrent populares. Todos os métodos descritos são bons para conteúdo de mídia europeu e americano, mas não tive a oportunidade de procurar conteúdo árabe ou indiano, então não posso dizer que seria efetivo ou não nesse caso.