terça-feira, 28 de julho de 2015

Deep Web - Links da superfície



Atualizado em 21-Mar-2017

Links da Superfície

    Por mais incrível que pareça, eu encontrei links de excelente material na DW mas que estão armazenados na superfície. Não sei ao certo se estes arquivos ainda estão fora do radar dos motores de buscas mais usados, como o Google, Yahoo e Bing ou se foram deliberadamente colocados na DW (através de um link) para serem melhor apreciados ou notados. Tanto faz, por isso resolvi jogá-los na minha nuvem para disponibilizá-los publicamente.

    Se a intenção de todos os que contribuíram subindo estes arquivos era a de torná-los visíveis, então está mais do que na hora de ver os seus esforços reconhecidos em ajudar a contribuir com mais ciência à nossa querida humanidade. Desde já fica o meu agradecimento pelo esforço anônimo, contudo, extremamente nobre de cada um que subiu estes arquivos.

    Eu espero que possa te ajudar na escola, faculdade ou para fazer algum concurso público. Pelo menos você não vai gastar nada!



Ciência da Computação
Ciência da Computação
Administração
Administração














História

Filosofia
Filosofia













 

Inglês
Inglês

Matemática
Matemática

  








Videoaulas







  A medida que eu for encontrando, irei disponibilizando os devidos links. É claro que eu irei também subindo arquivos para disponibilizá-los a todos.

    Eu espero que possa tê-lo ajudado nas tuas pesquisas.


   Obs. Eu ainda organizando com calma mas o acesso está liberado.
(continuo pesquisando...)

quinta-feira, 23 de julho de 2015

Deep Web - Motores de Busca



Motores de busca

Atualizado em 02-Jun-2017


        Pois é, depois desse tempo que o blog ficou na "geladeira", novos motores surgiram e outros já existentes ou mudaram de visual ou modificaram suas respostas de pesquisas. Na verdade não há tantas mudanças significativas, já que a finalidade de um motor de pesquisas é a de propor ao internauta a possibilidade de ampliar os seus horizontes na DW. Enfim, a lista de motores de pesquisa está bacana e ainda com boas opções, contudo não estranhe se os motores de pesquisa exibirem resultados que encontram-se na superfície! Isto deve-se ao fato de que a maioria faz uma pesquisa limpa ou focada em assuntos digitados por você,  e que é a característica do então motor de busca.

    Caso queira entender melhor o que é a DW, como acessá-la e o que deve-se fazer ou não, além de deixar a tua máquina melhor configurada e segura, sugiro começar por (aqui).

    Embora as páginas da DW não sejam indexadas, existem bons motores de pesquisas que podem encontrar as páginas através da DW e não apenas listas de links. A maioria dos motores de pesquisas são nativos da superfície, outros só existem na DW - embora exibam resultados da superfície e já há alguns que possuem duas URL, uma para a superfície e a outra para a DW. Alguns destes mostrados aqui, já vinham na barra de pesquisa do Iceweasel, o antigo navegador da distro GNU/Linux Tails, que agora é o Firefox.

 Aviso

     Esse aviso fica mais para quem chega aqui pela primeira vez ou costuma sofrer de amnésia. Existem outros motores de pesquisas além dos mostrados aqui? É claro que existem, mas também existem alguns que são falsos (não necessariamente um clone de outro verdadeiro) Na verdade, são páginas web que não pesquisam nada, apenas geram um resultado aleatório tirado de um banco de dados de links. Alguns links eram armadilhas, outros a página web demorava carregar (na verdade esta não ia carregar nunca, era um malware tentando se instalar). É por isso que eu faço questão de testar link a link. O recado está dado.


https://www.startpage.com/
    O Start Page é um excelente motor de pesquisa, tanto na superfície  quanto na DW. O bacana deste é que na superfície a tua pesquisa é repassada para o Google de forma anônima e o resultado desta este repassa de volta para você sem que o Google saiba que a pesquisa foi feita por você. Ou seja, este praticamente faz uma "pesquisa limpa e anônima".

    Start Page já foi o motor de pesquisa padrão do navegador Iceweasel enquanto este era o navegador padrão da distro Tails, embora ainda seja uma das opções de motores de busca. Há algum tempo o Start Page adicionou uma série de configurações muito legais que podem deixar o teu navegador com visual bem atraente e funcionalidades do jeito que você gosta. Para quem gosta de fazer uma pesquisa bem específica, eliminando resultados que não tem nada a ver, há a opção avançada (clique na 2ª figura para ampliar) que vai te poupar tempo e trabalho olhando links que não estejam dentro do teu critério de pesquisa. Ou seja, você continua a usar o Google para encontrar o que deseja e sem propagandas. Top mesmo!


 
    O Duck Duck Go é muito usado por quem não quer ser rastreado ou ter as suas pesquisas usadas para engenharia social. Este é tanto nativo da DW como da superfície (aqui) e tem sido muito usado para pesquisas "limpas", ou seja, sem interferências comerciais. O Duck Duck Go também é uma das opções de motores de busca do Tails, além de ser o motor de busca do Projeto Tor pois muita gente gosta dele.



http://hss3uro2hsxfogfq.onion/    Not Evil (ex-TorSearch) agora com um visual bem simplista, é um motor de busca nativo da DW e as suas respostas são rápidas e mesmo escrevendo em português - ou outro idioma além do inglês - este pega os resultados nos metadados de alguma página web. Quando era conhecido como TorSearch, já era o motor de busca que havia sido chamado de o próximo "Google" da DW e é um dos resultados de busca pelo Google na superfície (ainda como TorSearch) que mais aparece, entretanto, este não possui um sistema de busca por imagens como você costuma usar nos motores de busca da superfície. Contudo, este é um motor de pesquisa muito usado, mesmo simples do jeito que está.

    Diferente do Google, o agora Not Evil não tem (ainda) nenhum tipo de filtro para ajudar a dividir e categorizar os resultados encontrados. E pelo que deu para entender, a equipe do Not Evil resolveu incluir alguns fóruns para quem gosta de ficar debatendo. Dei olhada muito rápida mas é aquele tipo de fórum cujo papo é sempre o mesmo (pedofilia, carding, wonar o Facebook, celular, etc...), com muitas perguntas e poucas respostas.

    Na Wikipédia ainda consta a página do TorSearch com o link para o Not Evil sem fazer nenhuma menção de mudança no seu visual.

    Eu testei perguntas como: "sites em língua portuguesa", "livros em português", "livros em pdf", etc e os resultados foram excelentes. É claro que surgem muitos resultados em sites de outros idiomas, mas que contém algo relativo ao texto da caixa de pesquisas.


    Curiosamente também aparecem vários links em espanhol - não sei se é uma falha de pesquisa ou devido a "similaridade" latina do idioma, mas os resultados surgem como uma opção mais próxima do português o que particularmente, não é de todo mal. Eu não testei se o mesmo acontece entre o inglês e o alemão, mas você pode experimentar...

    O legal do Not Evil, é que este também serve para pesquisas "limpas", ou seja, sem interferências comerciais, tanto na DW quanto na superfície.


 http://library.ucr.edu/    O InfoMine foi descontinuado mas ainda pode-se conseguir bons materiais para estudo e pesquisa através da UC Riverside Library.



   
                                     O Deep Web Technologies dá-te cinco motores de busca (e plugins do navegador) para temas específicos. Os motores de busca cobrem ciência, medicina e negócios. Usando estes motores de busca de tópicos específicos, você pode consultar os bancos de dados subjacentes na DW. Atualmente usando o Tor (devido as restrições configuradas) você pode bater numa página em branco, dizendo que o teu IP faz parte de uma "Lista Negra" e o teu acesso foi negado por abuso!! Mas acessando da superfície está tudo "normal".



    O IncyWincy já com um novo visual, é um motor de pesquisa Invisível e comporta-se como um mecanismo de meta-pesquisa batendo em outros motores de busca em filtrar os resultados. Este procura na WEB, diretórios, formas e imagens. Com um registro gratuito, você pode acompanhar os resultados de busca com alertas. Talvez você somente o acesse na rede Tor (embora este esteja na superfície), é provável que acessando-o da superfície simplesmente a página carregue totalmente em branco, talvez por ser necessário o JavaScript.


   
http://msydqstlz2kzerdg.onion/   AHMIA.FI é o motor de pesquisa para os serviços ocultos da rede Tor. É largamente usado pelos navegantes da DW.

Sempre mudando de visual, este motor de pesquisa tem duas URLs, sendo uma nativa da DW e outra da superfície (aqui). Talvez seja assim, para evitar que usuários tenham que acessar a superfície para fazer pesquisas sobre as páginas web da rede Tor. De tempos em tempos o link nativo da DW muda, ou deixa de ser funcional. Agora este está com um visual bem estiloso, diferente do visual que há no link da superfície. Embora nas duas formas, este consegue dar uma ampla resposta nas pesquisas, aparentemente o link da superfície parece não estar operacional . Mesmo assim, é muito bacana mesmo!





https://www.jisc.ac.uk/   O Intuite foi descontinuado mas ainda pode-se conseguir bons materiais para estudo e pesquisa relacionados a redes e tecnologia através do Jisc.  O que parece é que o Jisc incorporou o Intuite pois não há mais um link para o Arquivo da Web, que é digamos, um dentre vários backups de milhares de páginas web afora. Só que agora ficou bem chato para acessar o Intuite pois este exige 3 etapas para você entrar: 1º) clicar que tu não és um robô; 2º) clicar em imagens de acordo com a pergunta e 3º) copiar um link e colá-lo em outra caixa. eu já estou cogitando em tirar este link daqui por tanta burocracia... A propósito  faz uso do CloudFlare.





http://www.infoplease.com/    O Infoplease (agora com um novo visual) é um portal de informação com uma série de funcionalidades. A utilização do site, você pode ter acesso a um bom número de enciclopédias, almanaques, um atlas e biografias. Infoplease também tem alguns desdobramentos interessantes como Factmonster para as crianças (vale conferir) e Bio search tips, um motor de busca só para as biografias.

    Apesar do Infoplease não acessar a DW, este fornece um excelente serviço on-line que pode te poupar tempo em pesquisas na DW.


     O Torch já é bem conhecido. É mais um (dos poucos) motor de pesquisa nativo da DW. Faz um bom trabalho, e talvez faltasse um financiamento extra para continuar - dá logo para perceber pela publicidade na sua página principal. Às vezes o carregamento total da página demora finalizar devido as propagandas, independente disso você já pode ir logo digitando a tua pesquisa, teclar Enter e livrar-se desta espera (é o que eu faço).




https://disconnect.me/freeprotection
    Outro novo "jogador" apareceu na área e já é o motor de pesquisa principal do Firefox no Tails. Eu falo do Disconnect, embora o Start Page e o Duck Duck Go ainda estejam no navegador como outras opções para os fãs que não os querem largar. O Disconnet também serve para pesquisas "limpas", ou seja, sem interferências comerciais. O Disconnet passou a oferecer serviços pagos mas continua com o serviço básico que apresentou-se, para ver estas opções clique no link do Disconnet (em amarelo), a "versão básica" já está com o link atualizado (se clicar na imagem). O Disconnet possui um app para o teu smartphone (um navegador) com mais segurança e navegação criptografada, algo muito útil para quem usa redes Wi-Fi públicas. Vale conferir.




 Também há o News File Search que é um motor de pesquisa nativo da DW. Por já está na DW é mais uma opção para encontrar o que se deseja. Diferente da superfície os resultados das pesquisas podem ser completamente variados e muitos links neste motor podem não encontrarem-se nas pesquisas feitas por outros motores, e do jeito que a DW é meio caótica, toda ajuda é indispensável.


 Este é o Secureroot, um motor de pesquisa diferenciado pois é voltado para pesquisas relacionadas ao universo hacker. Pode-se dizer que o Secureroot é um misto de motor de pesquisa e catálogo de links, pois você escolhe se a tua pesquisa será feita através da WEB ou apenas do próprio Secureroot.

Então se a tua procura é por documentação, programas, dicas, fóruns, serviços, etc... (a lista é longa), o Secureroot é parada obrigatória! Além de ser um motor de busca, a página principal já é formada por uma infinidade de links bem organizados e classificados.

    No menu Top 100 sites do Secureroot  você pode pesquisar por mais outros 100 sites do gênero, ou seja, este já te entrega de bandeja uma enorme possibilidade de você poder encontrar o que quer na superfície.

    De repente o que você procura está na superfície (mais seguro) mas de forma não tão clara. Muita gente vai à DW à procura de material hacker específico, e com o fechamento de várias páginas do gênero na DW o Secureroot é uma opção mais rápida e prática.


http://lqdnpadpys4snom2.onion/    Um outro motor de pesquisa devotado a dar uma mão aos internautas é o SearX, nativo da DW e possui um mecanismo de meta-pesquisa, agregando os resultados de outros motores de busca enquanto não armazenar informações sobre seus usuários.

O SearX tem uma página com vasta documentação e detalhes sobre este motor de pesquisa (aqui).

    Pode-se dizer que o SearX é um motor de pesquisa híbrido, pois este utiliza vários outros motores de pesquisa específicos para cada tipo de arquivo procurado. Você pode habilitar ou desabilitar que conjunto de motores de pesquisa o SearX use: Para isso você deve clicar em Advanced settings, logo abaixo da caixa de pesquisa. Além de poder definir em que idioma você pretende pesquisar, o que pode evitar resultados em um idioma que não seja do teu interesse (o padrão é  Automático). É só ir em preferences.



    O diferencial do SearX é que este te dá opções de pesquisa com filtros prontos na sua página principal, incluindo imagens, notícias, redes sociais, etc. Basta marcar (ou desmarcar) os botões para filtrar a tua pesquisa. Infelizmente o SearX não aceita caracteres acentuados na caixa de pesquisa ¹, mas mostra os resultados acentuados, assim como aceita pesquisas como: " Livros em portugues", mesmo sem acento, o Searx te dá ótimos resultados. Vale conferir

    ¹ Se a configuração do idioma de pesquisa não for a de um idioma que use acentos ou Automático. Caso contrário, os acentos serão liberados e corresponderão ao idioma em questão.



  
   
    Sobre o Memex Deep Web Search Engine, um buscador sinistro do Departamento de Defesa dos EUA, eu transferi e incluí novas informações (aqui).



    A cada mês eu vou dar uma conferida para ver se os links ainda são válidos. Caso algum link não esteja funcionando, avise-me, e caso você conheça algum link legal (mesmo que esteja no meio de um catálogo de links ou lista de links), envie-me para poder ajudar o maior número de internautas que gostam da DW.


    Espero que este conteúdo possa ajudá-lo a conhecer melhor o que tem de bom na DW!
  
    Existem é claro outros motores de buscas, mas não prometo dar uma de louco e tentar colocar todos aqui, mas sempre que um destes se destacar será adicionado, ou algum que aqui esteja passe a ser descontinuado eu o troco por outro.

(continuo pesquisando,,,)

quarta-feira, 22 de julho de 2015

Deep Web - Catálogos de Links



Catálogos de links

Atualizado em: 02-Jun-2017




     Antes de mais nada, sempre é bom lembrar que embora estes catálogos de links sejam até bons, isto não quer dizer que estes não passem por mudanças de conteúdo e também, não necessariamente os  links encontrados neles sejam todos válidos. A respeito disto eu já expliquei em várias publicações sobre a DW. Se desejar pode reler sobre isto (aqui).


    Um catálogo de links pode até parecer um motor de busca por ter uma caixa de pesquisa, mas a pesquisa feita ali limita-se ao conteúdo dos links contidos neste catálogo e não a toda rede Tor (ou Onion se preferir). Motores de busca dão resultados sobre o conteúdo direto da rede Tor, principalmente se forem nativos.


    Caso queira entender melhor o que é a DW, como acessá-la e o que deve-se fazer ou não, além de deixar a tua máquina melhor configurada e segura, sugiro começar por (aqui).
  

    Este é considerado o mais antigo catálogo na WEB e foi iniciado por Tim Berners-Lee, o criador da WEB. Portanto, não é estranho que este encontra-se num lugar na lista de recursos da Web Invisível. Deixo-o aqui não apenas como um tributo ao belo trabalho de reunir em um site com excelentes conteúdos, mas também porque tem tudo a ver com a DW.
    É, mas o The WWW Virtual Library possui bastantes recursos relevantes sobre um monte de assuntos. Você pode ir verticalmente nas categorias ou usar a barra de pesquisa. A captura de tela mostra a disposição alfabética de assuntos abordados no site. Aparece um pequeno link sobre novidades e a linha do tempo do The WWW Virtual Library.


    Um dos catálogos mais usados na DW é o The Hidden Wiki. Já vou avisando que ele não tem nada a ver com a Wikipédia, por isso não pense que através dele você vai ter alguma informação como se fosse a verdadeira Wikipédia. A propósito, The Hidden Wiki  tem cada vez mais links "quebrados" do que válidos, o que já era de se esperar por um catálogo que quer reunir tudo, algo literalmente impossível. Porém, devido a sua popularidade, nada impede que links maliciosos possam estar contido no mesmo.

    Parece que o administrador do The Hidden Wiki tomou vergonha na cara e deu uma limpeza geral em dezenas de links quebrados, muitos de páginas web que nem existem mais. Pode ter melhorado de conceito, mas (o maldito "mas"...) Sempre é bom ter cautela com armadilhas de crackers que estão esperando invadir a tua máquina.

    Independente, disso vou continuar explorando e pesquisando sem ajuda do The Hidden Wiki, e eu particularmente nem uso o mesmo pois, parece que este parou no tempo já que os links válidos são os mesmos de sempre.



    The Hidden Wiki até plagiou o formato das páginas da Wikipédia, mas não passa disto. The Hidden Wiki é um enorme catálogo de links, e devido ser bastante divulgado e ter muitos links financiados, curiosamente já criou algumas variantes da própria página principal chamadas de The Hidden Wiki Uncessored, e também The Hidden Wiki Mirror.

    De acordo com os administradores do The Hidden Wiki Uncessored é dito o seguinte: "- Este wiki é um projeto comunitário que visa recolher e catalogar tudo e qualquer coisa que uma Wikipedia regular iria censurar. A edição é aberta para todos os usuários registrados".

    The Hidden Wiki costuma estar no topo da lista dos sites de links, mas se você prestar mais atenção, a URL geralmente é diferente de uma lista para outra, embora leve para uma "página principal" do site, ou seja este é um tipo de site que tem várias "páginas principais" (com praticamente os mesmos links). Só na primeira página tem pelo menos uns 200 links tipo aquela "listinha". Se ainda não a viu, veja-a (aqui).

    Se você parar para pensar, vai perceber que estas "páginas principais" são apenas formas diferentes de faturar uma grana bem grande através dos "patrocinadores" anônimos (sites de drogas, armas, e comércio sexual) o que faz com que pareça que a DW apenas viva disso e não haja alguma coisa boa. Se você tiver (e manter) o foco em coisas boas, vai encontrar muitas coisas legais mesmo!

    É claro que você pode usar a barra de pesquisa e digitar o assunto que você quer encontrar (dentro do The Hidden Wiki), mas eu repito, você não está no Google ou na Wikipédia, então tenha paciência pois encontrar alguma coisa na DW dá trabalho pra quem não tem foco.

    Vou tentar simplificar tantas URL para um mesmo catálogo:



  • The Hidden Wiki (outra página, mas ainda funcional e provavelmente com links desatualizados).


    Eu não sei se a moda parou... Mas todo o ano The Hidden Wiki criava um "novo link" com o número do ano... o que causava uma confusão


    Aparentemente todos estes links das "versões" do The Hidden Wiki podem parecer a mesma coisa, pois há muita coisa em comum, seja em todos, seja em apenas dois, etc... mas há links apenas em cada um. O propósito disto eu não sei, mas é por isso que os links do The Hidden Wiki aparecem tanto nas listas de links.
    Na Wikipedia (em inglês) na aba "talk" você vai encontrar informações extras sobre este catálogo de links tão usado na DW (aqui).




    Este é o Onion List e de cara lembra um pouco a maioria dos catálogos de links, o Onion List agrega várias páginas de links em várias categorias além de tirar algumas dúvidas sobre as perguntas mais frequentes sobre a DW. A caixa de pesquisa facilita encontrar o tipo de assunto, serviço ou arquivo que você deseja. Top mesmo.



http://torwikignoueupfm.onion/index.php?title=Main_Page    Com um novo visual, o Tor Wiki  é mais um catálogo que tem um pouco de tudo. Possui uma interface que lembra muito The Hidden Wiki mas não tem nada a ver com este e nem com o Projeto Tor. O Tor Wiki possui muitos links e é relativamente bem organizado. Assim como o The Hidden Wiki , o Tor Wikiencontra-se com um grande número de links quebrados de páginas que nem mais existem (na rede Tor). A dica é usar a caixa de pesquisa para ir logo ao que pretende encontrar, embora uma busca minuciosa possa ser interessante ou entediante. O Tor Wiki já estava levando algum tempo para carregar a página, e agora avisa que está com "dificuldades técnicas". O jeito é aguardar...


    E falando sobre o Projeto Tor, vale a pena mostrar aqui a Página oficial deste projeto e que tem muita informação importante, assim como links para diversos serviços e páginas .onion. Esta página é muito negligenciada pelos internautas que querem "receitas prontas" e não estão dispostos a uma leitura séria. Quem gosta de estar atualizado sobre a DW e quer saber novidades sobre a segurança da rede Tor, aqui é uma parada obrigatória, até porque se alguma coisa está havendo e que possa comprometer o teu anonimato e privacidade vai sair primeiro aqui, e não tem coisa melhor do que ter notícias direto da fonte.

    O Projeto Tor está precisando de uma ajuda da galera que tanto gosta e precisa desta rede e seus serviços. Um trocado de cada um, não vai deixar ninguém sem poder tomar um sorvete ou ir ao cinema...

    Apesar do Onion Soup não ser um catálogo no estilo dos anteriores (é na verdade um blog), mas este reúne uma coleção de links e artigos sobre assuntos interessantes, além de logo na página principal fornecer uma ferramenta para verificar se algum link .onion ainda é válido. Vale dar uma conferida.




    A cada mês eu vou dar uma conferida para ver se os links ainda são válidos. Caso algum link não esteja funcionando, avise-me, e caso você conheça algum link legal (mesmo que esteja no meio de um catálogo de links ou lista de links), envie-me para poder ajudar o maior número de internautas que gostam da DW (Os créditos serão devidamente publicados).

    A propósito, há catálogos de links que eu não publiquei por encontrar nos mesmos, hipertextos maliciosos com descrições atraentes ou que já constavam em outros catálogos sem nenhuma alteração no hipertexto. Destes apenas separei os links válidos e seguros, na verdade, eu relutei um pouco em postar os links do The Hidden Wiki por este "talvez" conter algum link malicioso perdido no meio de tantas páginas principais, mas devido a sua popularidade, deixei este passar (por enquanto). No geral os catálogos são uma grande ajuda, mas sempre devem ser manuseados com cuidado. O recado está dado.


    Espero que este conteúdo possa ajudá-lo a conhecer melhor o que tem de bom na DW!

(continuo pesquisando...)