Amazon doorzoeken op miljoenen openbare documenten, afbeeldingen en meer

Amazon Web Services (AWS) is de blauwe vinvis van cloud computing. U realiseert zich dit misschien niet, maar de meeste websites en webservices draaien op dit platform. En in feite is de public cloud van AWS groter dan die van Microsoft, Google en IBM samen.

Net als elk ander grootschalig cloudplatform host AWS een verscheidenheid aan openbaar toegankelijke gegevens. Je kunt bijvoorbeeld enorme 100 miljoen sterke datasets van Creative Commons-afbeeldingen en -video's van Flickr vinden. Toegang tot het met de hulp van de YFCC100m Browser.

Probeer een zoekopdracht met Google. U zult verrast zijn door de enorme hoeveelheid openbare documenten die u op AWS kunt vinden. Een van de snelste manieren om AWS te zoeken naar PDF-bestanden is om goede oude Google en een van zijn geavanceerde zoekoperators te gebruiken.

[Keyword] bestandstype: PDF-site: amazonaws.com

Natuurlijk zijn de bestanden open voor het publiek en zijn ze mogelijk beschikbaar via de zoekportalen van de sites die ze op AWS hosten. Maar deze sleutelwoordbenadering is een “experimenteel zoeken” dat helpt je om in één keer in de enorme hooiberg te graven in plaats van naar elke site te gaan.

U kunt ook de geavanceerde zoekpagina van Google gebruiken om uw vraag nauwkeuriger te maken en deze vervolgens uitvoeren om de Amazon-cloud te doorzoeken. Ik geef de voorkeur aan een kleine zoekfunctie met de naam Advangle. Hoe de nauwkeurigheid van zoekresultaten op Google en Bing onmiddellijk verbeteren De onmiddellijkheid van zoekresultaten op Google en Bing verbeteren Daarom is voor de beste manier om te zoeken nog steeds gebruik van booleaanse zoekoperators vereist. Maar wie wil alle verschillende zoekoperatoren uit het hoofd leren? Gelukkig is er een oplossing! Lees meer, waarmee u zoekopdrachten op een visuele manier kunt opbouwen.

Een “Onzichtbaar” Plaats voor Web Research

Een zoekmachine is een voordeur naar internet. Maar er zijn veel manieren om te zoeken naar diepe gegevens. Journey Into The Hidden Web: een gids voor nieuwe onderzoekers Reis naar het verborgen web: een gids voor nieuwe onderzoekers Deze handleiding neemt je mee op een tocht door de vele niveaus van het deep web: databases en informatie beschikbaar in wetenschappelijke tijdschriften. Uiteindelijk komen we aan bij de poorten van Tor. Lees meer en voeg toe aan je onderzoeksvaardigheden. Gebruik de informatie (vooral afbeeldingen) natuurlijk niet blindelings. Zoek de site die eigenaar is van de informatie en controleer hun copyright-beperkingen.

Ik denk dat de geavanceerde zoekoperatoren van Google deel moeten uitmaken van onze onderzoekspraktijken. Wat denk je? Noem een ​​paar open mappen waar je graag je online onderzoek doet.

Ontdek meer over: Amazon Web Services, Google Search, Web Search.