Kalla det den “osynliga webben”, “ytwebben” eller “djupwebben”, de olika namnen hänvisar till samma sak: innehåll som sökmotorbaserade sökmotorer vanligtvis inte kan komma åt. Det finns flera hinder som kan stoppa spindlar i deras spår, och ett av de värsta är lösenordsskyddande innehåll. Placera dina sidor i ett område som endast registrerade användare kan komma åt, och sökmotorer kommer aldrig att hitta dem, och inte heller de som söker på sökmotorer.
Det är synd, för det finns mycket bra innehåll att erbjudas i registrerade områden som allmänheten kanske vill upptäcka. Ange eLuminator, en produkt från MediaDNA. eLuminator kommer att duplicera skyddat innehåll så att det är tillgängligt för sökmotorer utan att ta bort de begränsningar som krävs för mänskliga besökare innan de tillåts se det.
Systemet använder sig av dörröppnings- och mantelsidor, högt laddade ord som väcker hacklet för många termer, och MediaDNA kommer förmodligen inte att gilla att de tillämpas på deras tjänst. Det automatiserade systemet använder dem dock på ett sätt som gör att det framstår som ett lysande exempel på varför sådana tekniker inte automatiskt kan betraktas som skräppost av sökmotorer. Vad som helst mindre, eLuminator hjälper verkligen både sökmotorer och deras användare, och systemet är så positivt att MediaDNA valdes ut av Inktomi i september som partner för sitt nya betalda inkluderingssystem.
Låt oss säga att du har en aktierådgivningswebbplats med 1 000 sidor gömda bakom ett registreringssystem. eLuminator kommer att läsa dessa sidor och automatiskt skapa en sökmotorvänlig version av var och en av dem. Detta är konceptet med dörröppningssidan: du skapar en sida som är utformad för att tillfredsställa sökmotorer, snarare än människor. Det är dock allt som kan göras med den jämförelsen. Portaler är ofta högtillverkade sidor, designade för att rankas bra för en viss term och kanske till och med en viss sökmotor. Istället arbetar eLuminator med befintliga sidor för att destillera essensen av vad de handlar om och skapar sedan en version som sökmotorer kan läsa.
Till exempel kan eLuminator läsa din IBM-aktieanalys. Du kan sedan extrahera titeln för att vara sidtiteln, det inledande stycket av sidans metabeskrivningstagg, och göra en lista över de unika orden som visas på sidan för metasökordstaggen. Det inledande stycket och nyckelorden skulle också användas för att visas på själva sidan. Resultatet är en sammanfattning av vad den ursprungliga sidan handlade om, men den är inte “läsbar för människor” som MediaDNA kännetecknar den. Det finns med andra ord ingen meningsstruktur på sidan, inget sammanhang som gör sidan värdefull för människor, även om spindlarna har tillräckligt med information för att förstå vad den handlar om.
Sidorna placeras sedan på en “spökwebbplats”, som vanligtvis har en liknande domän som webbplatsägarna, i varumärkessyfte. Till exempel, om vår ursprungliga webbplats hette “greatstocktips.com”, så kanske våra eLuminator-sidor skulle gå till “greatstocktips-eLum.com”. Sidorna skulle sedan skickas till stora sökrobotbaserade sökmotorer.
Om en av sidorna dyker upp som svar på en sökning används cloaking så att den mänskliga besökaren ser en sida utformad för dem. De skulle se en sammanfattning av vad sidan handlar om och hur man kommer åt den, antingen genom att köpa föremålet eller helt enkelt registrera sig på sidan.
eLuminator gör ingen speciell magi på sidor för att få dem att rankas bra. Dessa är inte intensivt optimerade sidor och kan till och med prestera bättre om meningsstrukturen lämnas intakt. Men det faktum att sajter kan gå från att ha liten eller ingen representation i sökmotorer till att kanske tusentals eller hundratusentals sidor listas innebär att det är mer sannolikt att vissa sidor naturligt kommer att rankas bra och se en ökning av trafiken, kanske betydande. . MediaDNA citerade en kundupplevelse där 4 500 dokument listades och i sin tur genererades 365 000 klick från bara Inktomi-drivna tjänster under en månad.
“Eftersom eLuminator möjliggör fulltextsökning efter värdefullt innehåll, upptäcker vi att trafiken vi leder till kundwebbplatser är bättre riktad än traditionell förstasidestrafik”, säger Larry Vernec, vice vd för marknadsföring på MediaDNA. .
Hittills är Inktomi den enda officiella sökmotorpartnern till eLuminator. Det betyder att du kan garantera att dina sidor kommer att inkluderas i Inktomi-indexet. eLuminator skickar även dina sidor till andra sökrobotbaserade sökmotorer, men bristen på partnerskap innebär att det inte finns någon garanti för att de kommer att inkluderas. Du bör dock förvänta dig att några hämtas. MediaDNA arbetar för att etablera partnerskap med andra spårare.
MediaDNA tar ut en installationsavgift på 5 000 USD för eLuminator-tjänsten, och du betalar sedan mellan 5 cent och 40 cent för varje person som klickar på dess sidor. Du köper klickblock i förväg och får en lägre pris per klick om du köper ett stort block åt gången. Hittills har eLuminator ett dussintal kunder, inklusive ZDNet, Hoover’s Media Technologies, Penton Media, McGraw Hill och kanalpartnern Qpass.
Vem ska använda detta? Om du har budgeten, uppenbarligen alla med lösenordsskyddat innehåll som du vill göra tillgängligt för sökmotorer. eLuminator är också användbar för alla som har en webbplats som ställer till problem för spindlar, till exempel de som använder ramar eller dynamiska webbadresser. Det är också användbart för alla med innehåll i text- eller icke-HTML-format, till exempel PDF-filer. Det är dock viktigt att ha bra textbaserat innehåll. eLuminator kommer bara att lyckas om den har sådant innehåll att arbeta med.
MediaDNA
http://www.mediadna.com/
Den osynliga webben fördjupas
Sökmotorrapporten, 2 augusti 2000
https://www.searchenginewatch.com/sereport/00/08-deepweb.html
Osynlig webb? Deep web? Grunt nät? Den här artikeln förklarar begreppen mer djupgående.
