www.romver.ru / Полный список статей / Ссылочный антиспам

Za4em poiskoviki borutsa so ssilo4nim spamom? Zatem, 4to luboy spam snijaet ka4estvo poiskovoy vida4i luboy poiskovoy sistemi. Ssilo4niy spam napravlen na bor'bu s saytami i stranicami, 4'i pozicii bili polu4eni ne estestvennim obrazom, s cel'u manipulacii algoritmami poiskovika.

PageRank

Edva li ne pervim algoritmom, napravlennim na bor'bu so spamom, no ne ssilo4nim, a s tekstovim avlaetsa algoritm PageRank ot Google.

PR(A)=(1-d)+d(PR(T_1 )/C(T_1 ) +⋯+PR(T_n )/C(T_n ) ), gde

PR(A) – ves stranici A;

PR(T_n) – ves stranici, ssilau6eysa na stranicu A;

C(T_n) – 4islo ssilok so stranici T_n;

d – koefficient zatuxania, obi4no prinimaetsa ravnim 0,85;

1-d – element teleportacii.

Princip raboti PageRank mojno opisat' sleduu6im obrazom:

Predstavim, 4to u nas est' «Pute6estvennik» pereme6au6iysa po ssilkam v interenete slu4aynim obrazom. On s ravnoy veroatnost'u mojet libo pereyti po sleduu6ey ssilke (odnoy iz) na stranice, libo teleportirovat'sa v proizvol'noe mesto. Veroatnost' perexoda po ssilke i est' PageRank.

Opiraas' na formulu ne slojno ponat', 4to nujno dla manipulacii PageRank:

• stranica T_n imeet visokiy ves;
• stranica T_n imeet malo isxoda6ix ssilok;
• na stranicu A ssilaetsa bol'6oe koli4estvo stranic T_n;
• rasstoanie mejdu stranicami doljno bit' ravno 1 (s kajdoy stupen'u udalenia, ves umen'6aetsa v 0,85 raza).

Krome togo, mojno sdelat' vivod otnositel'no ssilok, razme6aemix na va6ey stranice:

• ssilki ne otnimaut ves u stranici, na kotoroy oni naxodatsa;
• pri dobavlenii kajdoy dopolnitel'noy ssilki so stranici, smejnie ssilki peredaut men'6iy ves.

Po ironii sud'bi PageRank, napravlenniy na bor'bu s tekstovim spamom, polojil na4alo epoxe ssilo4nogo spama. Dla bor'bi s etim vidom spama primenaetsa mnojestvo algoritmov, kotorie opisivautsa v dannoy stat'e.

TrustRank

Zada4a algoritma obnarujit' stranici i sayti, kotorie veroatnee vsego avlautsa spamom, a takje te, kotorie veroatnee vsego avlautsa dostoynimi.

Algoritm osnovan na poluavtomati4eskom obnarujenii, xoro6ix, ne spamnix stranic. Algoritm polagaetsa na utverjdenia:

• xoro6ie dokumenti redko ssilautsa na ploxie;
• ta t6atel'nost', s kotoroy vladel'ci xoro6ix dokumentov stavat ssilki na drugie dokumenti, obratno proporcional'na koli4estvu etix ssilok.

Princip raboti sleduu6iy:

1. Na osnove invertirovannogo PageRank, vi4islennogo ne po koli4estvu vxoda6ix, a naoborot – po koli4estvu isxoda6ix ssilok so stranici, vibirautsa te sayti, dla kotorix etot pokazatel' okazalsa naibol'6im.

2. Dla etix saytov proizvoditsa ru4naa ocenka po principu (v original'nom algoritme ukazano, 4to dostato4no razmetit' bukval'no 200 saytov s pomo6'u ekspertnoy ocenki, dla togo, 4tobi mojno bilo ocenit' WEB v celom):

0 – spamniy

1 – dostoyniy

3. Dalee proizvoditsa rasprostranenie TrustRank po sleduu6emu principu:

• 4em dal'6e ot isto4nika – tem TrustRank men'6e, pri4em stepen' umen'6enia ravna koli4estvu 6agov ot isto4nika;

• TrustRank razdelaetsa porovnu mejdu vsemi isxoda6imi ssilkami.
  

Algoritm TrustRank bil razrabotan i vnedrёn v 2004 godu.

Prime4anie: Opisan algoritm ispol'zovanniy Yahoo. Drugie poiskovie sistemi mogut ispol'zovat' blizkie algoritmi. Podtverjdeniem etogo mojet slujit' ispol'zovanie algoritma Hilltop, priobretёnnogo Google v 2003 godu.

Visokim TrustRunk obladaut:

• sayti iz katalogov Yaca i Dmoz;
• sayti imeu6ie bol'6oy vozrast;
• sayti razme6au6ie tol'ko unikal'niy kontent;
• sayti, t6atel'no otbirau6ie ssilki dla razme6enia v svoёm kontente.

Zadumivalis' li vi kogda-nibud', po4emu Vikipedia prisutstvuet vverxu vida4i po podavlau6emu bol'6instvu poiskovix zaprosov, pri etom novie stat'i mogut prakti4eski ne imet' ni vnutrennix, ni vne6nix ssilok? Potomu, 4to ey fakti4eski vru4nuu prisvoen o4en' visokiy uroven' doveria.

Topic-sensitive PageRank

Pomimo algoritmov, opisannix vi6e, poiskovaa sistema vi4islaet ves, peredavaemiy po ssilkam, s u4ёtom tematiki stranici–donora.

Podrobno pro4itat' pro algoritm mojno v isxodnike, poskol'ku primerniy princip raboti, a dumau, o4eviden.

Interesna tol'ko odna detal': dla kajdoy tematiki sozdaёtsa vektor. Takim obrazom mejdu raznimi tematikami mojno rass4itat' blizost' etix vektorov. Drugimi slovami, dla polu4enia temati4eskoy blizosti, ne obazatel'no ispol'zovat' identi4nie tematiki.

V tablice predstavleni dannie – blizost' mejdu vektorami, rass4itannoe v original'nom issledovanii. 0 – beskone4no udaleni, 1 – sovpadaut.

(Kartinka klikabel'na)

Manipulacia na osnove faktorov, u4itivaemix algoritmom mojet osu6estvlat'sa:

• pokupkoy ssilok na temati4eski sovpadau6ix donorax s visokim PR;
• na temati4eski blizkix donorax s visokim PR.

BrowseRank

E6e odnim instrumentom poiskovix sistem avlaetsa BrowseRank.

Otli4ie ot PageRank sostoit v strukture ssilo4nogo grafa. V texnologii PageRank rebrami grafa slujat ssilki, a uzlami – dokumenti. V BrowseRank primenёn drugoy podxod: rebrami avlautsa perexodi mejdu dokumentami, a uzlami po-prejnemu ostautsa sami dokumenti.

BrowseRank mojno nazvat' svoego roda gibridom mejdu poveden4eskimi i ssilo4nimi faktorami.

V BrowseRank ispol'zuetsa informacia o prodoljitel'nosti prebivania pol'zovatela na stranice, fakt perexoda na drugoy dokument i sposob etogo perexoda: pramoy vvod a adresnuu stroku, libo perexod po ssilke.

Otkuda poiskoviki mogut brat' etu informaciu?

Predlagau podumat':

• za4em poiskovikam nujni sobstvennie bari (Andeks-Bar);
• za4em poiskoviki razrabativaut sobstvennie brauzeri, a takje vkladivaut millioni dollarov na ix prodvijenie (Google Chrome).

Polniy tekst stat'i s algoritmom ras4eta.

Nakru4ivat' BrowseRank ne rekomenduetsa, poskol'ku poiskoviki obladaut mnojestvom estestvennix dannix.

• vo-pervix, u poiskovika est' graf klikov sayta donora i nakrutka privedёt k ego perekosu;
• vo-vtorix, nakruto4nie servisi 4asto «palatsa», tak naprimer pol'zovateli popularnogo Userator ostavlaut za soboy «sled» v vide isto4nika perexoda Userator.ru.

Drugie faktori bor'bi so ssilo4nim spamom

Nami bili rassmotreni pramie metriki antispama. Teper' pereydёm k kosvennim ili, esli xotite, k dinami4eskim. Otli4autsa oni tem, 4to fakti4eski napravleni na bor'bu s mexanizmami zaspamlivania vi6e opisannix algoritmov.

Dinamika prirosta ssilok

V pervuu o4ered' u4itivaetsa dinamika prirosta ssilok.

Eto uje davno vsem izvestniy ssilo4niy vzriv – fil'tr, napravlenniy na bor'bu s neestestvenno bistroy dinamikoy prirosta ssilok.

Vot estestvennaa dinamika, xarakternaa dla Vikipedii:

(Kartinka klikabel'na)

A vot – dla sayta, dopustiv6ego neskol'ko rezkix prirostov:

(Kartinka klikabel'na)

Bez kommentariev, kak govoritsa.

Rabotaet sleduu6im obrazom: esli za opredelёnniy, korotkiy period vremeni na sayt poavilos' koli4estvo ssilok, prevosxoda6ee predel'niy porog, to vse ssilki, razme6ennie sverx nego, ne u4itivautsa.

Razrabot4iki poiskovix algoritmov predusmotreli situaciu, kogda estestvennaa ssilo4naa dinamika mojet naru6at'sa – eto informacionniy povod. Pri poavlenii informacionnioy bombi na neё rezko na4inaut razme6at' ssilki, otli4iem ot obi4nogo lavinoobraznogo platnogo razme6enia avlaetsa bol'6oe koli4estvo ssilok s novostey.

Poetomu dla optimizatorov vozmojni varianti nivelirovania posledstviy ssilo4nogo vzriva, odin iz nix – razme6enie dopolnitel'nix ssilok na novostnix resursax. Takix ssilok doljno bit' mnogo, resursi takje doljni bit' pose6aemimi.

Vajno otmetit', 4to ssilki iz novostey doljni indeksirovat'sa ran'6e, 4em ssilki s bol'6instva drugix vne6nix resursov.

Upravlenie dinamikoy:

Ispol'zuyte Webmaster Andeksa, vigrujayte vne6nie ssilki i otslejivayte ix prirost. O4en' vajno sobludat' postoanstvo naklona krivoy prirosta ssilok, ona doljna bit' gladkoy, bez ska4kov.

Svazannost' ssilo4noy massi

Sayti, sozdannie dla prodaji ssilok na birjax, obi4no prakti4eski ne imeut vne6ney ssilo4noy massi.

Ne spam – sleva, spam – sprava.

Dla poiskovika net osobix problem, v tom 4isle i v plane dopolnitel'nix vi4islitel'nix mo6nostey, dla vi4islenia podobnix svazey, poskol'ku eto mojno provesti na etape ras4ёta PageRank.

Dla vibora donorov nujno ispol'zovat' sayti:

• imeu6ie bol'6oe koli4estvo vne6nix ssilok;
• imeu6ie ob6ix donorov.

Raznoobrazie vesovix pokazateley

V estestvennoy ssilo4noy masse pokazateli TIC i PR donorov raznoobrazni. Net jestkix ramok, naprimer ne bivaet takogo, 4tobi vse donori obladali fiksirovannim PR ili TIC. Bolee togo, maloveroatna situacia, kogda vse donori popadaut v uzkie ramki, naprimer PR 2-3, TIC 10-50 i t.p.

Takim obrazom, dla obespe4enia estestvennosti nel'za podbirat' donorov po odnomu edinstvennomu fil'tru. Bolee togo, estestvennaa ssilo4naa massa budet vo vsёm diapazne zna4eniy vigladet' tak:

V estestvennoy ssilo4noy masse bol'6instvo ssilok imeut nulevie pokazateli TIC i PR. Ska4ok posle na zna4enii >1000 obuslovlen tem, 4to zna4itel'noe koli4estvo ssilok imeet o4en' visokie zna4enia TIC. Esli eti zna4enia raskrit' polu4im rovnuu pramuu.

Pri nabore ssilo4noy massi:

• otdavat' predpo4tenie donoram s raznoobraznim stati4eskim vesom;
• sledit' za raspredeleniem vesovix pokazateley ssilok.

Sootno6enie ankornix i bezankornix ssilok

Poiskovie sistemi takje otslejivaut sootno6enie mejdu ankornimi i bezankornimi ssilkami.

Svejiy primer: Google Penguin.

Voob6e ispol'zovanie bezankornix ssilok nedooceneno mnogimi SEO optimizatorami. Skoree vsego eto vizvano sleduu6im: esli u konkretnogo zaprosa pozicii ne dotagivaut do TOPa, to optimizator s4itaet, 4to problema v nedostatke ssilok i na4inaet zakupat' e6ё. Poskol'ku on prodvigaet konkretniy zapros, to ne voznikaet daje misli o tom, 4to pri4ina mojet skrivat'sa v drugix faktorax. Ankorniy ves bistro uxodit v nasi6enie (s4itaem po BM25) i ostaёtsa neobxodimost' v nara6ivanii tol'ko stati4eskogo vesa. Dla etogo nujni kak raz bezankorie ssilki.

Bolee togo, v «estestvennoy srede» redko ssilautsa s ispol'zovaniem ankora.

Stoit ogovorit'sa, bezankornimi ssilkami avlautsa:

• ssilki bez teksta;
• nazvanie kompanii v ankore;
• URL sayta v ankore;
• URL stranici v ankore.

Vot tak vigladit estestvennoe sootno6enie bezankornix i ankornix ssilok na primere Vikipedii:

A tak sootno6enie dla sayta pod sankciami (Google Penguin):

Rekomendacii:

• kontroliruyte koli4estvo vxojdeniy ankora v ankor-liste, esli pozicii po zaprosu stoat na meste, vozmojno, pri4ina v drugix faktorax;
• proverayte raspredelenie stati4eskogo vesa v ramkax sayta, pri pravil'nom raspredelenii mnogie zaprosi viydut v TOP bez ispol'zovania ix vxojdeniy v ankor.

Dlina ankora v slovax

Krome sootno6enia ankorov vajna dlina ankora v slovax, ona takje ispol'zuetsa kak faktor dla opredelenia spamnogo ssilo4nogo profila (kosvenno eto podtverjdaet Madridskiy doklad ot Andeksa). Ne spamnie ssilo4nie profili soderjat preimu6estvenno odnoslovnie ankori. Spamnie – 2-x i 3-x slovnie.

Vikipedia

Spam

Dla 4istoti eksperimenta v ka4estve estestvennogo ssilo4nogo profila ispol'zovalas' Vikipedia, v ka4estve spamnogo – drugoy sayt, nazvanie kotorogo takje sostoalo iz odnogo slova i odnovremenno moglo ispol'zovat'sa kak na kirillice, tak i na latinice.

Dlina ankora v simvolax

Ne spamniy ssilo4niy profil'

Ssilo4niy profil' sayta, prodvigau6egosa 4erez Sape

Interesno to, 4to dla saytov, prodvigau6ixsa 4erez Sape ili 4erez agregatori, dlina ankora limitirovana na 100 simvolax (zna4enie bilo provereno eksperimental'no na 15 saytax). Dla estestvennogo ssilo4nogo profila ona ne limitirovana.

Rekomendacii:

• ne razme6ayte vse ssilki 4erez birji;
• ispol'zuyte dlinnie ankori.

Kommer4eskie ssilki

V zaklu4enii stat'i napomnu o Madridskom doklade Andeksa, kotoriy bil opublikovan e6ё v 2009 godu, no do six por ego tezisi ignoriruutsa bol'6instvom SEO specialistov.

Rassmotrim osnovnie momenti.

Algoritm pozvolaet s visokoy to4nost'u (95%) viavit' sayti prodau6ie i pokupau6ie ssilki.

Princip deystvia osnovan na algoritme HITTS.

1. Vvodatsa klassifikatori:

• SEO-Text – stepen' optimizirovannosti teksta ssilki;
• SEO-Topic – tematiki, naibolee xarakternie dla prodvigaemix saytov (v original'nom algoritme ukazano 22 tematiki);
• SEO-out – veroatnost' togo, 4to sayt torguet ssilkami;
• SEO-in – veroatnost' togo, 4to sayt prodvigaetsa s ispol'zovaniem pokupnix ssilok;
• SEO-link – veroatnost' togo, 4to ssilka platnaa.

2. Ras4ёt veroatnosti togo, 4to sayt torguet ssilkami:

SEOout = k1×AvgSEOin + k2×AvgSEOtext + k3×NTh + …

AvgSEOin – srednee zna4enie koli4estva ssilok s dannogo sayta

AvgSEOtext – srednee zna4enie SEO tekstov etix ssilok

NTh – koli4estvo tematik

3. Ras4ёt veroatnosti togo, 4to ssilka platnaa:

SEOlink = l1×SEOtext + l2×SEOin + l3×SEOout + …

Ki i Li – koefficienti, podbirautsa na osnove obu4au6ey vibornki.

Takim obrazom:

• te dokumenti, kotorie ssilautsa na mnojestvo dokumentov razli4nix tematik, veroatno mogut prodavat' ssilki;
• te dokumenti, kotorie polu4aut mnojestvo takix ssilok, veroatno, pokupaut ssilki.
  

Otdel'nogo vnimania zaslujivaet tot fakt, 4to ssilka, opredelaemaa kak kommer4eskaa po pokazatelu SEO Text, mojet daje ne soderjat' slov «kupit'», «prodaja» i t.p. Ona opredelaetsa po ob6im pokazatelam teksta ssilki.

Krome togo, poskol'ku u4itivaetsa tematika prodvigaemogo sayta, stanovitsa nevozmojnim (ili o4en' slojnim) prodvijenie saytov nekommer4eskix tematik s ispol'zovaniem arendnix ssilok.

Zaklu4enie

V kakoy-to moment SEO stalo sinonimom slova spam, sey4as, poiskovie mexanizmi strematsa k sokra6eniu spamnix metodov prodvijenia saytov. Bol'6instvo iz nix uje stali nevozmojnimi.

I, znaete, v etom net ni4ego ploxogo: s rostom ka4estva algoritmov antispama rastёt, SEO specialistam uje prixoditsa primenat' rad sredstv ispol'zuemix marketologami, tem samim povi6aa ka4estvo prodvigaemix saytov v celom.