Iskalniki ali t.i. Search Engines (google, yahoo, MSN, najdi.si itd) za ugotavljanje avtoritativnosti nekega spletišča in njegove uvrstitve med rezultate iskanja uporabljajo različne programe imenovane Roboti oz. Crawlerji.
Njihovo delo je, da pridejo na določeno spletišče in »preberejo« vsebino le tega. Do posameznih podstrani dostopajo preko povezav znotraj spletišča in pregledajo tudi te. V naslednji fazi, ti Roboti zbrane podatke posredujejo v indeks iskalnika, kjer poseben program obdela zbrane podatke (pregleda kolikokrat se v vsebini pojavlja določena beseda, primerja besede z besedami zapisanimi v naslovu teksta itd.) uvrsti v glavni indeks iskalnika in stran tudi kategorizira glede na besede in sorodne besede uporabljane v tekstu (primer: pes, ovratnica, povodec so besede ki spadajo v kategorijo: živali, hišni ljubljenci, šolanje, psi itd) in s tem omogoči, da se stran prikaže v rezultatih iskanja, ko nek uporabnik išče podatke z uporabo klučnih besed ali fraz.
Obenem nek drug program primerja podobnost teksta strani ki jo indeksira s tekstom strani, ki so že prisotne v indeksu. Opozoriti je potrebno, da je indeksacija dinamičen proces, ki se dogaja redno, kar pomeni, da roboti redno obiskujejo spletišča, posredujejo podatke v indeks, tam pa se podatki ažurirajo, na novo obdelujejo itd.
Ko pri obdelavi program zazna podobnost dveh strani, lahko glede na podobnost tudi ugotovi, če ne gre morda za podvojeno vsebino in posledično, ugotovi, da gre morda tudi za plagiat. Točen algoritem po katerem se o tem odloča ta program, ni znan ker gre za poslovno skrivnost posameznih iskalnikov. Vemo pa, da največji iskalniki že uporabljajo zelo napredne algoritme, ki temeljijo na semantični obdelavi podatkov (celotnih fraz in besednih zvez, celo stavkov), kar jim omogoča zelo precizno določiti kdaj gre za Dup. Content in kdaj gre le za uporabo besed ki so značilne za neko področje (fizika, gradbeništvo, medicina zgodovina itd.).
V angleško govorečem svetu obstajajo tudi programi, ki uporabniku (lastniku nekega spletišča ali avtorju tekstov ki so objavljeni na spletu) omogočajo iskanje strani oziroma tekstov, ki so podobni in s tem omogočajo odkrivanje kršiteljev avtorskih pravic.
Obenem obstajajo tudi programi, ki primerjajo tekste in v procentih določijo podobnost med njimi. V Sloveniji za naš jezik, takšni programi žal ne obstajajo tako da lahko matematično zgolj približno določimo procent podobnosti spletišč. Seveda smo s tem prisiljeni, da oceno opravimo »ročno« oziroma z osebnim angažmajem.
Ko je obdelava zbranih podatkov končana, se na osnovi algoritma, iskalnik odloči, ali bo neko stran uvrstil v glavni indeks, jo »spregledal« ali pa celo označil za neprimerno in v bodoče nanjo ne bo pošiljal Robotov, da jo pregledajo.
To se seveda ne zgodi takoj ampak se stran še nekajkrat obišče, potem pa pade »končna sodba« ki je lahko tudi »dokončna«. Slednje pomeni, da neka stran permanentno izgine iz rezultatov iskanja oziroma se v le-te nikoli ne uvrsti. Posledica je, da je stran takorekoč mrtva, saj lahko do nje pridejo obiskovalci zgolj preko klikov na povezave ki kažejo na to stran z drugih strani (npr iz imenikov kamor lastnik spletišča sam vpiše povezavo: primer je Matkurja.com). Glede obiska, je torej spletišče omejeno zgolj na t.i. Direct Traffic, ne pa na Search Traffic. In ker vemo, da je obiskovalcev ki za iskanje uporabljajo iskalnike mnogo več kot tistih, ki do spletišč dostopajo s klikanjem povezav objavljenih na dugih spletiščih (imeniki, sorodne strani ki imajo objavljene povezave na »konkurenco« itd.), pomeni izguba tega dela obiskovalcev veliko škodo za spletišče.
Za gospodarski subjekt, ki izrablja internetni medij za promocijo ali pa celo posluje preko tega medija (internetna prodajalna na primer), to pomeni tudi izpad dohodka, torej gospodarsko škodo. Na žalost se prevečkrat zgodi, da je penalizirano spletišče z originalno vsebino, ne pa plagiat. Seveda je rešitev možna tako da oškodovanec osebno kontaktira upravitelje iskalnika, ki potem individualno obravnavajo zadevo in ročno popravijo vnos v indeks, vendar je takšno reševanje zapleta dostikrat dolgotrajno in zamudno, velikokrat pa tudi neuspešno.
Tags: dvojna vsebina, internetni marketing, podvojena vsebina, seo


March 22nd, 2012 at 11:20 pm
… [Trackback] …
[...] Read More here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
March 24th, 2012 at 9:48 am
… [Trackback] …
[...] Read More: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
March 26th, 2012 at 11:57 am
… [Trackback] …
[...] Read More Infos here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
March 26th, 2012 at 4:55 pm
… [Trackback] …
[...] Read More: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
March 27th, 2012 at 10:08 am
… [Trackback] …
[...] There you will find 76287 more Infos: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
March 29th, 2012 at 7:31 pm
… [Trackback] …
[...] Read More Infos here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
March 31st, 2012 at 4:20 am
… [Trackback] …
[...] Read More Infos here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
March 31st, 2012 at 2:45 pm
… [Trackback] …
[...] Read More: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 1st, 2012 at 12:42 am
… [Trackback] …
[...] Informations on that Topic: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 1st, 2012 at 8:41 am
… [Trackback] …
[...] Read More Infos here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 1st, 2012 at 11:38 am
… [Trackback] …
[...] Find More Informations here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 1st, 2012 at 1:44 pm
… [Trackback] …
[...] Read More here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 4th, 2012 at 1:02 am
… [Trackback] …
[...] Read More Infos here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 4th, 2012 at 9:34 am
… [Trackback] …
[...] Informations on that Topic: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 4th, 2012 at 10:44 am
… [Trackback] …
[...] Read More: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 4th, 2012 at 2:49 pm
… [Trackback] …
[...] Informations on that Topic: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 5th, 2012 at 3:16 pm
… [Trackback] …
[...] Read More here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 5th, 2012 at 3:49 pm
… [Trackback] …
[...] Read More: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 8th, 2012 at 7:37 am
… [Trackback] …
[...] There you will find 64194 more Infos: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 9th, 2012 at 3:53 am
… [Trackback] …
[...] Read More here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 10th, 2012 at 11:20 am
… [Trackback] …
[...] Informations on that Topic: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 10th, 2012 at 11:39 am
… [Trackback] …
[...] Informations on that Topic: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 11th, 2012 at 11:35 am
… [Trackback] …
[...] There you will find 73455 more Infos: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 11th, 2012 at 6:27 pm
… [Trackback] …
[...] Read More: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 12th, 2012 at 4:47 pm
… [Trackback] …
[...] Read More here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 14th, 2012 at 5:11 am
… [Trackback] …
[...] Informations on that Topic: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 15th, 2012 at 12:51 am
… [Trackback] …
[...] Read More: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 17th, 2012 at 12:29 am
… [Trackback] …
[...] Find More Informations here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 17th, 2012 at 11:49 am
… [Trackback] …
[...] Informations on that Topic: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 18th, 2012 at 6:52 pm
Trackbacking…..
Had to share this!…
April 19th, 2012 at 8:19 pm
… [Trackback] …
[...] Informations on that Topic: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 22nd, 2012 at 1:26 am
… [Trackback] …
[...] Informations on that Topic: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 24th, 2012 at 4:44 pm
… [Trackback] …
[...] Read More: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 25th, 2012 at 12:24 pm
… [Trackback] …
[...] There you will find 65581 more Infos: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 25th, 2012 at 6:07 pm
… [Trackback] …
[...] Read More here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 26th, 2012 at 1:26 pm
… [Trackback] …
[...] There you will find 67358 more Infos: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 26th, 2012 at 4:17 pm
… [Trackback] …
[...] Read More: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 26th, 2012 at 4:34 pm
… [Trackback] …
[...] Read More Infos here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 27th, 2012 at 1:24 am
… [Trackback] …
[...] Read More here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 27th, 2012 at 3:14 am
… [Trackback] …
[...] Infos to that Topic: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 28th, 2012 at 11:35 am
side effects of low vitamin d…
I think other website proprietors should take this website as an model, very clean and fantastic user friendly style and design, let alone the content. You’re an expert in this topic!…
April 28th, 2012 at 10:36 pm
… [Trackback] …
[...] Informations on that Topic: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 29th, 2012 at 2:43 am
… [Trackback] …
[...] Read More here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 29th, 2012 at 9:11 am
best online dating…
Thanks for the sensible critique. Me and my neighbor were just preparing to do a little research on this. We got a grab a book from our local library but I think I learned more from this post. I’m very glad to see such wonderful information being sha…
April 29th, 2012 at 9:16 am
dating club…
Undeniably consider that which you said. Your favorite justification seemed to be on the web the simplest factor to take into accout of. I say to you, I definitely get irked at the same time as other people think about issues that they plainly do not r…
April 29th, 2012 at 11:38 am
… [Trackback] …
[...] Read More: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
April 29th, 2012 at 3:19 pm
… [Trackback] …
[...] Read More here: media-marketing.si/blog/2008/05/25/podvojena-vsebina-in-mozne-posledice-za-penalizacijo-spletisc-v-iskalnikih/ [...] …
May 1st, 2012 at 9:32 am
dating chat…
You are a very clever person!…
May 6th, 2012 at 7:54 am
dating tips…
I like what you guys are up too. Such smart work and reporting! Keep up the excellent works guys I๏ฟฝve incorporated you guys to my blogroll. I think it will improve the value of my website :)…