DevProTalk

Forumi IT profesionalaca
web development, web design, e-business, SEO


Idite nazad   DevProTalk > Poslovanje, održavanje i marketing > Marketing i SEO
Želite da se reklamirate ekskluzivno na ovoj poziciji? Javite se

Marketing i SEO Marketing tehnike i Search Engine Optimization

Odgovori
 
Alati teme Način prikaza
Staro 23. 03. 2006.   #1
Pedja
Predrag Supurović
Grand Master
 
Datum učlanjenja: 24.01.2006
Lokacija: Užice
Poruke: 791
Hvala: 3
200 "Hvala" u 12 poruka
Pedja is on a distinguished roadPedja is on a distinguished roadPedja is on a distinguished road
Default Kako se borite protiv pretrazivaca?

Nesumnjivo je da nam je svima cilj da sajtovi budu sto popularniji, poseceniji i da nam je vazno da se sto bolje kotiraju na pretrazivacima.

Medjutim, ve neko vreme unazad, pretrazivaci su poceli cudno da se ponasaju. Indeksiraju sajtove cesto, a ako se radi o dinamickim sadrzajima umeju da upadnu u petlje pa jedan isti sadrzaj indeksiraju vise puta.

Rezultat je da je osetno povecana potrosnja protoka na sajtovima. Ovo je posebno primetno kod sajtova koji imaju veliki obim, odnosno veliki broj dokumenata (portali, forumi i slicno).

Ovo se desava sa Google, MSN, Alexom, pa cak i Pogotkom.

Jeste li imali ovakve probleme i kako izlazite sa tim na kraj?

Meni je vecpostala normalna procedura da za svaki sajtunapred pravi robots.txt koji ogranicava indeksiranje robotim samo na ono sto je zaista neophodno indeksirati, ali je to prilicno neefikasno jer cilj jeste da ipak skoro sav sadrzaj bude indeksiran.

Probao sam i da kroz robots smanim frekvenciju indeksiranja, bar kod staticnijih sajtova, medjutim, izgleda da pretrazivaci za te instrukcije mnogo ne mare (Crawl-delay).

Mozda je dobar nacin da se pravi sitemap a da se pretrazivacima kroz robots.txt zabrani da ista indeksiraju na svoju ruku, vec da samo koriste sitemap?

Poslednja izmena od Pedja : 23. 03. 2006. u 11:51.
Pedja je offline   Odgovorite uz citat
Staro 23. 03. 2006.   #2
zextra
Boris
Grand Master
 
Avatar zextra
 
Datum učlanjenja: 01.12.2005
Lokacija: Novi Sad
Poruke: 775
Hvala: 5
156 "Hvala" u 2 poruka
zextra is on a distinguished roadzextra is on a distinguished road
Default

Sto ne bi napravio robots.txt da bude dinamicki (registrujes .txt kao php skriptu), pa kontrolises ko kad moze da dodje na koji deo sajta?
__________________
"It’s important to have goals when you pet. Otherwise you’re just rubbing another mammal for no reason." - Scott Adams
zextra je offline   Odgovorite uz citat
Staro 24. 03. 2006.   #3
cvele
Banned
Knowledge base
 
Avatar cvele
 
Datum učlanjenja: 01.07.2005
Poruke: 1.598
Hvala: 206
140 "Hvala" u 89 poruka
cvele ima spektakularnu aurucvele ima spektakularnu auru
Default

mod_rewrite... pogledaj temu iznad ove
cvele je offline   Odgovorite uz citat
Staro 24. 03. 2006.   #4
Pedja
Predrag Supurović
Grand Master
 
Datum učlanjenja: 24.01.2006
Lokacija: Užice
Poruke: 791
Hvala: 3
200 "Hvala" u 12 poruka
Pedja is on a distinguished roadPedja is on a distinguished roadPedja is on a distinguished road
Default

Citat:
Originalno napisao zextra
Sto ne bi napravio robots.txt da bude dinamicki (registrujes .txt kao php skriptu), pa kontrolises ko kad moze da dodje na koji deo sajta?
To moze samo da odmogne, jer ako pretrazivac dodje na sajt a zabranjen mu ej pristup, to deluje kontraproduktivno.


Citat:
Originalno napisao cvele
mod_rewrite... pogledaj temu iznad ove
Na koji nacin mod_rewrite moze da pomogne?
Pedja je offline   Odgovorite uz citat
Staro 24. 03. 2006.   #5
ivanhoe
Ivan Dilber
Sir Write-a-Lot
 
Avatar ivanhoe
 
Datum učlanjenja: 18.10.2005
Lokacija: Bgd
Poruke: 5.320
Hvala: 104
2.344 "Hvala" u 583 poruka
ivanhoe je ime poznato svimaivanhoe je ime poznato svimaivanhoe je ime poznato svimaivanhoe je ime poznato svimaivanhoe je ime poznato svimaivanhoe je ime poznato svimaivanhoe je ime poznato svimaivanhoe je ime poznato svimaivanhoe je ime poznato svimaivanhoe je ime poznato svimaivanhoe je ime poznato svima
Pošaljite poruku preko Skype™ za ivanhoe
Default

Citat:
Originalno napisao Pedja
Na koji nacin mod_rewrite moze da pomogne?
pa kazes da se spajderi zbunjuju oko dinamickih url-ova, pa ucitavaju istu stranu vise puta (sto uzgred moze da ti donese negativne poene za kloniranje sadrzaja)...sakri sve dinamicke urlove da izgledaju lepo pomocu mod_rewrite i nemas taj problem...

dodatno google-u mozes da ponudis sitemap.xml fajl, a za vecinu robota mozes da koristis slicne tehnike kao kod rada sa cache-om, znaci da koristis Last-modified i If-Modified-Since headere da bi sprecio spajder da ucitava strane koje se nisu promenile..

A mozes i da uzmes hosting sa vecim protokom, sto mi se cini kao lakse resenje
__________________
Leadership is the art of getting people to want to do what you know must be done.
ivanhoe je offline   Odgovorite uz citat
Staro 24. 03. 2006.   #6
Pedja
Predrag Supurović
Grand Master
 
Datum učlanjenja: 24.01.2006
Lokacija: Užice
Poruke: 791
Hvala: 3
200 "Hvala" u 12 poruka
Pedja is on a distinguished roadPedja is on a distinguished roadPedja is on a distinguished road
Default

Problem je sto se ovo desava i sa recimo forumom i sa staticnim sajtom (bukvalno je 90% sadrzaja cist HTML).

Niej problem hosting, nego sto je ovo postala cesta pojava i primecujem da skoro svaki veci sajt ima slican problem - pretrazivaci prave mnogo veci protok nego stvarni korisnici.
Pedja je offline   Odgovorite uz citat
Staro 24. 03. 2006.   #7
cvele
Banned
Knowledge base
 
Avatar cvele
 
Datum učlanjenja: 01.07.2005
Poruke: 1.598
Hvala: 206
140 "Hvala" u 89 poruka
cvele ima spektakularnu aurucvele ima spektakularnu auru
Default

ako imas veliki sajt to znaci da ti nije problem da platis flat hosting tako da zaista nevidim problem u svemu ovome

ivanhoe je objasnio kako mod_rewrite moze da pomogne
cvele je offline   Odgovorite uz citat
Staro 03. 04. 2006.   #8
sirNemanjapro
Banned
Expert
 
Datum učlanjenja: 31.03.2006
Lokacija: Trnava, Čačak
Poruke: 464
Hvala: 0
0 "Hvala" u 0 poruka
sirNemanjapro je ponekada pravio frku ranije
Default

Jel nije problem neko da postuje robots.txt (sa disalow na nekim stranama) i sitemap.xml?
sirNemanjapro je offline   Odgovorite uz citat
Odgovori


Alati teme
Način prikaza

Pravila pisanja
Možete ne započinjati nove teme
Možete ne slati odgovore
Možete ne slati priloge
Možete ne izmeniti svoje poruke
vB kôd je Uključen
Smajliji su Uključen
[IMG] kod je Uključen
HTML kôd je Isključen
Pogledajte forum

Slične teme
Tema Početna poruka teme Forum Odgovori Poslednja poruka
Šta i kako protiv muva SSpin Opušteno 31 26. 10. 2010. 12:36
Nagli pad posete sa Google pretrazivaca Deki80 Marketing i SEO 12 24. 11. 2008. 18:46
.BIZ domen - za i protiv ? glaspodrinja.com e-Business 0 24. 11. 2007. 20:50
Koliki je smisao pretrazivaca danas? Pedja Marketing i SEO 30 19. 06. 2006. 22:05


Vreme je GMT +2. Trenutno vreme je 17:48.


Powered by vBulletin® Verzija 3.6.8
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.
Copyright © DevProTalk. All Rights Reserved.
Mišljenja, saveti, izjave, ponude ili druge informacije ili sadržaji nastali na Sajtu su vlasništvo onoga ko ih je kreirao, a ne DevProTalk.com, tako da ne morate da se oslanjate na njih.
Autori poruka su jedini odgovorni za ovakve sadržaje. DevProTalk.com ne garantuje tačnost, kompletnost ili upotrebnu vrednost informacija, stavova, saveta ili datih izjava. Ne postoje uslovi pod kojima bi mi bili odgovorni za štetu ili gubitak koji je posledica bilo čijeg oslanjanja na nepouzdane informacije, ili bilo kakve informacije nastale kroz komunikaciju između registrovanih članova.
Web sajt može sadržavati linkove na druge web sajtove na Internetu ili neke druge sadržaje. Ne kontrolišemo niti podržavamo te druge web sajtove, niti smo pregledali bilo kakve sadržaje na takvim sajtovima. Mi nećemo biti odgovorni za legalnost, tačnost ili prikladnost bilo kog sadržaja, oglasa, proizvoda, usluga ili informacije lociranim na ili distribuiranih kroz druge web sajtove, niti za bilo kakvu štetu nastalu kao posledica takvih informacija. DevProTalk.com drži i čuva druga prava vlasništva na web sajtu. Web sajt sadrže materijale zaštićene copyright-om, zaštitne znakove i druge informacije o pravu vlasništva ili softver. Članovi mogu poslatu informacije zaštićene pravima vlasništva njihovih nosilaca i ona ostaju zaštićena bez obzira da li su oni koji prenose te informacije to naveli ili ne. Osim informacija koje su u javnom vlasništvu ili za koje dobijete dozvolu, nemate pravo da kopirate, modifikujete ili na bilo koji način menjate, objavljujete, prenosite, distribuirate, izvršavate, prikazujete ili prodajte bilo koju informaciju zaštićenu pravima vlasništva. Slanjem informacija ili sadržaja na bilo koji deo DevProTalk.com, Vi automatski dozvoljavate i predstavljate garanciju da imate pravo da dozvolite DevProTalk.com ili članovima DevProTalk.com bespovratnu, kontinualnu, neograničenu, globalnu dozvolu da koriste, kopiraju, izvršavaju, prikazuju i distribuiraju takve informacije i sadržaje i da iz takvih sadžaja koriste bilo koji deo u bilo koje svrhe, kao i pravo i dozvolu da koriste gore navedene sadržaje. Svi zaštitni znakovi (trademarks), logotipi, oznake usluga, firme ili imena proizvoda koji se pominju na ovom web sajtu su vlasništvo kojim raspolažu njihovi vlasnici.