← Conversa Geral

Traf de bots = bom PR?

Lida 4564 vezes

Offline

Miguel Lucas 
Elite
Mensagens 3619 Gostos 16
Feedback +14

Troféus totais: 35
Trófeus: (Ver todos)
Level 6 Windows User Linux User Mobile User Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Poll Starter

tenho um site que tem tipo por mes uma media de 6GB de trafego so em bots...isso deveria de significar um bom posicionamento nos motores de busca certo? e um bom pagerank certo?

mas isso não acontece =/
Offline

asturmas 
Administrador
Mensagens 19734 Gostos 50
Feedback +2

Troféus totais: 39
Trófeus: (Ver todos)
Mobile User Windows User Super Combination Combination Topic Starter 100 Poll Votes 50 Poll Votes 10 Poll Votes Poll Voter Poll Starter

Nos motores de busca sim agora bom pr nao pois o pr tem haver com o nº de links para o teu site em sites do msm tema
Offline

Santo 
Membro
Mensagens 1657 Gostos 4
Troféus totais: 31
Trófeus: (Ver todos)
Windows User Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Level 5 Level 4 Level 3 Level 2

O mais provavel é que esses bots sejam scrapers e afins que atingem o teu site e fazem download de tudo para uma base de dados.

Tenho um site que tem perto de 3500 paginas e o google + msn + yahoo e outros bots não bloqueados não chegam a atingir 500Mb por mês..

Já analisas-te os teus logs para saberes que bots te estão a usar o trafego?

Saudações
Offline

Miguel Lucas 
Elite
Mensagens 3619 Gostos 16
Feedback +14

Troféus totais: 35
Trófeus: (Ver todos)
Level 6 Windows User Linux User Mobile User Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Poll Starter

"O mais provavel é que esses bots sejam scrapers e afins que atingem o teu site e fazem download de tudo para uma base de dados. "

Isto é bom ou é mau?


Googlebot   9484   84.76 MB   07 Jun 2007 - 02:32
Yahoo Slurp   749   8.68 MB   07 Jun 2007 - 02:23
Unknown robot (identified by 'robot')   356   2.86 MB   05 Jun 2007 - 19:39
Internet Shinchakubin   266   1.61 MB   06 Jun 2007 - 10:57
MSNBot   97   3.73 MB   06 Jun 2007 - 16:07
MSNBot-media   13   185.17 KB   07 Jun 2007 - 01:50
Unknown robot (identified by 'crawl')   11   167.49 KB   06 Jun 2007 - 22:09
Unknown robot (identified by 'spider')   3   106.63 KB   06 Jun 2007 - 03:09
Alexa (IA Archiver)   3   144.55 KB   06 Jun 2007 - 12:17
Unknown robot (identified by 'bot/' or 'bot-')   2   55.58 KB   04 Jun 2007 - 19:03
Voyager
Offline

Santo 
Membro
Mensagens 1657 Gostos 4
Troféus totais: 31
Trófeus: (Ver todos)
Windows User Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Level 5 Level 4 Level 3 Level 2

Scrapers = Mau

Para veres donde vem os bots faz um whois ao IP...

Google, MSN, yahoo e uns quantos outros pertencem à categoria de "bons bots"
Offline

Miguel Lucas 
Elite
Mensagens 3619 Gostos 16
Feedback +14

Troféus totais: 35
Trófeus: (Ver todos)
Level 6 Windows User Linux User Mobile User Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Poll Starter

Identificar os bots csg..quando eles tiverem online csg ver o dominio do ip...

basta banir o ip?
Offline

anjo2 
Membro
Mensagens 3020 Gostos 0
Troféus totais: 31
Trófeus: (Ver todos)
Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Poll Starter Level 5 Level 4 Level 3 Level 2

cria um robots.txt e deixa só entrar os bots que queres ;)
Offline

Miguel Lucas 
Elite
Mensagens 3619 Gostos 16
Feedback +14

Troféus totais: 35
Trófeus: (Ver todos)
Level 6 Windows User Linux User Mobile User Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Poll Starter

hmm explica la com faço isso sff =/
Offline

Flash005 
Membro
Mensagens 1360 Gostos 0
Troféus totais: 33
Trófeus: (Ver todos)
Quick Poster Windows User Level 6 Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Level 5 Level 4

no robots no fun....
Offline

Miguel Lucas 
Elite
Mensagens 3619 Gostos 16
Feedback +14

Troféus totais: 35
Trófeus: (Ver todos)
Level 6 Windows User Linux User Mobile User Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Poll Starter

Citação de: "anjo2"
cria um robots.txt e deixa só entrar os bots que queres ;)



crio esse ficheiro e lá dentro ponho o que?
Offline

Santo 
Membro
Mensagens 1657 Gostos 4
Troféus totais: 31
Trófeus: (Ver todos)
Windows User Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Level 5 Level 4 Level 3 Level 2

Atenção que os bots vindos de bot.nets e scrappers não respeitam o robots.txt. A única forma de os banir é usar um script ou o file .htaccess
Offline

Miguel Lucas 
Elite
Mensagens 3619 Gostos 16
Feedback +14

Troféus totais: 35
Trófeus: (Ver todos)
Level 6 Windows User Linux User Mobile User Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Poll Starter

mas qual é a consequencia de ter estes bots a visitarem o site?
Offline

asturmas 
Administrador
Mensagens 19734 Gostos 50
Feedback +2

Troféus totais: 39
Trófeus: (Ver todos)
Mobile User Windows User Super Combination Combination Topic Starter 100 Poll Votes 50 Poll Votes 10 Poll Votes Poll Voter Poll Starter

Gastar trafego inutilmente
Offline

Flash005 
Membro
Mensagens 1360 Gostos 0
Troféus totais: 33
Trófeus: (Ver todos)
Quick Poster Windows User Level 6 Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Level 5 Level 4

Citação de: "asturmas"
Gastar trafego inutilmente



Inutilmente?!?



Será que tu sabes minimamente daquilo que falas?
Offline

Santo 
Membro
Mensagens 1657 Gostos 4
Troféus totais: 31
Trófeus: (Ver todos)
Windows User Super Combination Combination Topic Starter 10 Poll Votes Poll Voter Level 5 Level 4 Level 3 Level 2

Citação de: "Flash005"
Citação de: "asturmas"
Gastar trafego inutilmente



Inutilmente?!?



Será que tu sabes minimamente daquilo que falas?


Se o tráfego gerado realmente é devido a bot-nets ou scrappers então sim.. e gasto inutil de tráfego... Convém nestes casos ver bem os logs e fazer um trace aos IP's dos bots de modo a certificar se o tráfego é realmente de interesse ou não.