Sida 1 av 2

Få robotar att söka igenom forumet??

Postat: 2005-09-02 10:42
av daniel234
Jag driver forumet http://www.foretagande.se . Och jag tycker det verkar som om roboarna inte kommer åt trådarna vilket gör att de inte syns på sökmotorerna.

Vad kan man göra åt detta? Har försökt ändra lite i metataggarna men det hjälper inte.

Tacksam för tips!

Postat: 2005-09-02 14:32
av Holger
Nja, jag tror att du endast kan UTESLUTA att de når trådarna genom att göra inställningar i robots.txt
Om du inte har en robots.txt-fil så kommer robotarna åt allt.

En sak som kan hända (även om du inte har ngn robots.txt) är att robotarna fastnar i länkar som kommer först i koden, t.ex. profile.php, login.php. Dessa länkar kan bara följas om man loggar in. Kan hända att robotarna "tröttnar" där och lämnar sajten sedan.

Prova med att skapa en robots.txt-fil och fyll den med följande information:

Kod: Markera allt

User-agent: * 
Disallow: /admin/ 
Disallow: /db/ 
Disallow: /files/ 
Disallow: /images/ 
Disallow: /includes/ 
Disallow: /language/ 
Disallow: /mods/ 
Disallow: /templates/ 
Disallow: /common.php 
Disallow: /config.php 
Disallow: /faq.php 
Disallow: /groupcp.php 
Disallow: /groupmsg.php 
Disallow: /login.php 
Disallow: /memberlist.php 
Disallow: /modcp.php 
Filen måste ligga i ROOTen på din server.


Du kan lägga till fler om du har motsvarande mappar.

Postat: 2005-09-02 14:58
av Kail
Din sajt är indexerad av Google. Gör en site search ser du.

Du borde använda dig av AdSense, och göra dig av med flashreklamen, sådant är irriterande.

Postat: 2005-09-02 15:36
av daniel234
Kail skrev:Din sajt är indexerad av Google. Gör en site search ser du.

Du borde använda dig av AdSense, och göra dig av med flashreklamen, sådant är irriterande.
Jo jag vet att sidan är indexerad av google.se och gör man en siteserarch så hittar man inte många sidor. Jag tycker det bara verkar som att robotarna kommer åt informationen i overall_header och footer. Men jag kanske har fel.

Använder mig redan av adsense...inne i själva trådarna.

/Daniel

Postat: 2005-09-05 10:55
av daniel234
Holger skrev:
Prova med att skapa en robots.txt-fil och fyll den med följande information:

Kod: Markera allt

User-agent: * 
Disallow: /admin/ 
Disallow: /db/ 
Disallow: /files/ 
Disallow: /images/ 
Disallow: /includes/ 
Disallow: /language/ 
Disallow: /mods/ 
Disallow: /templates/ 
Disallow: /common.php 
Disallow: /config.php 
Disallow: /faq.php 
Disallow: /groupcp.php 
Disallow: /groupmsg.php 
Disallow: /login.php 
Disallow: /memberlist.php 
Disallow: /modcp.php 
Filen måste ligga i ROOTen på din server.


Du kan lägga till fler om du har motsvarande mappar.
Har lagt in filen nu men nu verkar det vara någon robot på forumet nästan hela tiden och enligt administrationspanelen så kollar den profilen och läser meddelande och skriver inlägg. Konstigt!

Postat: 2005-09-05 11:19
av Holger
Javisst, så ser det ut då. Då verkar det ju funka.

Det där med att den skriver inlägg visas bara för att den naturligtvis följer alla länkar, även den som leder till Nytt inlägg eller Svar på inlägg.

Postat: 2005-09-05 12:26
av daniel234
Ok! Men det kanske inte är så bra om den kolla personliga meddelanden och lägger ut på sökmotorn?

Sen är roboten där hela tiden verkar det som? Vet itne om et är bra eller dålig.

/Daniel

Postat: 2005-09-05 12:32
av Holger
Du, den kan inte logga in, det måste den göra för att kunna läsa PM :!:

I början är den där länge och ofta ... det ger sig.

Installera Google-besöks-räknaren:
http://www.phpbbhacks.com/download/1864
Hos mig har Google varit nästan 20.000 gånger

Postat: 2006-01-02 09:29
av WickeD
Hej!

Jag har lagt till en robots.txt hos mig och undrar om vad som ska stå i det txt dokumentet?

Ska det stå som ni har skrivit ovan eller ska det vara några Allow: / med också?

Det ni skrivit ovan, är det så att det passar min sida med, eller ska jag ha annat innehåll i mitt txt dokument?

Vore tacksam för hjälp med detta.

Postat: 2006-01-05 10:42
av WickeD
Gör det någon skada att jag har lagt in denna robots.txt när jag använder mig av sitemap Mod nu?

Postat: 2006-01-05 10:51
av Holger
Nej, det är helt ok att ha båda. Google SKA ju inte hitta /admin/

Postat: 2006-01-05 11:00
av WickeD
Nä det är så sant det! :D Tack!

Postat: 2006-02-06 12:54
av kamarad
Holger skrev:Du, den kan inte logga in, det måste den göra för att kunna läsa PM :!:

I början är den där länge och ofta ... det ger sig.

Installera Google-besöks-räknaren:
http://www.phpbbhacks.com/download/1864
Hos mig har Google varit nästan 20.000 gånger
Jag har installerat den här mod och får bara en rad i index sidan som den här :

Google has come 1 times on this board since september 2003

Den är så här hela tiden och kan det vara fel med mod/installation eller att google kommer inte på besök ? :?

Postat: 2006-02-06 13:03
av Holger
Det verkar som om den inte hittar tillbaka till dig ...

Postat: 2006-03-04 13:40
av Gugge
Hur funkar detta scriptet/text fil? hoppar den över dessa sidor av välvilja om man har skrivit in dem eller? för i så fall så skulle ju nyreggistreringssidan vara med där + mailformulär och sånt där man riskerar att få in skräp? eller funkar det inte så?