Få robotar att söka igenom forumet??

[daniel234]

Jag driver forumet http://www.foretagande.se . Och jag tycker det verkar som om roboarna inte kommer åt trådarna vilket gör att de inte syns på sökmotorerna.

Vad kan man göra åt detta? Har försökt ändra lite i metataggarna men det hjälper inte.

Tacksam för tips!

[Holger]

Nja, jag tror att du endast kan UTESLUTA att de når trådarna genom att göra inställningar i robots.txt
Om du inte har en robots.txt-fil så kommer robotarna åt allt.

En sak som kan hända (även om du inte har ngn robots.txt) är att robotarna fastnar i länkar som kommer först i koden, t.ex. profile.php, login.php. Dessa länkar kan bara följas om man loggar in. Kan hända att robotarna "tröttnar" där och lämnar sajten sedan.

Prova med att skapa en robots.txt-fil och fyll den med följande information:

Kod: Markera allt

User-agent: * 
Disallow: /admin/ 
Disallow: /db/ 
Disallow: /files/ 
Disallow: /images/ 
Disallow: /includes/ 
Disallow: /language/ 
Disallow: /mods/ 
Disallow: /templates/ 
Disallow: /common.php 
Disallow: /config.php 
Disallow: /faq.php 
Disallow: /groupcp.php 
Disallow: /groupmsg.php 
Disallow: /login.php 
Disallow: /memberlist.php 
Disallow: /modcp.php 

Filen måste ligga i ROOTen på din server.


Du kan lägga till fler om du har motsvarande mappar.

[Kail]

Din sajt är indexerad av Google. Gör en site search ser du.

Du borde använda dig av AdSense, och göra dig av med flashreklamen, sådant är irriterande.

[daniel234]

Din sajt är indexerad av Google. Gör en site search ser du.

Du borde använda dig av AdSense, och göra dig av med flashreklamen, sådant är irriterande.

Jo jag vet att sidan är indexerad av google.se och gör man en siteserarch så hittar man inte många sidor. Jag tycker det bara verkar som att robotarna kommer åt informationen i overall_header och footer. Men jag kanske har fel.

Använder mig redan av adsense...inne i själva trådarna.

/Daniel

[daniel234]

Prova med att skapa en robots.txt-fil och fyll den med följande information:

Kod: Markera allt

User-agent: * 
Disallow: /admin/ 
Disallow: /db/ 
Disallow: /files/ 
Disallow: /images/ 
Disallow: /includes/ 
Disallow: /language/ 
Disallow: /mods/ 
Disallow: /templates/ 
Disallow: /common.php 
Disallow: /config.php 
Disallow: /faq.php 
Disallow: /groupcp.php 
Disallow: /groupmsg.php 
Disallow: /login.php 
Disallow: /memberlist.php 
Disallow: /modcp.php 

Filen måste ligga i ROOTen på din server.


Du kan lägga till fler om du har motsvarande mappar.

Har lagt in filen nu men nu verkar det vara någon robot på forumet nästan hela tiden och enligt administrationspanelen så kollar den profilen och läser meddelande och skriver inlägg. Konstigt!

[Holger]

Javisst, så ser det ut då. Då verkar det ju funka.

Det där med att den skriver inlägg visas bara för att den naturligtvis följer alla länkar, även den som leder till Nytt inlägg eller Svar på inlägg.

[daniel234]

Ok! Men det kanske inte är så bra om den kolla personliga meddelanden och lägger ut på sökmotorn?

Sen är roboten där hela tiden verkar det som? Vet itne om et är bra eller dålig.

/Daniel

[Holger]

Du, den kan inte logga in, det måste den göra för att kunna läsa PM

I början är den där länge och ofta ... det ger sig.

Installera Google-besöks-räknaren:
http://www.phpbbhacks.com/download/1864
Hos mig har Google varit nästan 20.000 gånger

[WickeD]

Hej!

Jag har lagt till en robots.txt hos mig och undrar om vad som ska stå i det txt dokumentet?

Ska det stå som ni har skrivit ovan eller ska det vara några Allow: / med också?

Det ni skrivit ovan, är det så att det passar min sida med, eller ska jag ha annat innehåll i mitt txt dokument?

Vore tacksam för hjälp med detta.

[WickeD]

Gör det någon skada att jag har lagt in denna robots.txt när jag använder mig av sitemap Mod nu?

[Holger]

Nej, det är helt ok att ha båda. Google SKA ju inte hitta /admin/

[WickeD]

Nä det är så sant det! Tack!

[kamarad]

Du, den kan inte logga in, det måste den göra för att kunna läsa PM

I början är den där länge och ofta ... det ger sig.

Installera Google-besöks-räknaren:
http://www.phpbbhacks.com/download/1864
Hos mig har Google varit nästan 20.000 gånger

Jag har installerat den här mod och får bara en rad i index sidan som den här :

Google has come 1 times on this board since september 2003

Den är så här hela tiden och kan det vara fel med mod/installation eller att google kommer inte på besök ?

[Holger]

Det verkar som om den inte hittar tillbaka till dig ...

[Gugge]

Hur funkar detta scriptet/text fil? hoppar den över dessa sidor av välvilja om man har skrivit in dem eller? för i så fall så skulle ju nyreggistreringssidan vara med där + mailformulär och sånt där man riskerar att få in skräp? eller funkar det inte så?