|
|
|
|||||||
| Suchmaschinenoptimierung (SEO) Fragen und Diskussionen zum Thema Suchmaschinenoptimierung (OnPage/OffPage) |
 |
|
|
Themen-Optionen | Thema durchsuchen |
27.07.2010, 15:00
|
#1 |
|
Dreamworker Junior
Registriert seit: 10/2009
Beiträge: 32
|
Pro und Contra robots.txt
Hi,
wie wichtig erachtet ihr robots.txt? Ich habe mir mal die Richtlinien von Googles Webmasters angetan und beim "Crawler-Zugriff" kann man sich ja problemlos eine robots.txt erstellen lassen für seine Website. Vielerorts gehört "..kannste vergessen..." Zugreifen tun die Crawler ja sowieso, die robots.txt sagt nochmal explizit das sie es dürfen und man kann Sachen ausschließen... Ich würde hier mal gerne pro und contra zu robots.txt eröffnen... LG E |
|
|
|
27.07.2010, 18:30
|
#2 |
|
MODFATHER
Registriert seit: 01/2006
Ort: L.E. (Leipzig)
Beiträge: 2.296
|
AW: Pro und Contra robots.txt
Ich nutze die Date eigentlich nur zum sperren der Seite vor Robots. Ich habe ein paar Seiten via robots.txt komplett gesperrt und noch sind sie nirgendwo erfasst. Scheint also zu funktionieren
 HTML-Code:
# Ganze Site für alle Robots sperren User-agent: * Disallow: /
__________________
kaum macht man´s richtig, funktionierts! Gruß, Paul |
|
|
|
|
| Lesezeichen |
| Themen-Optionen | Thema durchsuchen |
|
|
Ähnliche Themen
|
||||
| Thema | Autor | Forum | Antworten | Letzter Beitrag |
| Bessere Zusammenarbeit in Unternehmen über Adobe Acrobat Connect Pro 7.5 | kaihawaii | Adobe Pressemitteilungen & News | 0 | 11.11.2009 11:57 |
| Adobe Acrobat 9 Pro erweitert Creative Suite 3.3 | kaihawaii | Adobe Pressemitteilungen & News | 0 | 03.06.2008 11:15 |
| Adobe Premiere Pro CS3 Delivers Industry-Leading Support for Tapeless Workflows | kaihawaii | Adobe Pressemitteilungen & News | 0 | 15.04.2008 14:48 |
| Adobe Delivers Previews of Pro Video Tools | kaihawaii | Adobe Pressemitteilungen & News | 0 | 18.04.2007 11:45 |
| LINK: Pro + Contra Flash-based Web | dogfood | Adobe Flash & OpenSWF | 0 | 02.04.2002 11:37 |
