http://wp-danmark.dk/forum/topic/hvordan-ser-jeres-robotstxt-ud WordPress DK Forum Topic: Hvordan ser jeres robots.txt ud? da-DK Sun, 18 Oct 2026 03:18:02 +0000 http://bbpress.org/?v=1.0.1 q http://wp-danmark.dk/forum/search.php http://wp-danmark.dk/forum/topic/hvordan-ser-jeres-robotstxt-ud#post-43705 fre, 11 jan 2013 18:07:48 +0000 Claus Møller 43705@http://wp-danmark.dk/forum/ <p>Takker mange gange</p> <p>-det giver mening. </p> http://wp-danmark.dk/forum/topic/hvordan-ser-jeres-robotstxt-ud#post-43703 fre, 11 jan 2013 17:53:42 +0000 Jesper Jarlskov 43703@http://wp-danmark.dk/forum/ <p>WordPress laver som default en arkivside for hver af dine kategorier. Dvs. en side der viser dine sidste 10 indlæg, ligesom din forside, bare kun med indlæg fra en enkelt kategori. Det kan give DC problemer, især hvis 1 af disse 3 kriterier er opfyldt:<br /> - Du skriver meget korte indlæg (det meste af indlægget vises på kategorisiden)<br /> - Du har meget lange excerpts (same)<br /> - Du viser hele indlæg på kategorisiden, i stedet for excerts.</p> <p>Kategorisider kan i sig selv give problemer, men jo flere af ovenstående krav du opfylder, jo større er chancen for problemer. </p> http://wp-danmark.dk/forum/topic/hvordan-ser-jeres-robotstxt-ud#post-43701 fre, 11 jan 2013 17:16:28 +0000 Claus Møller 43701@http://wp-danmark.dk/forum/ <p>Det lyder smart.</p> <p>Hvordan er det at duplicate content opstår mht f.eks. kategorier ?</p> <p>(jeg forestiller mig at teksten kun ligger ét sted, men at den selvfølgelig kan tilgåes fra flere links - altså fra tagcloud og kategorioversigt) </p> http://wp-danmark.dk/forum/topic/hvordan-ser-jeres-robotstxt-ud#post-43700 fre, 11 jan 2013 17:10:00 +0000 Jesper Jarlskov 43700@http://wp-danmark.dk/forum/ <p>Yoast SEO plugin har en setting til at sætte noindex på dine tags/category/archive sider. Det vil gøre at Google ikke gemmer indholdet af disse sider i sit index, og det vil dermed ikke være pga. disse at du evt. vil opleve duplicate content. </p> http://wp-danmark.dk/forum/topic/hvordan-ser-jeres-robotstxt-ud#post-43695 fre, 11 jan 2013 16:21:47 +0000 Claus Møller 43695@http://wp-danmark.dk/forum/ <p>Også aktuelt mht denne tråd:<br /> <a href="http://wp-danmark.dk/forum/topic/blokerede-webadresser">blokerede-webadresser</a></p> <p>I Wordpress 3 Search Engine Optimization (forlaget PACKT publishing) anbefaler man denne robots.txt:</p> <p>User-agent: *</p> <p>Disallow: /cgi-bin<br /> Disallow: /wp-admin<br /> Disallow: /wp-includes<br /> Disallow: /wp-content/plugins<br /> Disallow: /wp-content/cache<br /> Disallow: /wp-content/themes<br /> Disallow: /trackback<br /> Disallow: /comments<br /> Disallow: /category/*/*<br /> Disallow: /tag/<br /> Disallow: */trackback<br /> Disallow: */comments</p> <p>Hvis man ikke vil have indexeret gamle sider kan man tilføje:<br /> Disallow: /2006/<br /> Disallow: /2007/<br /> (altså årstallene)</p> <p>Hvis man vil afvise "e-mail harvesting" og "worthless search engines" kan man tilføje:</p> <p>User-agent: Sitesnagger<br /> Disallow: /<br /> User-agent: Webstripper<br /> Disallow: /</p> <p>-------<br /> (spørgsmålet er om de adlyder) </p> http://wp-danmark.dk/forum/topic/hvordan-ser-jeres-robotstxt-ud#post-23145 fre, 28 jan 2011 18:27:39 +0000 Techwork 23145@http://wp-danmark.dk/forum/ <p>Hejsa</p> <p>Hvis jeg skriver site:www.techwork.dk i Googles søgemaskine får jeg en masse resultater fra mine tags. Det ser ikke særligt pænt ud og har tænkt mig at tilføje: <strong>Disallow: /Tag/</strong> Jeg har allerede <strong>Disallow: /wp-admin/</strong> i min robots.txt.</p> <p>Kom til at tænke på om der var mere jeg bør skjule for google. Hvad har i puttet i jeres robots.txt? </p>