Een simpele manier om Magento te optimaliseren voor Google, is door Google bots te vertellen dat alleen de mooie URL's geïndexeerd mogen worden. Dit kan door het aanpassen van het robots.txt bestand. Voeg onderstaande code toe aan jouw robots.txt voor direct resultaat.

       # Website Sitemap

Sitemap: http://SITEURL/sitemap.xml

# Crawlers Setup

User-agent: *

Crawl-delay: 10

# Allowable Index

Allow: /*?p=

Allow: /index.php/blog/

Allow: /catalog/seo_sitemap/category/

Allow: /media/catalog/

# Directories

Disallow: /404/

Disallow: /app/

Disallow: /cgi-bin/

Disallow: /downloader/

Disallow: /errors/

Disallow: /includes/

Disallow: /js/

Disallow: /lib/

Disallow: /magento/

# Disallow: /media/

Disallow: /media/captcha/

Disallow: /media/css/

Disallow: /media/css_secure/

Disallow: /media/customer/

Disallow: /media/dhl/

Disallow: /media/downloadable/

Disallow: /media/import/

Disallow: /media/js/

Disallow: /media/pdf/

Disallow: /media/sales/

Disallow: /media/tmp/

Disallow: /media/wysiwyg/

Disallow: /media/xmlconnect/

Disallow: /pkginfo/

Disallow: /report/

Disallow: /scripts/

Disallow: /shell/

Disallow: /skin/

Disallow: /stats/

Disallow: /var/

# Paths (clean URLs)

Disallow: /index.php/

Disallow: /catalog/product_compare/

Disallow: /catalog/category/view/

Disallow: /catalog/product/view/

Disallow: /catalog/product/gallery/

Disallow: /catalogsearch/

Disallow: /checkout/

Disallow: /control/

Disallow: /contacts/

Disallow: /customer/

Disallow: /customize/

Disallow: /newsletter/

Disallow: /poll/

Disallow: /review/

Disallow: /sendfriend/

Disallow: /tag/

Disallow: /wishlist/

# Files

Disallow: /cron.php

Disallow: /cron.sh

Disallow: /error_log

Disallow: /install.php

Disallow: /LICENSE.html

Disallow: /LICENSE.txt

Disallow: /LICENSE_AFL.txt

Disallow: /STATUS.txt

Disallow: /get.php # Magento 1.5+

# Paths (no clean URLs)

Disallow: /*.js$

Disallow: /*.css$

Disallow: /*.php$

Disallow: /*?SID=

Disallow: /rss*

Disallow: /*PHPSESSID

Aanvullingen op deze code is natuurlijk welkom via de reacties!

Uit het blog

Webshop kortingsacties? Ken uw doelgroep! (9526)

Jongere internet generaties hebben liever een percentage korting, maar oudere generaties geven de voorkeur aan gratis verzending.…

oktober 01, 2014Read more >>

Social media strategie (8108)

Tegenwoordig kan je als bedrijf niet meer zonder een social media strategie, mede omdat social media steeds zwaarder meetellen voor PageRank en dus SE…

november 05, 2014Read more >>

Factuur in Excel (14511)

Veel kleine ondernemers hebben geen behoefte aan een duur boekhoudpakket en maken zelf hun facturen in Excel of in Word. Voor deze ondernemers heb ik…

mei 07, 2014Read more >>

Contact

Studio209.nl Loosduinse Hoofdplein 209 2553 CP DEN HAAG

KvK Haaglanden 27338236
Let op: per 1 mei een nieuw rekeningnummer
NL38 BUNQ 2290 8113 27
 

Volg ons

Twitter Google facebook Linkedin 

Webwinkel-Keur-Partner