Техническая оптимизация сайта

Чпу

Преимущества человеко-понятных урлов:

●     быстрая индексация;

●     понятность структуры сайта для пользователя;

●     дополнительные ключевые слова;

●     выделение ключевых слов «жирным» в результатах поиска;

●     отсутствие каких-либо параметров в адресе (могут появляться дубликаты страницы).

Роботс, сайтмап

User-agent: *

Disallow: /images/thumbnails/

Disallow: /skins/

Disallow: /payments/

Disallow: /store_closed.html

Disallow: /core/

Disallow: /lib/

Disallow: /install/

Disallow: /dist-install/

Disallow: /js/

Disallow: /111/

Disallow: /schemas/

Disallow: /*currency=

Disallow: /*variant_id=

Disallow: /*display=

Disallow: /*page=

Disallow: /*return_url=

Disallow: /*dispatch=

Disallow: /*more_filters=

Disallow: /*features_hash=

Disallow: /*subcats=

Disallow: /*sort_by=

Host: site.com

Sitemap:

Мета тег роботс

<meta name="robots" content="noindex,nofollow" /> - не индексируется контент и ссылки

<meta name="robots" content="index,follow" /> - все индексируется

<meta name="robots" content="index,nofollow" /> - индексируется контент, по ссылкам не переходит

<meta name="robots" content="noindex,follow" /> - не индексируется контент, но ссылки работают

Вариации на тему карты сайта

Sitemap.xml

Sitemap.txt

Sitemap.html

404

Правила:

1. Отдавать ответ 404 роботу

2. Не показывать по битой ссылке карту или главную

3. с 404 может быть редирект на главную с задержкой, но только 302

4. 404 страница должна быть, должна быть понятна, привлекательна и заставлять остаться на сайте.

ErrorDocument 404 /404.html
ErrorDocument 404 /error/404.html