Требуется профессионально состав. файл robots.txt

Для движка WebAsyst Shop Script требуется профессионально составить файл robots.txt, исключающий возможность индексации php страниц, а только html, для максимально корректного использования ЧПУ.

Вот например для IPB рекомендуется добавить следующие строки:

User-Agent: *

Disallow: /index.php

Disallow: /index.php?act

Disallow: /index.php?Showuser

Disallow: /index.php?showuser

Disallow: /index.php?Showtopic

Disallow: /index.php?showtopic

Disallow: /index.php?Showforum

Disallow: /index.php?showforum

Disallow: /index.php?act=Profile

Disallow: /index.php?act=profile

Disallow: /index.php?act=Online

Disallow: /index.php?act=online

Disallow: /index.php?act=UserCP

Disallow: /index.php?act=usercp

Disallow: /index.php?act=Search

Disallow: /index.php?act=search

Disallow: /index.php?act=Report

Disallow: /index.php?act=report

Disallow: /index.php?act=Help

Disallow: /index.php?act=help

Disallow: /index.php?act=Msg

Disallow: /index.php?act=msg

Disallow: /index.php?act=Mail

Disallow: /index.php?act=mail

Disallow: /index.php?act=Members

Disallow: /index.php?act=members

Disallow: /index.php?act=Calendar

Disallow: /index.php?act=calendar

Disallow: /index.php?act=Login

Disallow: /index.php?act=login

Disallow: /index.php?act=ICQ

Disallow: /index.php?act=icq

Disallow: /index.php?act=MSN

Disallow: /index.php?act=msn

Disallow: /index.php?act=AOL

Disallow: /index.php?act=aol

Disallow: /index.php?act=AIM

Disallow: /index.php?act=aim

Disallow: /index.php?act=module&module=gallery

Disallow: /index.php?act=Shoutbox

Disallow: /index.php?act=shoutbox

Disallow: /index.php?act=Arcade

Disallow: /index.php?act=arcade

Disallow: /index.php?act=Statistics

Disallow: /index.php?act=statistics

Disallow: /ipb.html?act=Module

Disallow: /ipb.html?act=module

Disallow: /ipb.html?act=Profile

Disallow: /ipb.html?act=profile

Disallow: /ipb.html?act=Msg

Disallow: /ipb.html?act=msg

Disallow: /ipb.html?act=Chat

Disallow: /ipb.html?act=chat

Disallow: /ipb.html?act=Report

Disallow: /ipb.html?act=report

Disallow: /ipb.html?act=Mail

Disallow: /ipb.html?act=mail

Disallow: /ipb.html?act=Search

Disallow: /ipb.html?act=search

Disallow: /ipb.html?act=Help

Disallow: /ipb.html?act=help

Disallow: /ipb.html?act=Members

Disallow: /ipb.html?act=members

Disallow: /ipb.html?act=Online

Disallow: /ipb.html?act=online

Disallow: /ipb.html?act=Login

Disallow: /ipb.html?act=login

Disallow: /ipb.html?act=Calendar

Disallow: /ipb.html?act=calendar

Disallow: /ipb.html?act=Online

Disallow: /ipb.html?act=online

Disallow: /ipb.html?act=Rep

Disallow: /ipb.html?act=rep

Disallow: /forum/

Disallow: /lofiversion/

Disallow: /arcade/

Disallow: /cache/

Disallow: /cfg/

Disallow: /ips_kernel/

Disallow: /jscripts/

Disallow: /lang/

Disallow: /modules/

Disallow: /retail/

Disallow: /skin_acp/

Disallow: /skin_cache/

Disallow: /sources/

Disallow: /style_avatars/

Disallow: /style_emoticons/

Disallow: /style_images/

Disallow: /uploads/

User-agent: Slurp //For yahoo bot

Disallow: /

User-agent: msnbot // For MSN bot

Disallow: /

User-agent: ArchitextSpider //For Exite bot

Disallow: /

User-agent: FAST //For Alltheweb bot

Disallow: /

User-agent: Scooter //For Altavista Bot

Disallow: /

User-agent: ia_archiver //For Alexa Bot

Disallow: /

Также требуется исключить возможность индексации всех остальных папок и файлов, кроме файлов интернет-магазина.