Требуется мастерски состав. файл robots.txt

Web/сайты Прочее

Был(а) онлайн: 26.04.20 14:45
Umen 26 лет

1.0 Был(а) онлайн: 26.04.20 14:45

Недавно
Для движка WebAsyst Shop Script требуется мастерски составить файл robots.txt, исключающий вероятность индексации php страниц, а только html, для максимально правильного применения ЧПУ.

Вот скажем для IPB рекомендуется добавить следующие строки:

User-Agent: *
Disallow: /index.php
Disallow: /index.php?act
Disallow: /index.php?Showuser
Disallow: /index.php?showuser
Disallow: /index.php?Showtopic
Disallow: /index.php?showtopic
Disallow: /index.php?Showforum
Disallow: /index.php?showforum
Disallow: /index.php?act=Profile
Disallow: /index.php?act=profile
Disallow: /index.php?act=Online
Disallow: /index.php?act=online
Disallow: /index.php?act=UserCP
Disallow: /index.php?act=usercp
Disallow: /index.php?act=Search
Disallow: /index.php?act=search
Disallow: /index.php?act=Report
Disallow: /index.php?act=report
Disallow: /index.php?act=Help
Disallow: /index.php?act=help
Disallow: /index.php?act=Msg
Disallow: /index.php?act=msg
Disallow: /index.php?act=Mail
Disallow: /index.php?act=mail
Disallow: /index.php?act=Members
Disallow: /index.php?act=members
Disallow: /index.php?act=Calendar
Disallow: /index.php?act=calendar
Disallow: /index.php?act=Login
Disallow: /index.php?act=login
Disallow: /index.php?act=ICQ
Disallow: /index.php?act=icq
Disallow: /index.php?act=MSN
Disallow: /index.php?act=msn
Disallow: /index.php?act=AOL
Disallow: /index.php?act=aol
Disallow: /index.php?act=AIM
Disallow: /index.php?act=aim
Disallow: /index.php?act=module&module=gallery
Disallow: /index.php?act=Shoutbox
Disallow: /index.php?act=shoutbox
Disallow: /index.php?act=Arcade
Disallow: /index.php?act=arcade
Disallow: /index.php?act=Statistics
Disallow: /index.php?act=statistics
Disallow: /ipb.html?act=Module
Disallow: /ipb.html?act=module
Disallow: /ipb.html?act=Profile
Disallow: /ipb.html?act=profile
Disallow: /ipb.html?act=Msg
Disallow: /ipb.html?act=msg
Disallow: /ipb.html?act=Chat
Disallow: /ipb.html?act=chat
Disallow: /ipb.html?act=Report
Disallow: /ipb.html?act=report
Disallow: /ipb.html?act=Mail
Disallow: /ipb.html?act=mail
Disallow: /ipb.html?act=Search
Disallow: /ipb.html?act=search
Disallow: /ipb.html?act=Help
Disallow: /ipb.html?act=help
Disallow: /ipb.html?act=Members
Disallow: /ipb.html?act=members
Disallow: /ipb.html?act=Online
Disallow: /ipb.html?act=online
Disallow: /ipb.html?act=Login
Disallow: /ipb.html?act=login
Disallow: /ipb.html?act=Calendar
Disallow: /ipb.html?act=calendar
Disallow: /ipb.html?act=Online
Disallow: /ipb.html?act=online
Disallow: /ipb.html?act=Rep
Disallow: /ipb.html?act=rep
Disallow: /forum/
Disallow: /lofiversion/
Disallow: /arcade/
Disallow: /cache/
Disallow: /cfg/
Disallow: /ips_kernel/
Disallow: /jscripts/
Disallow: /lang/
Disallow: /modules/
Disallow: /retail/
Disallow: /skin_acp/
Disallow: /skin_cache/
Disallow: /sources/
Disallow: /style_avatars/
Disallow: /style_emoticons/
Disallow: /style_images/
Disallow: /uploads/

User-agent: Slurp //For yahoo bot
Disallow: /

User-agent: msnbot // For MSN bot
Disallow: /

User-agent: ArchitextSpider //For Exite bot
Disallow: /

User-agent: FAST //For Alltheweb bot
Disallow: /

User-agent: Scooter //For Altavista Bot
Disallow: /

User-agent: ia_archiver //For Alexa Bot
Disallow: /

Также требуется исключить вероятность индексации всех остальных папок и файлов, помимо файлов интернет-магазина.

Чтобы добавить заявку к этому заказу, нужно войти или зарегистрироваться

Мой блок

26.04.20 14:45
Umen 26