iRobots.txt搜索引擎优化
下载最新版本：1.1.2 （2010年6月13日更新）
特点 | 截图 | 下载 | 配置 | 问题 | 评论 | 演示
现在版本1.1发布，这个版本有过去的版本做了一些改进。 最引人注目的是能够直接编辑robots.txt文件。 对于其他改进的完整列表，请参阅下面的changelog部分。
请帮助！援助在解释或只是建议新功能，将不胜感激。 所有援助将提供给您的网站的链接设置“页面上承认。 请通过注册您的兴趣与我联系页或以下评论。 谢谢。
如果您发现有用的插件，请在这里为它投票。
特点
iRobots.txt SEO（IRSEO）是一个完全可定制的robots.txt虚拟文件生成。 IRSEO创建了一个高度优化和安全的robots.txt文件，直接开箱。 用户可以选择启用或禁用特定的用户代理，目录或文件，使用直观的选项，其中包括详细说明。
robots.txt文件是一个文本文件位于网站的根目录。 它的目的是直接用户代理（又名机器人），或对特定文件或目录。 抑制特定网页从索引BOT将确保您的网站关键字优化和索引的网页是有关你的潜在客户。
IRSEO默认情况下，也能抑制几个WordPress系统的目录和文件。 这样做可以确保搜索机器人不包括安全敏感的网页在搜索结果。 例如搜索：inurl这样可湿性粉剂内容在谷歌的名称大小描述会产生一个内容目录索引和开放的网站名单。
请注意，IRSEO创建了一个虚拟的robots.txt文件。 这robots.txt文件robots.txt文件的访问请求时显示。
下载
最新版本：1.1.2
至少需要：WordPress 2.7中
测试到2.9.2
该插件也可以从WordPress插件库下载。
您可以自由使用GPL的插件所指定的条件下。
robots.txt文件示例
| 1 | ＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃ ＃＃＃＃＃ |
| 2 | ＃iRobots.txt SEO |
| 3 | |
| 4 | ＃Google图片 |
| 5 | 用户代理：谷歌图片 |
| 6 | 允许：/ |
| 7 | 禁止： |
| 8 | |
| 9 | ＃谷歌的Adsense |
| 10 | 用户代理：的 Mediapartners，谷歌* |
| 11 | 允许：/ |
| 12 | 禁止： |
| 13 | |
| 14 | ＃互联网归档Wayback机器 |
| 15 | 用户代理：ia_archiver * |
| 16 | 允许：/ |
| 17 | 禁止： |
| 18 | |
| 19 | ＃DIGG镜 |
| 20 | 用户代理：duggmirror |
| 21 | 不允许：/ |
| 22 | |
| 23 | ＃所有漫游 |
| 24 | 用户代理：* |
| 25 | 不允许：/ cgi-bin目录 |
| 26 | 不允许：/可湿性粉剂管理员/ |
| 27 | 不允许：/ WP / |
| 28 | 不允许：/可湿性粉剂内容/ |
| 29 | 不允许：/搜索/ * /饲料 |
| 30 | 不允许：/搜索/ * / * |
| 31 | 不允许：/ * *？ |
| 32 | 不允许：/ *？ |
| 33 | 不允许：/的readme.html |
| 34 | 不允许：/ LICENSE.TXT |
| 35 | 不允许：/ * $。 |
| 36 | 不允许：/ * JS美元。 |
| 37 | 不允许：/ *公司$ |
| 38 | 不允许：/ * CSS美元。 |
| 39 | 不允许：/ *广州$ |
| 40 | 不允许：/ * WMV美元 |
| 41 | 不允许：/ * CGI美元。 |
| 42 | 不允许：/ * XHTML美元。 |
| 43 | 允许：/ wp-content/uploads / |
| 44 | 允许：/ * = * |
| 45 | |
| 46 | ＃地图 |
| 47 | 地图：http://markbeljaars.com/sitemap.xml.gz |
| 48 | |
| 49 | ＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃ ＃＃＃＃＃ |
| 50 | ＃ |
| 51 | ＃Robots.txt文件生成由iRobots.txt搜索引擎优化V1.0 |
| 52 | ＃马克Beljaars的 |
| 53 | ＃ |
| 54 | ＃____ | | __ | ________ |
| 55 | ＃| | |（_ | | | <| _）（/ _ | |（_ |（_ | | _ \（_（_）。| | | |
| 56 | ＃_ | |
| 57 | ＃http://markbeljaars.com/plugins/irobotstxt-seo |
| 58 | ＃ |
| 59 | ＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃ ＃＃＃＃＃ |
| 60 | ＃ |
| 61 | ＃注意： |
| 62 | ＃允许在文件名 中的指令和通配符（*） |
| 63 | ＃robots.txt语法不是标准，但是它们 |
| 64 | ＃支持最新的搜索引擎。 |
安装
- 下载插件http://markbeljaars.com/download/current/plugins/irobotstxt-seo.zip 。
- 解压并上传到您的
/wp-content/plugins/目录中的插件并激活它 - 编辑插件设置在位于
Settings使用管理页面。
截图
配置页
组态
常规选项- 使用严格的robots.txt标准定义：官方的robots.txt定义明确标识目录或文件的搜索引擎不能索引，不包括任何指示，详细的文件搜索引擎可以索引。 谷歌扩大了定义，以包括一个
allow指令，还允许在文件名 中的通配符。 虽然没有正式支持，ammended的标准是大多数搜索引擎理解。 - 自动添加网站地图robots.txt文件：Sitemaps的告知搜索引擎您的网站结构，也让您估计多久您的网页将改变。 显然，搜索引擎找到这类信息有益的。 Sitemap协议的定义在这里 。 如WordPress的插件谷歌XML的Sitemaps生成器，可以自动生成的Sitemaps 。
- 抑制WordPress系统文件夹的索引：WordPress系统文件夹，如插件和内容目录关键字优化，因此不应该被搜索引擎索引。 此外，索引系统文件夹，可能会带来安全风险。
- 不允许重复的内容：WordPress有许多方式显示同一职位，包括按类别或按作者按标签。 这似乎是Google作为具有相同内容的多个页面。 据辩论，谷歌不喜欢用大量的重复内容的网站，但另一方面它也辩论，谷歌喜欢有许多页的网站。 使用此选项来抑制或允许一些重复的内容。
- 谷歌的Adsense允许访问整个网站： 谷歌的Adsense，自动确定这是你的听众抓取您的网站的内容相关的广告。 让广告完全访问您的网站，可能会导致更多的有针对性的广告。 如果你还没有实施广告，忽略此选项。
- 抑制由互联网档案索引： 互联网档案馆是一个宗旨不以营利为目的的组织，定期在互联网上的所有信息进行归档。 据推测，谷歌使用互联网档案，以确定年龄的一个网站，以协助定义\的权威网站。 一些SEO专家建议，禁用索引青年网站在互联网档案。 互联网档案馆也提出了控制文件的问题（您的文章可存档的旧版本），知识产权和隐私。
- 抑制图像索引：你不妨从搜索引擎索引你的图像抑制，如果您的图像版权，已被怀疑（他们侵犯版权），都没有涉及到您的网站，或者是不太可能产生的流量。 联盟营销也可能会发现，图像可能会产生不相关的交通，从而影响网站\的转化率。
- 抑制索引由Dugg镜的：，Duggmirror Digg.com上最流行的故事提供了一面镜子。 网站经常超载由DIGG发送的方式，使网页变得不可用的交通量。 为了减轻所谓的“Digg效应”Duggmirror承载最流行的故事，使他们Digg用户提供的一面镜子。 问题是，谷歌五月指数DuggMirror的页面源和inturn驱动器的流量从您的网站镜子前。
高级配置
采用这种形式的robots.txt文件，自定义记录可以添加或删除。 一个用户代理的完整列表，可以发现在http://www.user-agents.org/~~V 。 robot.txt指令字符串（文本，进入后允许或禁止指令）的例子可以发现在http://www.robotstxt.org/robotstxt.html 。 本博客文章中详细介绍了Google \'的非官方扩展。 请注意，所有允许的指令记录和指令包括通配符通配符的字符串将被忽略，如果选择使用严格的robots.txt标准定义 。
查看robots.txt的
查看或编辑完整的虚拟robots.txt文件。
- 启用免费的形式编辑：启用手动编辑robots.txt文件。 严重形成的robots.txt文件中需要注意可能会严重影响搜索引擎排名。 请注意，启用了一次免费的形式编辑，修改一般和先进的配置设置被抑制。 此外，免费的形式被禁用时，robots.txt文件的任何手动更改将丢失。
常见问题
的SEO iRobots.txt是否创建或修改任何文件吗？
IRSEO服务器D robots.txt文件是唯一的虚拟。 插件一旦被删除，您的网站将保持未修改。
我在哪里可以了解更多有关robots.txt？
官方的robots.txt信息网站是http://www.robotstxt.org/~~V 。 这里记录的Google的robots.txt扩展。
我可以自由编辑robots.txt文件？
是。 在“查看robots.txt的”管理员设置面板，选择“启用自由形式编辑”选项。 你现在可以直接修改robots.txt文件，在此窗格。
修订历史
1.1.2- 添加白俄罗斯翻译Marcis G 。谢谢你Marcis。
- 固定的文件中irseo_file_exists功能密切错误，已引起一些博客上的错误。
- 新增选项，以允许或过滤重复的内容。
- 现在可以自由编辑robots.txt文件从插件管理面板内。
- 现在担任的robots.txt文件，如果该URL或不包含的“www”前缀。 URL比较现在也区分大小写。
- 允许加入'sitemap.xml.gz“机器人的所有部分。
- 如果虚拟的robots.txt文件送达正确的XML网站地图插件警告隐时现。
- PHP代码现在已经完全评论。
- 添加nonce和管理检查所有的管理面板设置更改为安全起见。
- 遵循少调用的选项表中的代码更小，更容易造成联想到一个单一的阵列移动所有的选项。
- 修正错误，停止在某些系统管理员页面加载。
- 新增“设置”插件菜单，使用所提供的代码链接周杰伦 。
- 删除了PHP5的功能stream_get_contents和向后兼容建议FGETS取代周杰伦 。
- 现在检测presense的XML的Sitemaps生成器，如果存在发布警示，并说明这个插件也生成一个虚拟的robots.txt文件。 XML Sitempas有禁用robots.txt文件生成的选项。 再次，感谢周杰伦这个反馈。
- 固定的定义，函数名和i10n字符串与TOCC插件发生冲突的。
- 修改管理设置节头扩大头内的任何地方，如果点击的部分。
- 首次公开发行。
致谢
我要感谢下面的人所提供的宝贵援助：
- marcis G.的提供白俄罗斯翻译文件。
评论
请让我知道你的想法。 发表评论，如果你有一个要求的功能，发现了一个错误，或者需要一些帮助。 欢迎各界人士。
31“iRobots.txt的SEO”
搬场/包括引用。
- - 06。 2010年12月
[...]我们是今天。 我今天将涵盖什么是CF卡内部的链路简码及iRobots.txt插件信我。 这些插件是相当平直，这是为什么有两个在这里[...]
- - 23。 四月，2010
[...] iRobots.txt搜索引擎优化：是一个完全可定制的robots.txt虚拟文件生成。 IRSEO创建了一个高度优化和安全的robots.txt文件，直接开箱。 用户可以选择启用或禁用特定的用户代理，目录或文件，使用直观的选项，其中包括详细说明。 [...]
- - 05。 2010年2月
[...] iRobots.txt的SEO [...]
- - 29。 2010年1月
社会意见和分析这篇文章...
这个职位提到的Twitter buildweb：搜索引擎优化- MarkBeljaars.com iRobots.txt：2009年12月9日，... iRobots.txt SEO是完全可定制的robots.txt VIR ...... http://bit.ly/8NVwso ＃SEO ...
- 23 - 。 2009年12月
[...] iRobots.txt SEO（IRSEO）[...]
- - 13。 2009年12月
[...] iRobots.txt SEO（IRSEO）[...]
- - 13。 2009年12月
[...] recomiento probarlo。 descargar iRobots.txt SEO。 compatir CON土族[...]
- - 13。 2009年12月
[...]使用直观的选项，其中包括所有的详细说明。 下载及更多信息：iRobots.txt搜索引擎优化 - MarkBeljaars.com __________________邮件[...]
- - 12。 2009年12月
[...] iRobots.txt SEO（IRSEO）[...]
- - 12。 2009年12月
[...] WENN杜神经HIER BISTmöchtest杜vielleicht unseren RSS提要可湿性粉剂abonnieren.Powered迎接BoxiRobots.txt的SEO·冯·马克Beljaars IST EIN虚拟的robots.txt Datei造物主。 祖书房特点DES WordPress插件[...]
- - 11。 2009年12月
[...]搜索引擎优化11。 dezember 2009 | Autor：KHK的iRobots.txt SEO VO马克Beljaars IST EIN virtial的robots.txt的Datei造物主。 祖书房特点gehören的Unter [...]
- - 09。 2009年12月
[...]更多：iRobots.txt的SEO - MarkBeljaars.com Comments0发表评论点击这里取消[...]
- - 09。 2009年12月
[...]插件的全部细节，可以发现http://markbeljaars.com/plugins/irobotstxt-seo/ 。 [...]
您好，我有点困惑如何iRobots.txt SEO时，谷歌XML的Sitemaps插件安装工程。
应iRobots插件安装后，谷歌XML的Sitemaps插件，使被检测到的Sitemaps插件？
是有冲突的潜力，这就要求要改变这两个插件的设置？ 如果设置该插件？
我会感谢任何澄清。
谢谢
您好尼克
谷歌XML的Sitemaps确实是唯一的robots.txt文件，指向XML网站地图添加一行。 如果你禁用触摸robots.txt文件（XML Sitemaps的设置内通过取消“添加Sitemap的网址，以虚拟的robots.txt文件。”）的XML的Sitemaps，然后iRobots会自动为你添加这个项目，如果它检测，谷歌XML的Sitemaps插件安装。
希望这有助于
马克。
嗨，我有安装插件mysite.com / robots.txt的显示了罚款，但是当我点击插件设置，我得到一个WordPress的错误页面，简单地说，“你没有足够的权限访问此页面。 “
任何想法？
您好乔乔。 我作为一个额外的保安措施，以阻止XSS攻击，修改robots.txt文件使用的随机数。 速战速决，您可能能够编辑插件的PHP文件，并删除下面的文本（它多次出现在整个代码）...
“&& check_admin_referer（irseo变化选项的nonce”）
这将禁用的nonce。 我觉得这很奇怪，但作为随机数往往工作在WordPress。 请让我知道，如果这个“修复”你的问题。
谢谢你，
马克。
我已经安装了插件并激活它，但搜索引擎是不是我的网站上抓取任何网页是什么问题。 我使用谷歌网站管理员工具，我加入了我的地图，但味精出现，我们的robot.txt限制。 plz帮助我。 我的机器人和地图链接
http://reviewaccounting.com/robots.txt
http://reviewaccounting.com/sitemap.xml.gz
PLZ告诉我该怎么办
我等着你的答复
对不起后期答复。 Akismet在已标记为垃圾邮件，由于多个环节的岗位，我只有一个星期左右检查一次垃圾邮件之前，我删除它们。
我检查了您的robots.txt文件，它看起来确定。 在网站管理员工具，根据现场配置/履带式访问，选择测试，测试您的网站Googlebot的用户代理。 我测试你确切的robots.txt文件，它表示允许Googlebot的抓取该网站。
如果您怀疑插件造成你的问题，激活插件，看看问题是否仍然存在。 它是完全确定的，没有一个robots.txt文件，但谷歌将你所有的管理页面等指标
限制访问也可能会引起您的。htaccess文件。
马克。
你好马克，
我已经安装了插件，但不能看到源，它的任何地方。
如果我没有看到它是否意味着它不工作？
您好娜塔莉
你能解释这一点呢？ 你有没有在“管理设置”窗格iRobots.txt选项？ 您可以检查是否插件在浏览器中键入以下工作：
http://yoururl/robots.txt
例如，我的网站的robots.txt文件位于： http://markbeljaars.com/robots.txt 。
如果robots.txt文件不存在，可能有三个原因：
1。 该插件安装失败由于某种原因。 删除以前的安装，然后尝试从我的网站下载。 然后选择插件/添加新的管理面板，并点击上传链接。 上传zip文件，然后激活。
2。 你的主题是压倒一切的虚拟文件的请求。
3。 您的。htaccess文件阻止robots.txt文件。
马克。
马克，
我刚刚安装了你的插件，我得到以下错误。
警告：fclose（）的：提供的参数不是一个有效的流资源库/ WebServer的/ /文件/ XXXXXXX /可湿性粉剂内容/插件/ irobotstxt SEO / irobotstxt-seo.php的上线322
运行可湿性粉剂2.9.1。 任何想法？
安迪
您好安迪，
我还没有看到这个错误之前。 您运行的是什么版本的PHP吗？ 如果你是快乐编辑PHP文件，你可以简单地删除这条线和插件应该开始工作（在PHP中，文件被自动关闭，如果程序员忘记关闭它们）。 在任何情况下，我将修复代码今晚（澳大利亚时间），并上传一个新的修订。
马克。
您好安迪，
我刚刚发布了一个更新，修复了这个错误，不允许重复的内容，并增加了一个新的选项。 希望它能为你的作品现已确定。
马克。
嗨，我有一个问题，当我使用你的插件，并创建robots.txt文件，你的插件上传到网站目录，或我必须将文件复制并上传通过它http://FTP 。
谢谢，最好的robots.txt插件至今。
您好Jadah
robots.txt文件实际上是一个虚拟的文件。 该插件检测时，有人（或somebot）正试图以显示的http://www.website/robots.txt的文件，并截获这个请求。 然后插件，而不是输出的文本流，使它看起来像正在发送文件。 这样，有notihing你需要上传。 另外，robots.txt文件的任何更改immidiately反映。 有一个用这种方法虽然渔获。 如果一个物理存在robots.txt文件（即，你有FTP上传），那么这将永远被显示，而不是虚拟的文件。 这意味着，你将需要删除（或重命名）任何身体上的robots.txt文件，使用这个插件。
希望这有助于
马克。
我有一个问题。 我注意到在我的Google网站管理员工具帐户，谷歌无法访问“sitemap.xml.gz”文件，因为它限制robots.txt文件的插件genrated的。 （我的Sitemaps生成的“Google XML Sitemaps的”插件“地图加入到虚拟的robots.txt”是没有选你指示）。
检查生成的robots.txt文件的文本，它“just-thinkin.net/sitemap.xml.gz”（我有“的sitemap.xml”和sitemap.xml.gz“在我的都列出Sitemap的位置根目录），但它会阻止访问条目“不允许：/ *广州$”这个地图。
尽管谷歌可以访问我的“sitemap.xml的”好吧，我仍然困惑，为什么生成的robots.txt中列出的Sitemap的位置是故意封锁，在同一时间向所有机器人的文件。 这实际上是如何的事情都应该工作？ 谷歌总是能够同时访问的Sitemaps时，使用我的老手册的robots.txt（旧有一个有效期的问题，我从来没有追查）。
罚款插件，顺便说一句。
您好柯克。 大侦探的工作！ 你当然是完全正确的。 禁止不停止任何被抓取。gz文件。 的原因。gz文件通常是不允许的，以确保备份文件没有索引（GZ是用于压缩文件的扩展名）。 我将在下一版本中解决这一冲突。 这应该是在不到一个星期到期，将使自由形式所造成的robots.txt文件的编辑。
在此期间，您可以通过开放的iRobots SEO设置页面，选择“高级配置”。 在用户代理文本框中，键入“*”。 选择“允许：”拉下来，并在文本框中键入“/ sitemap.xml.gz”旁边的下拉。 最后按“添加自定义记录”按钮。
当您查看robots.txt文件，你应该看到几个这样的行：
# Custom RecordsUser-agent: *
Allow: /sitemap.xml.gz
希望这有助于。
良好的交易和上一个新的发行工作的感谢。 我已经添加了自定义记录。 工作正常。
我支持你，最好的，如果它可以允许自由编辑......
好主意SEVI。 到下一个版本将增加自由编辑。
马克。