iRobots.txt搜索引擎優化
下載最新版本：1.1.2 （2010年6月13日更新）
特點 | 截圖 | 下載 | 配置 | 問題 | 評論 | 演示
現在版本1.1發布，這個版本有過去的版本做了一些改進。 最引人注目的是能夠直接編輯robots.txt文件。 對於其他改進的完整列表，請參閱下面的changelog部分。
請幫助！援助在解釋或只是建議新功能，將不勝感激。 所有援助將提供給您的網站的鏈接設置“頁面上承認。 請通過註冊您的興趣與我聯繫頁或以下評論。 謝謝。
如果您發現有用的插件，請在這裡為它投票。
特點
iRobots.txt SEO（IRSEO）是一個完全可定制的robots.txt虛擬文件生成。 IRSEO創建了一個高度優化和安全的robots.txt文件，直接開箱。 用戶可以選擇啟用或禁用特定的用戶代理，目錄或文件，使用直觀的選項，其中包括詳細說明。
robots.txt文件是一個文本文件位於網站的根目錄。 它的目的是直接用戶代理（又名機器人），或對特定文件或目錄。 抑制特定網頁從索引BOT將確保您的網站關鍵字優化和索引的網頁是有關你的潛在客戶。
IRSEO默認情況下，也能抑制幾個WordPress系統的目錄和文件。 這樣做可以確保搜索機器人不包括安全敏感的網頁在搜索結果。 例如搜索：inurl這樣可濕性粉劑內容在谷歌的名稱大小描述會產生一個內容目錄索引和開放的網站名單。
請注意，IRSEO創建了一個虛擬的robots.txt文件。 這robots.txt文件robots.txt文件的訪問請求時顯示。
下載
最新版本：1.1.2
至少需要：WordPress 2.7中
測試到2.9.2
該插件也可以從WordPress插件庫下載。
您可以自由使用GPL的插件所指定的條件下。
robots.txt文件示例
| 1 | ＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃ ＃＃＃＃＃ |
| 2 | ＃iRobots.txt SEO |
| 3 | |
| 4 | ＃Google圖片 |
| 5 | 用戶代理：谷歌圖片 |
| 6 | 允許：/ |
| 7 | 禁止： |
| 8 | |
| 9 | ＃谷歌的Adsense |
| 10 | 用戶代理：的 Mediapartners，谷歌* |
| 11 | 允許：/ |
| 12 | 禁止： |
| 13 | |
| 14 | ＃互聯網歸檔Wayback機器 |
| 15 | 用戶代理：ia_archiver * |
| 16 | 允許：/ |
| 17 | 禁止： |
| 18 | |
| 19 | ＃DIGG鏡 |
| 20 | 用戶代理：duggmirror |
| 21 | 不允許：/ |
| 22 | |
| 23 | ＃所有漫遊 |
| 24 | 用戶代理：* |
| 25 | 不允許：/ cgi-bin目錄 |
| 26 | 不允許：/可濕性粉劑管理員/ |
| 27 | 不允許：/ WP / |
| 28 | 不允許：/可濕性粉劑內容/ |
| 29 | 不允許：/搜索/ * /飼料 |
| 30 | 不允許：/搜索/ * / * |
| 31 | 不允許：/ * *？ |
| 32 | 不允許：/ *？ |
| 33 | 不允許：/的readme.html |
| 34 | 不允許：/ LICENSE.TXT |
| 35 | 不允許：/ * $。 |
| 36 | 不允許：/ * JS美元。 |
| 37 | 不允許：/ *公司$ |
| 38 | 不允許：/ * CSS美元。 |
| 39 | 不允許：/ *廣州$ |
| 40 | 不允許：/ * WMV美元 |
| 41 | 不允許：/ * CGI美元。 |
| 42 | 不允許：/ * XHTML美元。 |
| 43 | 允許：/ wp-content/uploads / |
| 44 | 允許：/ * = * |
| 45 | |
| 46 | ＃地圖 |
| 47 | 地圖：http://markbeljaars.com/sitemap.xml.gz |
| 48 | |
| 49 | ＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃ ＃＃＃＃＃ |
| 50 | ＃ |
| 51 | ＃Robots.txt文件生成由iRobots.txt搜索引擎優化V1.0 |
| 52 | ＃馬克Beljaars的 |
| 53 | ＃ |
| 54 | ＃____ | | __ | ________ |
| 55 | ＃| | |（_ | | | <| _）（/ _ | |（_ |（_ | | _ \（_（_）。| | | |
| 56 | ＃_ | |
| 57 | ＃http://markbeljaars.com/plugins/irobotstxt-seo |
| 58 | ＃ |
| 59 | ＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃＃ ＃＃＃＃＃ |
| 60 | ＃ |
| 61 | ＃注意： |
| 62 | ＃允許在文件名 中的指令和通配符（*） |
| 63 | ＃robots.txt語法不是標準，但是它們 |
| 64 | ＃支持最新的搜索引擎。 |
安裝
- 下載插件http://markbeljaars.com/download/current/plugins/irobotstxt-seo.zip 。
- 解壓並上傳到您的
/wp-content/plugins/目錄中的插件並激活它 - 編輯插件設置在位於
Settings使用管理頁面。
截圖
配置頁
組態
常規選項- 使用嚴格的robots.txt標準定義：官方的robots.txt定義明確標識目錄或文件的搜索引擎不能索引，不包括任何指示，詳細的文件搜索引擎可以索引。 谷歌擴大了定義，以包括一個
allow指令，還允許在文件名 中的通配符。 雖然沒有正式支持，ammended的標準是大多數搜索引擎理解。 - 自動添加網站地圖robots.txt文件：Sitemaps的告知搜索引擎您的網站結構，也讓您估計多久您的網頁將改變。 顯然，搜索引擎找到這類信息有益的。 Sitemap協議的定義在這裡 。 如WordPress的插件谷歌XML的Sitemaps生成器，可以自動生成的Sitemaps 。
- 抑制WordPress系統文件夾的索引：WordPress系統文件夾，如插件和內容目錄關鍵字優化，因此不應該被搜索引擎索引。 此外，索引系統文件夾，可能會帶來安全風險。
- 不允許重複的內容：WordPress有許多方式顯示同一職位，包括按類別或按作者按標籤。 這似乎是Google作為具有相同內容的多個頁面。 據辯論，谷歌不喜歡用大量的重複內容的網站，但另一方面它也辯論，谷歌喜歡有許多頁的網站。 使用此選項來抑制或允許一些重複的內容。
- 谷歌的Adsense允許訪問整個網站： 谷歌的Adsense，自動確定這是你的聽眾抓取您的網站的內容相關的廣告。 讓廣告完全訪問您的網站，可能會導致更多的有針對性的廣告。 如果你還沒有實施廣告，忽略此選項。
- 抑制由互聯網檔案索引： 互聯網檔案館是一個宗旨不以營利為目的的組織，定期在互聯網上的所有信息進行歸檔。 據推測，谷歌使用互聯網檔案，以確定年齡的一個網站，以協助定義\的權威網站。 一些SEO專家建議，禁用索引青年網站在互聯網檔案。 互聯網檔案館也提出了控制文件的問題（您的文章可存檔的舊版本），知識產權和隱私。
- 抑制圖像索引：你不妨從搜索引擎索引你的圖像抑制，如果您的圖像版權，已被懷疑（他們侵犯版權），都沒有涉及到您的網站，或者是不太可能產生的流量。 聯盟營銷也可能會發現，圖像可能會產生不相關的交通，從而影響網站\的轉化率。
- 抑制索引由Dugg鏡的：，Duggmirror Digg.com上最流行的故事提供了一面鏡子。 網站經常超載由DIGG發送的方式，使網頁變得不可用的交通量。 為了減輕所謂的“Digg效應”Duggmirror承載最流行的故事，使他們Digg用戶提供的一面鏡子。 問題是，谷歌五月指數DuggMirror的頁面源和inturn驅動器的流量從您的網站鏡子前。
高級配置
採用這種形式的robots.txt文件，自定義記錄可以添加或刪除。 一個用戶代理的完整列表，可以發現在http://www.user-agents.org/~~V 。 robot.txt指令字符串（文本，進入後允許或禁止指令）的例子可以發現在http://www.robotstxt.org/robotstxt.html 。 本博客文章中詳細介紹了Google \'的非官方擴展。 請注意，所有允許的指令記錄和指令包括通配符通配符的字符串將被忽略，如果選擇使用嚴格的robots.txt標準定義 。
查看robots.txt的
查看或編輯完整的虛擬robots.txt文件。
- 啟用免費的形式編輯：啟用手動編輯robots.txt文件。 嚴重形成的robots.txt文件中需要注意可能會嚴重影響搜索引擎排名。 請注意，啟用了一次免費的形式編輯，修改一般和先進的配置設置被抑制。 此外，免費的形式被禁用時，robots.txt文件的任何手動更改將丟失。
常見問題
的SEO iRobots.txt是否創建或修改任何文件嗎？
IRSEO服務器D robots.txt文件是唯一的虛擬。 插件一旦被刪除，您的網站將保持未修改。
我在哪裡可以了解更多有關robots.txt？
官方的robots.txt信息網站是http://www.robotstxt.org/~~V 。 這裡記錄的Google的robots.txt擴展。
我可以自由編輯robots.txt文件？
是。 在“查看robots.txt的”管理員設置面板，選擇“啟用自由形式編輯”選項。 你現在可以直接修改robots.txt文件，在此窗格。
修訂歷史
1.1.2- 添加白俄羅斯翻譯Marcis G 。謝謝你Marcis。
- 固定的文件中irseo_file_exists功能密切錯誤，已引起一些博客上的錯誤。
- 新增選項，以允許或過濾重複的內容。
- 現在可以自由編輯robots.txt文件從插件管理面板內。
- 現在擔任的robots.txt文件，如果該URL或不包含的“www”前綴。 URL比較現在也區分大小寫。
- 允許加入'sitemap.xml.gz“機器人的所有部分。
- 如果虛擬的robots.txt文件送達正確的XML網站地圖插件警告隱時現。
- PHP代碼現在已經完全評論。
- 添加nonce和管理檢查所有的管理面板設置更改為安全起見。
- 遵循少調用的選項表中的代碼更小，更容易造成聯想到一個單一的陣列移動所有的選項。
- 修正錯誤，停止在某些系統管理員頁面加載。
- 新增“設置”插件菜單，使用所提供的代碼鏈接周杰倫 。
- 刪除了PHP5的功能stream_get_contents和向後兼容建議FGETS取代周杰倫 。
- 現在檢測presense的XML的Sitemaps生成器，如果存在發布警示，並說明這個插件也生成一個虛擬的robots.txt文件。 XML Sitempas有禁用robots.txt文件生成的選項。 再次，感謝周杰倫這個反饋。
- 固定的定義，函數名和i10n字符串與TOCC插件發生衝突的。
- 修改管理設置節頭擴大頭內的任何地方，如果點擊的部分。
- 首次公開發行。
致謝
我要感謝下面的人所提供的寶貴援助：
- marcis G.的提供白俄羅斯翻譯文件。
評論
請讓我知道你的想法。 發表評論，如果你有一個要求的功能，發現了一個錯誤，或者需要一些幫助。 歡迎各界人士。
31“iRobots.txt的SEO”
搬場/包括引用。
- - 06。 2010年12月
[...]我們是今天。 我今天將涵蓋什麼是CF卡內部的鏈路簡碼及iRobots.txt插件信我。 這些插件是相當平直，這是為什麼有兩個在這裡[...]
- - 23。 四月，2010
[...] iRobots.txt搜索引擎優化：是一個完全可定制的robots.txt虛擬文件生成。 IRSEO創建了一個高度優化和安全的robots.txt文件，直接開箱。 用戶可以選擇啟用或禁用特定的用戶代理，目錄或文件，使用直觀的選項，其中包括詳細說明。 [...]
- - 05。 2010年2月
[...] iRobots.txt的SEO [...]
- - 29。 2010年1月
社會意見和分析這篇文章...
這個職位提到的Twitter buildweb：搜索引擎優化- MarkBeljaars.com iRobots.txt：2009年12月9日，... iRobots.txt SEO是完全可定制的robots.txt VIR ...... http://bit.ly/8NVwso ＃SEO ...
- 23 - 。 2009年12月
[...] iRobots.txt SEO（IRSEO）[...]
- - 13。 2009年12月
[...] iRobots.txt SEO（IRSEO）[...]
- - 13。 2009年12月
[...] recomiento probarlo。 descargar iRobots.txt SEO。 compatir CON土族[...]
- - 13。 2009年12月
[...]使用直觀的選項，其中包括所有的詳細說明。 下載及更多信息：iRobots.txt搜索引擎優化 - MarkBeljaars.com __________________郵件[...]
- - 12。 2009年12月
[...] iRobots.txt SEO（IRSEO）[...]
- - 12。 2009年12月
[...] WENN杜神經HIER BISTmöchtest杜vielleicht unseren RSS提要可濕性粉劑abonnieren.Powered迎接BoxiRobots.txt的SEO·馮·馬克Beljaars IST EIN虛擬的robots.txt Datei造物主。 祖書房特點DES WordPress插件[...]
- - 11。 2009年12月
[...]搜索引擎優化11。 dezember 2009 | Autor：KHK的iRobots.txt SEO VO馬克Beljaars IST EIN virtial的robots.txt的Datei造物主。 祖書房特點gehören的Unter [...]
- - 09。 2009年12月
[...]更多：iRobots.txt的SEO - MarkBeljaars.com Comments0發表評論點擊這裡取消[...]
- - 09。 2009年12月
[...]插件的全部細節，可以發現http://markbeljaars.com/plugins/irobotstxt-seo/ 。 [...]
您好，我有點困惑如何iRobots.txt SEO時，谷歌XML的Sitemaps插件安裝工程。
應iRobots插件安裝後，谷歌XML的Sitemaps插件，使被檢測到的Sitemaps插件？
是有衝突的潛力，這就要求要改變這兩個插件的設置？ 如果設置該插件？
我會感謝任何澄清。
謝謝
您好尼克
谷歌XML的Sitemaps確實是唯一的robots.txt文件，指向XML網站地圖添加一行。 如果你禁用觸摸robots.txt文件（XML Sitemaps的設置內通過取消“添加Sitemap的網址，以虛擬的robots.txt文件。”）的XML的Sitemaps，然後iRobots會自動為你添加這個項目，如果它檢測，谷歌XML的Sitemaps插件安裝。
希望這有助於
馬克。
嗨，我有安裝插件mysite.com / robots.txt的顯示了罰款，但是當我點擊插件設置，我得到一個WordPress的錯誤頁面，簡單地說，“你沒有足夠的權限訪問此頁面。 “
任何想法？
您好喬喬。 我作為一個額外的保安措施，以阻止XSS攻擊，修改robots.txt文件使用的隨機數。 速戰速決，您可能能夠編輯插件的PHP文件，並刪除下面的文本（它多次出現在整個代碼）...
“&& check_admin_referer（irseo變化選項的nonce”）
這將禁用的nonce。 我覺得這很奇怪，但作為隨機數往往工作在WordPress。 請讓我知道，如果這個“修復”你的問題。
謝謝你，
馬克。
我已經安裝了插件並激活它，但搜索引擎是不是我的網站上抓取任何網頁是什麼問題。 我使用谷歌網站管理員工具，我加入了我的地圖，但味精出現，我們的robot.txt限制。 plz幫助我。 我的機器人和地圖鏈接
http://reviewaccounting.com/robots.txt
http://reviewaccounting.com/sitemap.xml.gz
PLZ告訴我該怎麼辦
我等著你的答复
對不起後期答复。 Akismet在已標記為垃圾郵件，由於多個環節的崗位，我只有一個星期左右檢查一次垃圾郵件之前，我刪除它們。
我檢查了您的robots.txt文件，它看起來確定。 在網站管理員工具，根據現場配置/履帶式訪問，選擇測試，測試您的網站Googlebot的用戶代理。 我測試你確切的robots.txt文件，它表示允許Googlebot的抓取該網站。
如果您懷疑插件造成你的問題，激活插件，看看問題是否仍然存在。 它是完全確定的，沒有一個robots.txt文件，但谷歌將你所有的管理頁面等指標
限制訪問也可能會引起您的。htaccess文件。
馬克。
你好馬克，
我已經安裝了插件，但不能看到源，它的任何地方。
如果我沒有看到它是否意味著它不工作？
您好娜塔莉
你能解釋這一點呢？ 你有沒有在“管理設置”窗格iRobots.txt選項？ 您可以檢查是否插件在瀏覽器中鍵入以下工作：
http://yoururl/robots.txt
例如，我的網站的robots.txt文件位於： http://markbeljaars.com/robots.txt 。
如果robots.txt文件不存在，可能有三個原因：
1。 該插件安裝失敗由於某種原因。 刪除以前的安裝，然後嘗試從我的網站下載。 然後選擇插件/添加新的管理面板，並點擊上傳鏈接。 上傳zip文件，然後激活。
2。 你的主題是壓倒一切的虛擬文件的請求。
3。 您的。htaccess文件阻止robots.txt文件。
馬克。
馬克，
我剛剛安裝了你的插件，我得到以下錯誤。
警告：fclose（）的：提供的參數不是一個有效的流資源庫/ WebServer的/ /文件/ XXXXXXX /可濕性粉劑內容/插件/ irobotstxt SEO / irobotstxt-seo.php的上線322
運行可濕性粉劑2.9.1。 任何想法？
安迪
您好安迪，
我還沒有看到這個錯誤之前。 您運行的是什麼版本的PHP嗎？ 如果你是快樂編輯PHP文件，你可以簡單地刪除這條線和插件應該開始工作（在PHP中，文件被自動關閉，如果程序員忘記關閉它們）。 在任何情況下，我將修復代碼今晚（澳大利亞時間），並上傳一個新的修訂。
馬克。
您好安迪，
我剛剛發布了一個更新，修復了這個錯誤，不允許重複的內容，並增加了一個新的選項。 希望它能為你的作品現已確定。
馬克。
嗨，我有一個問題，當我使用你的插件，並創建robots.txt文件，你的插件上傳到網站目錄，或我必須將文件複製並上傳通過它http://FTP 。
謝謝，最好的robots.txt插件至今。
您好Jadah
robots.txt文件實際上是一個虛擬的文件。 該插件檢測時，有人（或somebot）正試圖以顯示的http://www.website/robots.txt的文件，並截獲這個請求。 然後插件，而不是輸出的文本流，使它看起來像正在發送文件。 這樣，有notihing你需要上傳。 另外，robots.txt文件的任何更改immidiately反映。 有一個用這種方法雖然漁獲。 如果一個物理存在robots.txt文件（即，你有FTP上傳），那麼這將永遠被顯示，而不是虛擬的文件。 這意味著，你將需要刪除（或重命名）任何身體上的robots.txt文件，使用這個插件。
希望這有助於
馬克。
我有一個問題。 我注意到在我的Google網站管理員工具帳戶，谷歌無法訪問“sitemap.xml.gz”文件，因為它限制robots.txt文件的插件genrated的。 （我的Sitemaps生成的“Google XML Sitemaps的”插件“地圖加入到虛擬的robots.txt”是沒有選你指示）。
檢查生成的robots.txt文件的文本，它“just-thinkin.net/sitemap.xml.gz”（我有“的sitemap.xml”和sitemap.xml.gz“在我的都列出Sitemap的位置根目錄），但它會阻止訪問條目“不允許：/ *廣州$”這個地圖。
儘管谷歌可以訪問我的“sitemap.xml的”好吧，我仍然困惑，為什麼生成的robots.txt中列出的Sitemap的位置是故意封鎖，在同一時間向所有機器人的文件。 這實際上是如何的事情都應該工作？ 谷歌總是能夠同時訪問的Sitemaps時，使用我的老手冊的robots.txt（舊有一個有效期的問題，我從來沒有追查）。
罰款插件，順便說一句。
您好柯克。 大偵探的工作！ 你當然是完全正確的。 禁止不停止任何被抓取。gz文件。 的原因。gz文件通常是不允許的，以確保備份文件沒有索引（GZ是用於壓縮文件的擴展名）。 我將在下一版本中解決這一衝突。 這應該是在不到一個星期到期，將使自由形式所造成的robots.txt文件的編輯。
在此期間，您可以通過開放的iRobots SEO設置頁面，選擇“高級配置”。 在用戶代理文本框中，鍵入“*”。 選擇“允許：”拉下來，並在文本框中鍵入“/ sitemap.xml.gz”旁邊的下拉。 最後按“添加自定義記錄”按鈕。
當您查看robots.txt文件，你應該看到幾個這樣的行：
# Custom RecordsUser-agent: *
Allow: /sitemap.xml.gz
希望這有助於。
良好的交易和上一個新的發行工作的感謝。 我已經添加了自定義記錄。 工作正常。
我支持你，最好的，如果它可以允許自由編輯......
好主意SEVI。 到下一個版本將增加自由編輯。
馬克。