必應(yīng)發(fā)布增強(qiáng)型Robots.txt測(cè)試工具

Bing宣布了增強(qiáng)的Robots.txt測(cè)試工具。該工具滿足了重要的需求，因?yàn)檩斎脲e(cuò)誤的robots.txt可能會(huì)導(dǎo)致意外的SEO結(jié)果。制作完美的robots.txt文件是必不可少的，也是英文SEO的頭等大事。

robots.txt文件是一個(gè)告訴搜索引擎抓取工具在網(wǎng)站上可以做什么和不可以做什么的文件。robots.txt文件是發(fā)布者可以對(duì)bing推廣進(jìn)行控制的幾種方式之一。

Bing Robots.txt測(cè)試工具的屏幕截圖

即使您不需要阻止搜索搜尋器，也要保留一個(gè)搜索器，以免生成不必要的404錯(cuò)誤日志表示法仍然很重要。

對(duì)Robots.txt文件的錯(cuò)誤可能會(huì)導(dǎo)致搜索引擎抓取它們不應(yīng)該建立索引的頁(yè)面。

robots.txt文件中的意外條目也可能導(dǎo)致網(wǎng)頁(yè)無(wú)法排名，因?yàn)樗鼈儽灰馔庾柚埂?/span>

robots.txt文件中的錯(cuò)誤是搜索排名問題的常見原因。這就是Bing增強(qiáng)的robots.txt測(cè)試工具如此重要的原因

主動(dòng)使用Robots.txt測(cè)試和診斷

發(fā)布者現(xiàn)在可以主動(dòng)查看和測(cè)試其Robots.txt文件。

測(cè)試以查看搜索搜尋器如何響應(yīng)robots.txt并診斷可能的問題是可以幫助發(fā)布商進(jìn)行SEO的重要功能。

該工具還可以幫助搜索審核顧問確定需要糾正的可能問題。

如Bing所述，Bing的新工具滿足了重要的需求：

“盡管機(jī)器人排除協(xié)議可以通知網(wǎng)絡(luò)機(jī)器人和爬蟲，不應(yīng)對(duì)網(wǎng)站的哪些部分進(jìn)行處理或掃描，但搜索引擎和參數(shù)的不斷增長(zhǎng)迫使網(wǎng)站管理員在數(shù)百萬(wàn)個(gè)文件夾中搜索他們的robots.txt文件在其托管服務(wù)器上進(jìn)行編輯，而無(wú)須進(jìn)行指導(dǎo)，最后由于不受歡迎的搜尋器問題仍然存在，導(dǎo)致工作人員scratch之以鼻?！?/span>

Bing robots.txt工具采取了以下操作來(lái)提供可操作的信息：

分析robots.txt

找出問題

指導(dǎo)發(fā)布者完成獲取和上傳過程。

檢查允許/禁止語(yǔ)句

根據(jù)必應(yīng)：

“Robots.txt測(cè)試人員不僅可以幫助網(wǎng)站管理員分析他們的robots.txt文件，而且可以突出顯示可能導(dǎo)致他們無(wú)法被Bing和其他機(jī)器人最佳抓取的問題；但是，還可以逐步引導(dǎo)他們從獲取最新文件到在適當(dāng)?shù)牡刂飞陷d相同的文件。

網(wǎng)站管理員可以將網(wǎng)址提交給robots.txt測(cè)試工具，該工具的運(yùn)行方式與Bingbot和BingAdsBot一樣，可以檢查robots.txt文件并驗(yàn)證相應(yīng)的URL是否被允許或阻止?！?/span>