網(wǎng)購(gòu)成為人們生活中的重要組成部分,越來(lái)越多企業(yè)選擇布局線(xiàn)上業(yè)務(wù),希望借助“雙11”“618”等活動(dòng),為用戶(hù)提供便捷高效的購(gòu)物體驗(yàn),但瞄準(zhǔn)此類(lèi)節(jié)點(diǎn)的除了電商企業(yè)和用戶(hù),還有看不見(jiàn)的“爬蟲(chóng)”。
據(jù)Akamai的機(jī)器人管理程序統(tǒng)計(jì)的針對(duì)電商網(wǎng)站的69億次請(qǐng)求中,人類(lèi)訪(fǎng)問(wèn)僅有49.3%,剩下的50.8%來(lái)自各類(lèi)機(jī)器人爬蟲(chóng),經(jīng)過(guò)進(jìn)一步分析機(jī)器人爬蟲(chóng)的分類(lèi)發(fā)現(xiàn),高風(fēng)險(xiǎn)類(lèi)別的爬蟲(chóng)占27.5%。由此可見(jiàn),爬蟲(chóng)攻擊正在嚴(yán)重威脅電商行業(yè)的正常運(yùn)行。
雙管齊下
為爬蟲(chóng)“重災(zāi)區(qū)”制定有效防御策略
在電商行業(yè),爬蟲(chóng)的威脅比其他行業(yè)要更高,不法分子會(huì)先通過(guò)爬蟲(chóng)廣泛搜索熱銷(xiāo)產(chǎn)品的價(jià)格、庫(kù)存等關(guān)鍵數(shù)據(jù),然后在秒殺等場(chǎng)景中通過(guò)機(jī)器人程序或者爬蟲(chóng)將低價(jià)或者限購(gòu)的商品搶購(gòu)一空,并在其他平臺(tái)上高價(jià)售賣(mài),這樣的行為,不僅損害企業(yè)的合法權(quán)益,還會(huì)對(duì)企業(yè)形象造成極大的影響。
爬蟲(chóng)的高訪(fǎng)問(wèn)效率還會(huì)消耗大量資源,并影響正??蛻?hù)的訪(fǎng)問(wèn)體驗(yàn),降低網(wǎng)站轉(zhuǎn)化率。如今,伴隨AI和機(jī)器學(xué)習(xí)的進(jìn)步,爬蟲(chóng)變得更加智能化,隱蔽性也變得更強(qiáng),識(shí)別惡意爬蟲(chóng)也變得越來(lái)越困難,部分采取AI僵尸網(wǎng)絡(luò)和“無(wú)頭瀏覽器”技術(shù)的爬蟲(chóng),甚至可以模擬人類(lèi)的訪(fǎng)問(wèn)行為,這使得傳統(tǒng)的安全手段難以有效識(shí)別和攔截高風(fēng)險(xiǎn)流量。針對(duì)日益復(fù)雜的爬蟲(chóng)威脅,Akamai提出了雙管齊下的策略,應(yīng)對(duì)惡意爬蟲(chóng)的攻擊:
針對(duì)網(wǎng)絡(luò)邊緣層:利用預(yù)定義的訪(fǎng)問(wèn)異常特征和協(xié)議質(zhì)問(wèn)快速識(shí)別并限制惡意爬蟲(chóng)。
針對(duì)訪(fǎng)問(wèn)行為:深入分析鼠標(biāo)移動(dòng)軌跡等行為和設(shè)備指紋,深入分析訪(fǎng)問(wèn)行為,提高識(shí)別精確度,確保精準(zhǔn)打擊潛在威脅。
見(jiàn)招拆招
Akamai助電商企業(yè)構(gòu)建多層防護(hù)壁壘
對(duì)于爬蟲(chóng)威脅,企業(yè)防護(hù)的關(guān)鍵在于如何在訪(fǎng)問(wèn)請(qǐng)求中準(zhǔn)確識(shí)別出爬蟲(chóng),而非簡(jiǎn)單的攔截或禁止。需要針對(duì)爬蟲(chóng)類(lèi)型,采取不同措施,如對(duì)于掃描漏洞、抓取內(nèi)容等惡意爬蟲(chóng),應(yīng)提供更嚴(yán)格的防護(hù)機(jī)制;而對(duì)于提升網(wǎng)站質(zhì)量或服務(wù)的善意爬蟲(chóng),可采取靈活的管理策略。Akamai為幫助企業(yè)更好地抵御惡意爬蟲(chóng)的威脅,基于不同類(lèi)型爬蟲(chóng)的特點(diǎn),提供了差異化的解決方案。
爬蟲(chóng)技術(shù)是一把“雙刃劍”,合理利用可以為企業(yè)發(fā)展帶來(lái)更多發(fā)展機(jī)遇,但若被惡意者利用,則會(huì)給發(fā)展帶來(lái)巨大的負(fù)面影響,因此企業(yè)對(duì)于爬蟲(chóng)技術(shù),要時(shí)刻保持警惕,并構(gòu)建更完善的防護(hù)策略,以更好地保護(hù)自己免受惡意爬蟲(chóng)攻擊,加速電商全球發(fā)展步伐。