A：快到平安夜、圣誕節(jié)、跨年夜了，準(zhǔn)備去哪?
B：想去香港，前兩天看到有低價票，泰國也不錯，最近也有低價票，國內(nèi)就算了，沒看到什么打折活動。
A：搶得到嗎?我沒有一次搶到低價票的。
B：試試唄，我家網(wǎng)還行。
結(jié)果 B 小姐深夜敷著面膜準(zhǔn)備發(fā)大招搶的特價機票被秒光，她氣得砸鍵盤，“對面和我搶票的什么鬼?”
她有所不知的是，同她搶票的不是鬼，是爬蟲。
爬蟲如何搶座?“賣票賣票!北京往返大阪的往返機票只需 2599 元!”
類似出現(xiàn)在朋友圈中的賣票信息很是常見，大多用戶在查詢到航企 APP 中票價已翻數(shù)倍時情不自禁剁了手。殊不知航企每每發(fā)出的特價票幾乎都被這些機票代理人利用“爬蟲”技術(shù)搶占一空，所以搶不到低價票不要再怪網(wǎng)絡(luò)問題了。
具體來說，這一技術(shù)利用了航企訂票、購票流程中的帳期，即訂票后可能有10- 30 分鐘或者更多的支付時間。自動化的爬蟲技術(shù)正是抓住了這一時間差，利用虛擬身份進(jìn)行訂票。此時雖未付錢，但此票已歸屬該虛擬身份，在賬期內(nèi)票務(wù)方將這些低價票掛在自有網(wǎng)站、APP、微店、淘寶店或朋友圈等平臺高價轉(zhuǎn)賣，謀取差價。若在賬期內(nèi)沒有賣出此票，爬蟲也可在限定時間內(nèi)取消訂單或在訂單失效后馬上續(xù)訂，保證此票一直在手。
而普通用戶在航企官網(wǎng)查看時卻顯示低價票已售盡。
爬蟲肆虐，是何原因?爬蟲程序(crawler/spider)，又稱，蜘蛛程序。雖然以多足動物命名但其起源卻是搜索引擎，即按照一定的規(guī)則，自動地抓取互聯(lián)網(wǎng)信息的程序或者腳本。
而隨之漫長的進(jìn)化，這一物種也被用于各大互聯(lián)網(wǎng)金融、電商平臺，以及社交領(lǐng)域等。在上述搶票環(huán)節(jié)，爬蟲不僅抓取航企官網(wǎng)的機票價格，在發(fā)現(xiàn)特價機票后更充當(dāng)“偽裝者”，仿冒真人用戶搶訂機票。
事實上，航企投放的低價機票很少被普通用戶買到，據(jù)業(yè)內(nèi)人士估計，80% 以上低價機票被票務(wù)公司的爬蟲搶走。
爬蟲肆虐到底是何原因?
“利益驅(qū)動，這是一切事情最原始的出發(fā)點?！?。浙江邦盛科技技術(shù)總監(jiān)李白對雷鋒網(wǎng)如此說。
如果說利益是起點，那提直降代、行業(yè)競爭、網(wǎng)站獲客則為爬蟲肆虐填了一把火。
提直降代，航空公司被迫加入爬蟲之戰(zhàn)
2015 年上半年，國資委要求幾家國有航空公司未來三年內(nèi)直銷比例要提升至50%，同時代理費要在 2014 年的基礎(chǔ)上下降 50%。
一場“提直降代”大戰(zhàn)被推向制高點，有業(yè)內(nèi)人士介紹稱，直銷比例每提高 10%，航空公司就可以從代理人手中節(jié)約近 10 億元的分銷費用。相反代理渠道出票占比下降，低價票、退改簽、捆綁保險及其他產(chǎn)品等“傳統(tǒng)盈利空間”被打壓。利潤下降催生了票務(wù)公司轉(zhuǎn)型，通過爬蟲賺取差價。
行業(yè)競爭促生爬蟲肆虐
任何一個行業(yè)都存在競爭，各大航空公司除了不斷優(yōu)化飛機設(shè)施以及服務(wù)態(tài)度來增加用戶體驗，也需要技術(shù)手段。
舉例來說，A、B 兩家航企皆開通了北京到馬來西亞航線，如果 A 航企通過爬蟲技術(shù)占據(jù)了 B 公司大部分票源，造成其無票可售后，乘客自然轉(zhuǎn)向B公司購票。又或者利用爬蟲技術(shù)占據(jù)經(jīng)濟艙座位，面對貴賓區(qū)高昂的價格多數(shù)乘客會選擇更換平臺購票。
而遭受虛擬占座導(dǎo)致資源浪費，賣不出票的 A 公司會善罷甘休嗎?
當(dāng)然不會，，互爬大戲就此掀開。
OTA 網(wǎng)站吸引用戶
如同程、攜程、驢媽媽、去哪兒之類的 OTA 網(wǎng)站如何通過推廣手段，獲取更多的客戶?
降低票價吸引客戶，自然最有效的手段。但如何定價才能既不傷害自己的利潤又略低于他家則是最關(guān)鍵的問題。要做到這一點勢必先了解其他友商、同行普遍票價，此時便用到了爬蟲技術(shù)。這似乎變成了行業(yè)潛規(guī)則，你爬我，我爬你，造成爬蟲流量占據(jù)平臺總流量 95% 的奇景很是平常。
之后要做什么?看似常見的機票爬蟲實則造成了一系列連鎖反應(yīng)，用戶信息泄露，平臺流量崩潰，機票詐騙，最初幾塊骨牌的傾斜引發(fā)的是整排多米諾骨牌的傾塌。
爬蟲與反爬蟲是博弈的過程，在此過程中無論是道高一尺還是魔高一丈都會引發(fā)不同的碰撞。
常規(guī)“反爬蟲”技術(shù)包括IP限頻限次、識別控制代理IP、祭出各類復(fù)雜驗證碼等。其中，IP 來源單一、從未成交過訂單且行動異常的IP、訪問頻次過高等容易被識別出的“爬蟲”，會被封掉IP。而對于航企來說，這遠(yuǎn)遠(yuǎn)不夠。
航空公司下一步應(yīng)該做什么?
李白告訴雷鋒網(wǎng)，航企可以從兩方面考慮，其一是從業(yè)務(wù)場景上改進(jìn)。
