Google通過(guò)了解語(yǔ)言環(huán)境將搜索量提高了10％

谷歌目前正在對(duì)其核心搜索算法進(jìn)行更改，該算法表示可以更改十分之一查詢中結(jié)果的排名。它基于Google研究人員開發(fā)的尖端自然語(yǔ)言處理(NLP)技術(shù)，并在過(guò)去10個(gè)月中應(yīng)用于其搜索產(chǎn)品。

本質(zhì)上，Google聲稱它通過(guò)更好地了解單詞在句子中的相互關(guān)系來(lái)改善結(jié)果。谷歌昨天在一次新聞發(fā)布會(huì)上討論了一個(gè)例子，其搜索算法能夠解析以下短語(yǔ)的含義：“你能為藥房買藥嗎?”

Google研究員兼搜索副總裁Pandu Nayak認(rèn)為，舊的Google搜索算法將該句子視為“單詞袋”。因此，它查看了重要的詞，醫(yī)學(xué)和藥學(xué)，并簡(jiǎn)單地返回了本地結(jié)果。新算法能夠理解“為某人”一詞的上下文，以意識(shí)到這是一個(gè)有關(guān)您是否可以接受他人處方的問(wèn)題-并且返回了正確的結(jié)果。

以前，GOOGLE將查詢視為“一句話”

經(jīng)過(guò)調(diào)整的算法基于BERT，它代表“來(lái)自變壓器的雙向編碼器表示形式”。首字母縮略詞的每個(gè)單詞都是NLP中的一個(gè)術(shù)語(yǔ)，但要點(diǎn)是BERT看起來(lái)不像一袋單詞那樣對(duì)待句子整個(gè)句子中的所有單詞。這樣做可以使人們認(rèn)識(shí)到“為某人”一詞不應(yīng)該被丟棄，而是對(duì)句子含義必不可少的。

BERT認(rèn)識(shí)到應(yīng)該注意這些單詞的方式基本上是通過(guò)在《瘋狂的里伯斯》(Mad Libs)的泰坦尼克號(hào)游戲中進(jìn)行自學(xué)而實(shí)現(xiàn)的。Google提取了一個(gè)英語(yǔ)句子集，并隨機(jī)刪除了15%的單詞，然后BERT的任務(wù)就是弄清楚這些單詞應(yīng)該是什么。Google高級(jí)研究員兼研究高級(jí)副總裁Jeff Dean認(rèn)為，隨著時(shí)間的流逝，這種培訓(xùn)對(duì)于使NLP模型“理解”環(huán)境非常有效。

Google引用的另一個(gè)示例是“無(wú)路邊停車”。“ no”一詞對(duì)于此查詢至關(guān)重要，在搜索中實(shí)施BERT之前，Google的算法就忽略了這一點(diǎn)。

谷歌表示，在過(guò)去的幾天中，它一直在推出算法更改，而且，它再次影響了在用英語(yǔ)進(jìn)行的搜索查詢的大約10%。其他語(yǔ)言和將在以后介紹。

搜索的所有更改均經(jīng)過(guò)一系列測(cè)試，以確保它們實(shí)際上在改善結(jié)果。其中一項(xiàng)測(cè)試涉及使用Google的人工審核人員隊(duì)伍，他們通過(guò)評(píng)估搜索結(jié)果的質(zhì)量來(lái)培訓(xùn)該公司的算法-Google還會(huì)進(jìn)行實(shí)時(shí)A / B實(shí)時(shí)測(cè)試。

并非每個(gè)查詢都會(huì)受到BERT的影響，它只是Google用于對(duì)搜索結(jié)果進(jìn)行排名的許多不同工具中的最新工具。究竟如何將它們完美地結(jié)合在一起，這還是一個(gè)謎。Google故意將其中的某些過(guò)程神秘化，以防止垃圾郵件發(fā)送者玩弄其系統(tǒng)。但是由于另一個(gè)重要原因，它也很神秘：當(dāng)計(jì)算機(jī)使用機(jī)器學(xué)習(xí)技術(shù)做出決策時(shí)，可能很難知道為什么要做出這些選擇。

BERT可能會(huì)影響所有GOOGLE搜索的10%

所謂的機(jī)器學(xué)習(xí)“黑匣子”是一個(gè)問(wèn)題，因?yàn)槿绻Y(jié)果在某種程度上是錯(cuò)誤的，則可能很難診斷原因。谷歌表示，它已經(jīng)努力確保將BERT添加到其搜索算法中不會(huì)增加偏見-這是機(jī)器學(xué)習(xí)的一個(gè)普遍問(wèn)題，其訓(xùn)練模型本身是有偏見的。由于BERT受過(guò)龐大的英語(yǔ)句子的訓(xùn)練，而這些句子本身也帶有偏見，因此需要密切注意。

該公司還表示，至少在大型發(fā)行商看來(lái)，它預(yù)計(jì)算法不會(huì)直接或間接影響流量。每當(dāng)Google提出更改搜索算法的信號(hào)時(shí)，整個(gè)網(wǎng)絡(luò)就會(huì)出現(xiàn)并引起注意。谷歌搜索排名的變化使公司生死存亡。

每個(gè)在網(wǎng)絡(luò)流量上賺錢的人都應(yīng)該引起注意。說(shuō)到搜索結(jié)果的質(zhì)量，Payak說(shuō)：“這是我們過(guò)去五年中最大，最積極的變化，也許是自開始以來(lái)最大的變化。”