谷歌引入尖端NLP技術(shù) 英文語種搜索引擎查詢效果提高10%
發(fā)布時間：2019-10-28 16:08:13
文章來源：網(wǎng)易科技報道
谷歌目前正在對其核心搜索算法進行調(diào)整，稱這可能會幫助搜索查詢效果提高10%。谷歌引入了其研究人員開發(fā)的尖端自然語言處理(NLP)技術(shù)，并在
谷歌目前正在對其核心搜索算法進行調(diào)整，稱這可能會幫助搜索查詢效果提高10%。谷歌引入了其研究人員開發(fā)的尖端自然語言處理(NLP)技術(shù)，并在過去10個月中將其應(yīng)用于搜索產(chǎn)品中。
本質(zhì)上，谷歌聲稱其可通過更好地理解句子中單詞之間的關(guān)系來提高搜索結(jié)果。谷歌研究員兼搜索業(yè)務(wù)副總裁潘杜·納亞克(Pandu Nayak)表示，老版谷歌搜索算法將句子分解成“一連串的單詞”，并分析重要單詞的意思，從而給出簡單的本地搜索結(jié)果。而新的算法能夠理解上下文語境，進而給出更精確準(zhǔn)確的結(jié)果。
谷歌調(diào)整后的搜索算法基于語言表達模型BERT，即“Bidirectional Encoder Representations from Transformers”的縮寫，它將句子作為整體來看待，更注重句子的整體意義。谷歌高級研究員兼研究高級副總裁杰夫·迪恩(Jeff Dean)表示，隨著時間的推移，這種培訓(xùn)在讓NLP模型“理解”上下文方面變得非常有效。
谷歌表示，它在過去幾天始終在推動算法改進，這應(yīng)該會影響到美國約10%的英語搜索查詢結(jié)果，其他語種的改進將在稍后討論。
對搜索的所有改進都會經(jīng)過一系列測試，以確保它們確實改善了查詢結(jié)果。其中一項測試涉及使用谷歌的核心人類評審員，他們通過對搜索結(jié)果的質(zhì)量進行評級來培訓(xùn)公司的算法。此外，谷歌還會進行實時A/B測試。
當(dāng)然，并不是每個查詢都會受到BERT的影響，這只是谷歌用來對搜索結(jié)果進行排名的諸多不同工具中最新的一個。這些工具到底是如何兼容工作的，這仍然是個謎。谷歌有意將其中某些過程保秘，以防止垃圾郵件發(fā)送者對其系統(tǒng)進行欺騙。
除此之外，保密的另一個重要原因是：當(dāng)計算機使用機器學(xué)習(xí)技術(shù)做出決定時，很難知道它做出這些選擇的原因。機器學(xué)習(xí)的所謂“黑匣子”是個棘手問題，因為如果結(jié)果在某種程度上是錯誤的，那么很難診斷原因。
谷歌表示，該公司已經(jīng)努力確保在搜索算法中加入BERT后不會增加偏差，這是機器學(xué)習(xí)中的一個常見問題，機器學(xué)習(xí)的訓(xùn)練模型本身也是存在偏差的。由于BERT是在巨大英語句子語料庫上訓(xùn)練的，這些句子本身也是有偏見的，所以這是個需要密切關(guān)注的問題。
該公司還表示，預(yù)計其新算法在引導(dǎo)流量方面不會出現(xiàn)重大變化，至少對于大型出版商而言是這樣。每當(dāng)谷歌發(fā)出改變其搜索算法的信號時，整個網(wǎng)絡(luò)都會加以密切關(guān)注，畢竟谷歌搜索排名的變化有時候決定了公司的生死存亡。
每個依靠網(wǎng)絡(luò)流量賺錢的人絕對應(yīng)該注意到這一點。當(dāng)談到其搜索結(jié)果的質(zhì)量時，納亞克說：“這是我們在過去五年中經(jīng)歷的最積極的變化，也可能是公司成立以來最大的變化之一。”
樂活HOT
-
2021年福建舉辦紅色電影展映活動
記者20日獲悉，為發(fā)揮好紅色電影在黨史學(xué)習(xí)教育中的特殊作用，2021年我省舉辦紅色電影展映活動近63萬場，觀影人數(shù)近1300萬人次。來自全省各
-
浙江遂昌教育提質(zhì)行動推進教育高
近日，遂昌育才高級中學(xué)學(xué)生李何其榮獲第38屆全國中學(xué)生物理競賽金牌，并保送北大。近年來，遂昌大力實施教育提質(zhì)行動，加快推進教育高質(zhì)量
-
2021年黑龍江貨物貿(mào)易進出口總值
據(jù)哈爾濱海關(guān)統(tǒng)計，2021年，我省貨物貿(mào)易進出口總值1995億元人民幣，比上年(下同)增長29 6%，比2019年增長6 9%，進出口增速高于全國增速8 2
-
2021年遼寧大連持續(xù)推進農(nóng)村環(huán)境
2021年，大連市生態(tài)環(huán)境部門持續(xù)推進農(nóng)村環(huán)境綜合整治，完成116個省級美麗宜居村污水和水源地規(guī)范化整治任務(wù)，完成15處農(nóng)村黑臭水體治理。
-
遼寧大連持續(xù)深入推進環(huán)評審批制
2021年，大連市深入推進環(huán)評審批制度改革，實施網(wǎng)上辦十項舉措和容缺受理即來即辦秒批秒辦全程網(wǎng)辦，實現(xiàn)即來即辦事項達到40%以上、全程網(wǎng)
-
青島上線運行全國首個公交鑰匙智
駕駛員于惠你好，請發(fā)9時15分2路線，請取33號車鑰匙。青島公交2路線駕駛員于惠完成面部識別后，面前的智能鑰匙柜自動開啟，于惠按照語音提
-
國際公共藝術(shù)論壇系列活動在青島
第五屆國際公共藝術(shù)獎頒獎典禮暨國際公共藝術(shù)論壇系列活動在青島西海岸新區(qū)舉行。作為國際公共藝術(shù)領(lǐng)域最高成就的象征，國際公共藝術(shù)獎(IAP
-
2021年青島機場完成貨郵吞吐量同
青島機場集團透露，2021年，青島機場共完成貨郵吞吐量23 76萬噸，同比增長14 9%。其中，國際貨郵吞吐量為9 63萬噸，在國外疫情形勢嚴(yán)峻的情
-
濰坊商務(wù)局去年支持小微企業(yè)出口
2021年以來，濰坊市商務(wù)局助力外貿(mào)企業(yè)穩(wěn)定發(fā)展，會同中國信保濰坊營業(yè)部，克服疫情不利因素，簡化業(yè)務(wù)程序，將2200余家小微外貿(mào)企業(yè)納入省
-
山東兩市第三類醫(yī)療器械企業(yè)UDI
近日，記者從省藥監(jiān)局區(qū)域檢查第四分局獲悉，2021年，威海、煙臺兩市第三類醫(yī)療器械生產(chǎn)企業(yè)UDI實施率達到100%，35家企業(yè)170762條產(chǎn)品信息
娛樂LOVE
山東出臺新型城鎮(zhèn)化規(guī)劃（2021-2035年）
省政府新聞辦召開新聞發(fā)布會，解讀《山東省新型城鎮(zhèn)化規(guī)劃(2021-2035年)》?！兑?guī)劃》提出，到2025年，山東新型城鎮(zhèn)化將初步實現(xiàn)智慧化、綠
福建寧德在全省率先啟動市屬國企技能
近日，記者從寧德市相關(guān)部門了解到，寧德市以薪酬改革為突破口，在全省率先啟動技能人才改革，實現(xiàn)市屬國企技能人才多勞多得，確保上升有通
2022中國·福州新春文化旅游月正式啟動
為期一個月的文旅盛宴——2022中國·福州新春文化旅游月正式啟動。新春文化旅游月由福州市人民政府主辦，福州市文化和旅游局、各縣(市、區(qū))
2021年福建石獅新增市場主體32195戶
記者從石獅市市場監(jiān)督部門獲悉，2021年，石獅市新增市場主體32195戶。其中，新增內(nèi)資企業(yè)8309戶、農(nóng)民專業(yè)合作社3戶、外資企業(yè)113戶、個體
“十四五”期間福建將推進醫(yī)保“八項
記者從省政府新聞辦舉行的《福建省十四五全民醫(yī)療保障專項規(guī)劃》和《關(guān)于完善職工基本醫(yī)療保險門診共濟保障機制的實施意見》新聞發(fā)布會上獲