谷歌引入尖端NLP技術 英文語種搜索引擎查詢效果提高10%
發布時間：2019-10-28 16:08:13
文章來源：網易科技報道
谷歌目前正在對其核心搜索算法進行調整，稱這可能會幫助搜索查詢效果提高10%。谷歌引入了其研究人員開發的尖端自然語言處理(NLP)技術，并在
谷歌目前正在對其核心搜索算法進行調整，稱這可能會幫助搜索查詢效果提高10%。谷歌引入了其研究人員開發的尖端自然語言處理(NLP)技術，并在過去10個月中將其應用于搜索產品中。
本質上，谷歌聲稱其可通過更好地理解句子中單詞之間的關系來提高搜索結果。谷歌研究員兼搜索業務副總裁潘杜·納亞克(Pandu Nayak)表示，老版谷歌搜索算法將句子分解成“一連串的單詞”，并分析重要單詞的意思，從而給出簡單的本地搜索結果。而新的算法能夠理解上下文語境，進而給出更精確準確的結果。
谷歌調整后的搜索算法基于語言表達模型BERT，即“Bidirectional Encoder Representations from Transformers”的縮寫，它將句子作為整體來看待，更注重句子的整體意義。谷歌高級研究員兼研究高級副總裁杰夫·迪恩(Jeff Dean)表示，隨著時間的推移，這種培訓在讓NLP模型“理解”上下文方面變得非常有效。
谷歌表示，它在過去幾天始終在推動算法改進，這應該會影響到美國約10%的英語搜索查詢結果，其他語種的改進將在稍后討論。
對搜索的所有改進都會經過一系列測試，以確保它們確實改善了查詢結果。其中一項測試涉及使用谷歌的核心人類評審員，他們通過對搜索結果的質量進行評級來培訓公司的算法。此外，谷歌還會進行實時A/B測試。
當然，并不是每個查詢都會受到BERT的影響，這只是谷歌用來對搜索結果進行排名的諸多不同工具中最新的一個。這些工具到底是如何兼容工作的，這仍然是個謎。谷歌有意將其中某些過程保秘，以防止垃圾郵件發送者對其系統進行欺騙。
除此之外，保密的另一個重要原因是：當計算機使用機器學習技術做出決定時，很難知道它做出這些選擇的原因。機器學習的所謂“黑匣子”是個棘手問題，因為如果結果在某種程度上是錯誤的，那么很難診斷原因。
谷歌表示，該公司已經努力確保在搜索算法中加入BERT后不會增加偏差，這是機器學習中的一個常見問題，機器學習的訓練模型本身也是存在偏差的。由于BERT是在巨大英語句子語料庫上訓練的，這些句子本身也是有偏見的，所以這是個需要密切關注的問題。
該公司還表示，預計其新算法在引導流量方面不會出現重大變化，至少對于大型出版商而言是這樣。每當谷歌發出改變其搜索算法的信號時，整個網絡都會加以密切關注，畢竟谷歌搜索排名的變化有時候決定了公司的生死存亡。
每個依靠網絡流量賺錢的人絕對應該注意到這一點。當談到其搜索結果的質量時，納亞克說：“這是我們在過去五年中經歷的最積極的變化，也可能是公司成立以來最大的變化之一。”
樂活HOT
-
2021年福建舉辦紅色電影展映活動
記者20日獲悉，為發揮好紅色電影在黨史學習教育中的特殊作用，2021年我省舉辦紅色電影展映活動近63萬場，觀影人數近1300萬人次。來自全省各
-
浙江遂昌教育提質行動推進教育高
近日，遂昌育才高級中學學生李何其榮獲第38屆全國中學生物理競賽金牌，并保送北大。近年來，遂昌大力實施教育提質行動，加快推進教育高質量
-
2021年黑龍江貨物貿易進出口總值
據哈爾濱海關統計，2021年，我省貨物貿易進出口總值1995億元人民幣，比上年(下同)增長29 6%，比2019年增長6 9%，進出口增速高于全國增速8 2
-
2021年遼寧大連持續推進農村環境
2021年，大連市生態環境部門持續推進農村環境綜合整治，完成116個省級美麗宜居村污水和水源地規范化整治任務，完成15處農村黑臭水體治理。
-
遼寧大連持續深入推進環評審批制
2021年，大連市深入推進環評審批制度改革，實施網上辦十項舉措和容缺受理即來即辦秒批秒辦全程網辦，實現即來即辦事項達到40%以上、全程網
-
青島上線運行全國首個公交鑰匙智
駕駛員于惠你好，請發9時15分2路線，請取33號車鑰匙。青島公交2路線駕駛員于惠完成面部識別后，面前的智能鑰匙柜自動開啟，于惠按照語音提
-
國際公共藝術論壇系列活動在青島
第五屆國際公共藝術獎頒獎典禮暨國際公共藝術論壇系列活動在青島西海岸新區舉行。作為國際公共藝術領域最高成就的象征，國際公共藝術獎(IAP
-
2021年青島機場完成貨郵吞吐量同
青島機場集團透露，2021年，青島機場共完成貨郵吞吐量23 76萬噸，同比增長14 9%。其中，國際貨郵吞吐量為9 63萬噸，在國外疫情形勢嚴峻的情
-
濰坊商務局去年支持小微企業出口
2021年以來，濰坊市商務局助力外貿企業穩定發展，會同中國信保濰坊營業部，克服疫情不利因素，簡化業務程序，將2200余家小微外貿企業納入省
-
山東兩市第三類醫療器械企業UDI
近日，記者從省藥監局區域檢查第四分局獲悉，2021年，威海、煙臺兩市第三類醫療器械生產企業UDI實施率達到100%，35家企業170762條產品信息
娛樂LOVE
山東出臺新型城鎮化規劃（2021-2035年）
省政府新聞辦召開新聞發布會，解讀《山東省新型城鎮化規劃(2021-2035年)》?！兑巹潯诽岢?，到2025年，山東新型城鎮化將初步實現智慧化、綠
福建寧德在全省率先啟動市屬國企技能
近日，記者從寧德市相關部門了解到，寧德市以薪酬改革為突破口，在全省率先啟動技能人才改革，實現市屬國企技能人才多勞多得，確保上升有通
2022中國·福州新春文化旅游月正式啟動
為期一個月的文旅盛宴——2022中國·福州新春文化旅游月正式啟動。新春文化旅游月由福州市人民政府主辦，福州市文化和旅游局、各縣(市、區)
2021年福建石獅新增市場主體32195戶
記者從石獅市市場監督部門獲悉，2021年，石獅市新增市場主體32195戶。其中，新增內資企業8309戶、農民專業合作社3戶、外資企業113戶、個體
“十四五”期間福建將推進醫保“八項
記者從省政府新聞辦舉行的《福建省十四五全民醫療保障專項規劃》和《關于完善職工基本醫療保險門診共濟保障機制的實施意見》新聞發布會上獲