sponsored links

更好的機器學習需要更好的資料標註

金錢買不到幸福,它絕對不能買到你的愛情。還有傳言說,錢也買不到好的標註資料,這些資料用以訓練特定的AI應用。——來自一個被困擾的人工智慧開發者。

有人在蘋果花了數億美元收集標籤資料,但依然沒有好的結果。人們意識到AI非常強大。但為了實現它,必須獲得大量的訓練資料。

看到這一需求,許多專業標註公司誕生了。例如Datasaur,這是一個自動化資料標註的軟體。當然,資料標註首先需要以人工的方式開始,特別是在人工智慧專案的開始階段,到了專案的中期或末期,機器學習本身可以用於自動標記資料,也可以生成合成資料。

更好的機器學習需要更好的資料標註

Datasaur軟體的主要目標是簡化人工資料標註的操作,並引導他們以最低的成本建立更高質量的訓練資料。由於它的目標是那些需要整天標記資料的高階使用者,因此建立了功能鍵來加速標註過程,以及適合專用資料標註系統的其他功能。

不過在這個過程中,Datasaur也有了其他幾個目標,包括消除偏見。還提供了專案管理能力,以清楚地闡明標籤指南,以確保隨著時間的推移,標籤標準繼續得到保持。

資料標註的主觀性是使這門學科充滿陷阱的原因之一。

例如,想出一種方法,自動給文章貼上適合或不適合家庭的標籤。通常可以參考電影分級制度,類似PG、PG13、R級。自然認為這將是一個非常簡單的任務。然後事實證明,科技公司認為合適的做法與電影行業認為合適的做法有很大不同。還有很多灰色地帶的例項,對於什麼是合適的,什麼是不合適的,不同的社會觀點將會非常不同。

更好的機器學習需要更好的資料標註

解決這類問題沒有捷徑可走。但是,有一些方法可以幫助公司將這些業務流程自動化,包括提供一個用於回答這些資料標註問題的決策譜系。這就是建立Datasaur軟體的原因。

你不會讓你的團隊為你的設計師建立一個Photoshop。只要買現成的Photoshop就行了。當你只需要做資料標註,我們也可以找一家這樣專業的公司。

更好的機器學習需要更好的資料標註

起初,許多客戶認為計算機視覺是最熱門的AI技術。但最近,NLP用例非常熱門,特別是那些依賴於大型模型的用例,如BERT和GPT-3。因此Datasaur產品開始吸引注意力,每週被用於給100萬條資料貼標籤,包含Netflix、Zoom和Heroku等知名公司都在使用。

Datasaur也被專業資料標註機構使用,例如iMerit。在世界各地擁有5000名員工,iMerit已成長為資料標籤行業的強大力量。該公司擁有100個客戶,其中包括許多家喻戶曉的品牌,這些客戶利用其資料標註網路,讓深度學習模型與高質量的標註資料保持一致。

資料標籤的主觀性使得它不是單純的一項交易。

通常情況下,需要坐下來,弄清楚資料在哪裡,需要什麼。它不僅僅是工具、人員或過程。這是三者的結合。

上下文對於資料標註過程絕對是至關重要的。這大概是因為機器對上下文的理解能力很差。也可能是因為AI用例在不斷變化。不管是什麼原因,這種需求是顯而易見的。

分享一個卡車上施工工人的例子,可以證明上下文對於開發高質量的培訓資料是多麼重要。想象一下,有一個工人坐在卡車上,每到一個維修路段,就要下車幹活,然後又回到卡車上。所以資料標籤的問題是:工人是行人嗎?他是卡車的一部分嗎?還是說他是第三種人?

更好的機器學習需要更好的資料標註

如果你在計算車輛,你就不會在意工人上下車。你只會對工程車感興趣;但如果你試圖操縱其他東西(比如自動駕駛或交通流量控制),避免撞到垃圾工,垃圾工的動作將會引起你極大的興趣;如果你在尋找可疑的行為,你會想把垃圾工排除在一系列類似的行為之外。

但很明顯,工人有不同的存在狀態,取決於人工智慧應用的視角。對於資料標註來說,證明一個事實:在不同的時間,一條資料可以有不同的標註。有的時候,沒有單一的答案。

資料標註過程的細緻性對於提高資料質量至關重要,這直接影響機器學習模型的預測推理質量。資料可以讓預測準確率達到60%到70%,也可以讓預測準確率達到95%。

根據用例的不同,準確性是至關重要的。假如正在構建一個模型從影片中來識別偷東西的行為,一個錯誤的否定(沒有發現盜竊行為)和一個錯誤的肯定(指控無辜的顧客)之間後果有很大的區別。

更好的機器學習需要更好的資料標註

分類: 收藏
時間: 2021-12-16

相關文章

未來五年,國家將在農村幹這3件事,和每個村有關,早做準備

未來五年,國家將在農村幹這3件事,和每個村有關,早做準備
鄉村的建設和三農改革發展工作已經進入了"十四五"規劃期,按照有關部署,2021年到2025年截止是我國第十四個五年規劃,這個規劃都是圍繞著三農的發展做出了戰略性部署,是一份比較全面 ...

就近入學比例要超99%!北京市教委明確,未來五年這樣做
近日,北京市教委釋出了<北京市"十四五"時期教育改革和發展規劃(2021-2025年)>.明確提出兩個目標:到2025年,北京義務教育就近入學比例要超過99%:到202 ...

比亞迪股份與Levo聯手,擬未來五年合作部署5000輛電池電動汽車

比亞迪股份與Levo聯手,擬未來五年合作部署5000輛電池電動汽車
日前訊息,電動汽車生產商比亞迪與Levo Mobility宣佈合作計劃,將整合Nuveve Holding領先的車輛到電網(V2G)技術與比亞迪的電池電動汽車(BEV),並計劃未來五年聯合部署多達50 ...

未來五年,北三縣的“學區之路”

未來五年,北三縣的“學區之路”
在近期北京公佈的<北京市"十四五"時期教育改革和發展規劃(2021-2025年)>中,明確提出: 推進城市副中心與河北廊坊北三縣教育統籌規劃發展,促進優質教育資源向北三 ...

深度盤點未來五年最具價值的鋰電黑馬,中國鋰電未來一觸即發

深度盤點未來五年最具價值的鋰電黑馬,中國鋰電未來一觸即發
發現未來價值,從瞭解公司開始 最近一個月的時間整個鋰電產業鏈出現了大幅回撤的現象,所以在二級市場之中對於鋰電產業鏈的爭議最大,一方面各種鋰鹽以及電池材料的價格不斷飆漲,而二級市場中相關產業鏈公司則出現 ...

未來五年燃料電池成本降逾七成 中國商用車市場將成關鍵參與者
財聯社(北京,記者 劉陽)訊,燃料電池,特別是重卡領域氫能應用的話題再一次被提及.9月16日,科技部副部長相里斌在當日開幕的2021世界新能源汽車大會上表示,科技部將把發展動力電池作為科技支援主攻方向 ...

全球正處於大變局時代,我國也面臨許多困境,未來五年很關鍵

全球正處於大變局時代,我國也面臨許多困境,未來五年很關鍵
全球的時代開始慢慢地做出了改變,我們和美國的關係也將會進入到一個徹底脫離的狀態,這樣的一個狀態,其實會導致未來5年整個世界的格局變化特別大.其實我們國內也面臨著非常多的困難,未來的5年非常的關鍵.我們 ...

未來五年房價是漲還是跌呢?

未來五年房價是漲還是跌呢?
據國家統計局的資料顯示,截止到2020年,全國平均房價已經達到9860元/平,相比98年的水平,增長幅度約5倍,而在部分核心城市,市價更是有10-20倍的增長.所以,對於早期的住房持有者來說,手中的房 ...

這6種人未來五年,買了房和沒買房是人生頭等大事!不能忽視

這6種人未來五年,買了房和沒買房是人生頭等大事!不能忽視
做好購房規劃 凡是預則立,不預則廢,更何況買房置業這樣的大事.對於很多人來說,購房是一項很大的投資,可能要花費一生大部分的積蓄.因此,購房前必須要縝密思考及詳細規劃,以便在購買時做到心中有數,規避一些 ...

未來五年國家對農村,農民的從新定義與發展
隨著城市日益強勁深入發展出現了源動性的放緩.未來農村人口會迴流一部分的人回到農村,國家政策須有應對措施,加強村鎮產業集中,農產品加工與精製提升,儘量是一村一品或一鎮一品.打響知名度與競爭力,努力提高農 ...

書畫板塊:正隱藏著未來五十年的財富!收藏正當時

書畫板塊:正隱藏著未來五十年的財富!收藏正當時
隨著市場的逐步火熱,收藏成為現代人生活中一種調劑品,閒來無事,收藏幾幅名家字畫,修生養性,提升藝術修養,已經成為了人們的一種生活方式.俗話說的好:"家中無字畫,必是俗人家"!國人喜 ...

未來房地產將會出現哪幾大趨勢?
第一,市場存量化程度加深. 在以租賃為重心的供給結構下,預計五年內新房年銷售額從15萬億往下穩步回落,二手房市場交易規模保持在7萬億之上增長.REITS.ABS等住房金融化產品加速推出,租賃市場規模進 ...

國譽未來悅,售價5.6萬/平,面積段為40-140平方米

國譽未來悅,售價5.6萬/平,面積段為40-140平方米
大家早上好!本文內容已輸入2372字,預計閱讀需要13分鐘:本文主要評測國譽未來悅這個樓盤. 01 區域價值 地塊的佔位,受<北京城市總體規劃(2016-2035)>中通州副中心部分,&q ...

清代帽筒瓷器真品價值多少錢

清代帽筒瓷器真品價值多少錢
伴隨我國古玩藝術品的不斷升值,在現在的市場中,不僅僅的古玩藝術品收藏者,就連一些普通民眾也開始收藏一些自己所喜歡的古物.但是在現如今的古玩藝術品收藏市場之中,並不是所有的古物件都值錢 尤其是在當下高仿 ...

1961年,毛主席如何判斷五十年後的中國?

1961年,毛主席如何判斷五十年後的中國?
今年正好是中國共產黨成立一百週年,在這個舉國歡慶的特殊日子裡,我們感嘆現在的國富民強,幸福安康,卻也忘不了前輩們的為今天的幸福做出的奮鬥和努力.每每在這樣的日子裡,我們都希望,先輩們能夠看見如今的山河 ...

4成家庭“手握”2套住房,未來他們會面臨什麼呢?徵兆已顯現

4成家庭“手握”2套住房,未來他們會面臨什麼呢?徵兆已顯現
在過去的幾十年時間裡,中國不少家庭在房地產市場上可謂是"前赴後繼",為了買一套房子,這些家庭掏空了積蓄,還背上了長達幾十年的高額貸款.其主要目的就是為了滿足年輕人成家.子女上學以及 ...

在未來10年裡,地段對房地產的重要性不言而喻

在未來10年裡,地段對房地產的重要性不言而喻
據統計,2010年全國平均房價為4725元/平方米,2020年全國平均房價為9860元/平方米,基本接近萬元大關,從近10年的房價資料看,全國房價均價基本翻了一番,部分城市房屋價格漲幅遠遠高於平均房價 ...

杜蘭特車價值436萬美元,居榜首;詹姆斯車價值279萬,居第二

杜蘭特車價值436萬美元,居榜首;詹姆斯車價值279萬,居第二
根據福布斯2021年運動員身價排名,美媒體列出了NBA球員豪車排行榜,以436萬美元的杜蘭特排名第一,以279萬的詹姆斯排名第二.杜蘭特一共有8輛車,最值得關注的是,他有一輛福特GT40,1996款, ...

高德地圖與中國國家地理達成合作 上線精品自駕遊路線

高德地圖與中國國家地理達成合作 上線精品自駕遊路線
為應對十一出遊高峰,高德地圖近日為自駕遊場景量身定製了一個數字化路線表達工具--"趣遊",還與中國國家地理.愛卡汽車等達成合作,邀請專家和達人制作了500多條精品自駕路線,既有川藏 ...

媒體評歷史五十大運動員:喬丹第一人李小龍上榜!梅西領先C羅

媒體評歷史五十大運動員:喬丹第一人李小龍上榜!梅西領先C羅
原創/氧氣是個地鐵 根據9月21日的報道,英國媒體<太陽報>在9月20日評選了一份歷史五十大運動員的榜單.這份榜單的覆蓋範圍是體壇歷史上所有運動員,其中喬丹第一人,詹姆斯無緣前十,在第12 ...