人工智慧中的資料標註任務,如何監控標註質量?

時間 2021-06-05 12:18:02

1樓:史越

孩子成長過程中營養至關重要,不同的成長階段有著不同的需求。人工智慧的發展也是如此,依靠海量資料餵養的它們已經逐漸成長。AI企業在落地過程中發現,所需要的資料維度和複雜度也越來越高,高質量的資料服務行業火熱起來。

當對於資料標註的規模和質量有一定標準要求時,單單依靠對標註員的管理優化無法從根本上解決問題。資料標註的精確性、多樣性以及標註效率,是乙個系統性工程,需要專業的標註團隊、標註工具以及管理流程。一般情況下,需要對標註人員進行技巧培訓,從專案背景、工具操作、專業積累、時間管理等方面做統一標準管理。

可以參考業內在資料標註方面比較領先的資料服務商Testin,Testin在資料標註質量、效率、安全性等方面都具有標桿參考價值。

KPI對於標註人員管理重要但不是第一原則,建議公司內標註資料的規模到一定程度後,交由專業的標註服務商來做,對於企業也可起到降本增效的目的。另外,Testin這種資料服務商也支援人員駐場服務,若企業內有長期標註需求,對於標註人員、環境等有要求的情況下可以考慮人員駐場。

2樓:星塵紀元

在人工智慧細分的場景,資料質量成為深度學習進行模型訓練的關鍵。平台工作人員的匿名性,虛擬性和流動性等侷限性,可能會導致無法是是直接監控並管理整個流程,最終很可能直接影響資料的準確度,由此,質量監管(QM)對此尤為重要。

專業的資料標註平台多數會採用輔助標註工具去提高資料標註的準確度,避免了純手工標註出現較大誤差,從而提公升標註質量。或者部分平台會安排專職監督和考核的人員對標註資料進行審核,篩選出可被使用的合格資料。但是由於審核,監督標註資料質量需要極大的成本,與其自己設計複雜的監督流程,不如把專業的事情交給專業的公司去做。

專業的資料標註平台可以用較低的成本獲得更精確,質量更高的資料

From:星塵資料 stardust

3樓:何申

資料採集標註的市場很大,BAT都已經涉足。我是個人團隊,五六十人,尋求過完年長期合作的公司,本團隊主要做簡單的資料標註。

大資料行業 人工智慧行業 資料標註員發展職業線是怎麼樣的?

曼孚科技 資料標註員職業發展線是 標註員 質檢員 專案經理。資料標註員的工作是借助標註工具對資料進行標註,產出滿足機器學習的標註資料集。在資料標註行業中,標註員是最基礎的崗位。隨著標註員業務能力水平的提公升,標註員可以提公升至質檢員。相比於標註員,質檢員對於標註業務能力要求比較高,對於標註文件的理解...

國外的人工智慧領域,資料標註是怎麼做的?

倍賽 M Turk的質量大家有所了解小倍不再多說。單說眾包這塊,確實不容易保證專業性和標註質量,所以不是所有標註工作都適合用眾包這種方式。海外客戶非常注重質量,現在一些企業已經開始找優質資料公司。我們的海外客戶就很多,包括伯克利大學著名的自動駕駛產業平台Berkeley DeepDrive承擔了其9...

人工智慧和大資料該如何選擇?

小二 大資料接地氣的講就是一大堆的資料,不過這個是名詞。我們從技術角度講通常所說的大資料是乙個動詞,是指如何分析提取大資料中的資訊,並加以使用。人工智慧接地氣的講就是使用計算機來模擬人的思考方式 神經元 的程式,從而來解決一些傳統程式比較難解決的問題。例如影象識別。人工智慧本質還是演算法和程式。本質...