如何運營一家數據標註公司 (市場結構篇)

隨着AI浪潮的斬頭露角,數據標註行業也猶如雨後春筍般蓬勃的發展起來。

本文就目前國內數據標註行業存在的幾個階段性結構特徵進行展開,讓更多想了解數據標註的AI公司、AI實驗室、準備加入數據標註的朋友們,快速熟悉目前數據標註行業的現狀和運營數據標註公司應該注意的若干問題。
數據標註市場目前有下面幾種結構:
一、 衆包結構
顧名思義,就是把需要完成的任務分發給大衆志願者(也就是市場上說的兼職)。這其中就出現了衆包公司。衆包公司聯繫到需求數據標註的客戶,和客戶建立合作關係後,將客戶需求傳達給合作的大衆志願者,從而形成一個“需求公司——數據標註衆包公司——多個大衆志願者”這樣一個衆包結構。
圖片描述
這種衆包結構的優點就是可以組織起社會上的大衆志願者進行數據標註,而大衆志願者不用佔用太多的公司資源,勞動力成本相對較低。對於數據標註衆包公司費用支出的核心——人工來說,無疑是可以極大的減少公司的運營成本,從而使公司自身在面對需求數據標註的客戶時的報價更具有競爭力。
當然,衆包結構的缺點和優點一樣顯而易見,甚至可以說它的缺點已經慢慢的大過了它的優點,爲什麼這麼說呢?

1. 需要擁有大量的志願者基數
由於上游客戶的需求可能千變萬化,同時客戶的需求很大概率都是階段性的,這就要求衆包公司合作的大衆志願者首先自身得是穩定的。但是由於大衆志願者就是利用閒散時間進行工作的這種特性,長期穩定的大衆志願者幾乎不太可能,這就要求數據標註衆包公司必須擁有龐大的大衆志願者團隊,形成一個體系。才能保證在發放任務的時候總是有充足的大衆志願者進行合作。
2. 溝通成本高昂
而當大衆志願者的數量能夠滿足任務要求時,我們又不得不面對另一個事實:數據標註衆包公司在與需求公司洽談合作時只能有針對性的進行數據標註類型的選擇。如果在選擇數據標註項目上普遍撒網,就會面對公司自身需要投入巨大的精力去培訓那些不斷更迭的大衆志願者。而很多時候公司在大衆志願者合作方面節約下來的成本,其實已經全部轉嫁到了公司培訓、糾錯諸如此類的溝通環節。
3. 數據保密困難
目前國內的AI公司,AI實驗室還沒有形成井噴之勢。但就現階段而言依然有衆多AI公司,AI實驗室在進行着高度重疊的產品研發。對於有標註需求的公司來說,如果被標註數據都是真金白銀獲取來的,那麼倘若在衆包環節衆包公司處理不當,很有可能AI公司辛苦獲取的數據就成了其他AI公司的嫁衣。
4. 無法給予需求公司靈活的服務
因爲大衆志願者擁有流動性的特點,一旦需求公司改變原有標註需求,數據標註衆包公司是沒有辦法在較短的時間進行調整的。同時,數據標註衆包公司的客戶羣體也相對單一,由於大衆志願者的羣體特點,數據標註衆包公司只能把更多精力放在需要大批量數據標註,同時標註規則相對簡單的需求公司。但是AI的訓練是一個階段性的過程,基本上都是:小批量找特徵訓練——較小批量簡單場景訓練——較小批量複雜場景訓練——大批量訓練。在數據標註衆包公司砍掉處在第一階段的AI公司和AI實驗室的時候,其實也就是砍掉了相當一部分潛在客戶。
二、 工廠結構
有了衆包結構裏的兼職架構,下面就着重介紹一下全職架構,也就是工廠結構。
工廠結構相較於衆包結構形式上要簡單一些,省去了中間衆包商這個環節,進而形成了一個“需求公司——數據工廠”這樣的工廠結構。
圖片描述
相較於數據衆包公司,數據工廠的優點就是標註人員穩定,能做到需求方和數據標註方即時溝通,溝通成本大大降低。同時,由於數據是以一對一的形式進行傳遞的,也大大降低了數據被泄露的可能性。
雖然工廠結構可以有效的規避很多衆包結構中存在的種種問題,但是依舊有很多問題他是沒辦法解決的,那我們就看看有哪些問題工廠結構解決不了呢?
1. 選擇標註公司的困難
在市場上可能有成百上千個工廠結構的數據標註公司,但是有數據標註需求的公司應該如何選擇呢?如果沒有選擇正確的標註公司,不僅得不到高質量的標註數據,更有可能因爲數據大批量不合格而重複返工,進而耽誤了原本項目的工期。而在這個AI公司百家爭鳴的時代,時間纔是最重要的,誰的產品最先出世,也就最有機會獲得資本的垂青。但是有標註需求的公司如何在衆生百態的標註市場中選擇一個質量和效率雙重過硬的公司其實是一件非常困難的事情。
2. 工廠結構公司兩極分化
因爲各種各樣的原因,工廠結構的公司兩極化很明顯:較大的可以達到上千人;而較小的,只有幾個人。因爲兩級分化的原因,市場現在就會出現一個很有意思的現象:大的公司很少會去對接短期且數據量較少的項目,因爲承接較少的數據量對於一個較大的工廠結構的標註公司來說很有可能都不夠公司日常的管理運營成本;反之,小的標註公司可以承接短期數據量較少的項目,但是在大批量數據殺到的時候,又會顯得捉襟見肘,難以承接。
3. 人工成本風險較高
首先因爲是全職,不論有沒有任務,都涉及一個員工薪酬的發放。其次,需求方公司的需求有大概率是呈週期性的,就是有可能這周公司有項目做,下週可能就沒有了。這就會映射出一個工廠結構的數據標註公司非常尷尬的處境:合同期限內需要完成的大項目可能需要大量人員進行參與。可是一旦合同結束了,公司卻又沒有找到後續能夠進行人員分配的項目,這就會給數據標註公司的運營帶來挑戰。
圖片描述
三、 衆包+工廠結構
有了衆包和工廠結構的總結,我們不難發現,他們各有各的優點,也各有各的缺點。這裏提出的衆包+工廠結構,其實就是將兩者進行了優缺點的融合,揚長避短。
那麼大家肯定會有疑問,怎麼融合呢?如何才能將這兩種結構很好的在實際操作中統一起來呢,歡迎大家持續關注,在後面的篇幅裏,會有詳細介紹。

閱讀原文請進入:http://www.awkvector.com/

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章