0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

有意義的機器學(xué)習(xí)來自于不同的數(shù)據(jù)

5RJg_mcuworld ? 來源:YXQ ? 2019-04-22 15:35 ? 次閱讀

人工智能的三大發(fā)展要素已經(jīng)是老生常談了。算法、算力和數(shù)據(jù)對機器學(xué)習(xí)的重要性和聲望不亞于“謙哥”的喝酒、燙頭和抽煙。

那些熱衷競爭實施機器學(xué)習(xí)的公司現(xiàn)在驚訝地發(fā)現(xiàn),其實,實施一些算法使機器變得對某一數(shù)據(jù)或問題更加智能并不困難。畢竟,這年頭“即插即用”又很穩(wěn)健的算法編程解決方案簡直“爛大街了”。例如,從開源機器學(xué)習(xí)框架谷歌TensorFlow,到微軟Azure Machine Learning以及亞馬遜SageMaker,應(yīng)有盡有。

所以,數(shù)據(jù)已逐漸成為了機器學(xué)習(xí)競爭中最關(guān)鍵的區(qū)分點。一個原因是高質(zhì)量數(shù)據(jù)并不常見;另一原因是數(shù)據(jù)尚未商品化,公司企業(yè)之間存在著信息不對稱。

希望借助AI一臂之力的企業(yè)需要尋求外部數(shù)據(jù)源,甚至這樣的數(shù)據(jù)甚至可能需要他們自己創(chuàng)建。

有用的數(shù)據(jù):有價值、又很稀少

數(shù)據(jù)逐漸變成競爭中的區(qū)分點是因為許多公司根本沒有他們需要的數(shù)據(jù)。盡管幾十年來,公司都在使用通用的會計準則這樣的系統(tǒng)化方法來評估自己,但是這種評估方法一直關(guān)注于實體資產(chǎn)與金融資產(chǎn),也就是實物和錢。2013年甚至給資產(chǎn)定價理論頒了一個諾貝爾獎,強化了已有的對實體或金融資產(chǎn)重要性的認知。

但是,今天最有價值的那些公司貿(mào)易對象是軟件或網(wǎng)絡(luò),而不僅僅是實體或金融資產(chǎn)。在過去的40年內(nèi),資產(chǎn)類型的重心有了很大的變化:1975年,83%的有形資產(chǎn)占整個市場絕大部分份額;而2015年時市場中84%的資產(chǎn)是無形資產(chǎn)。今天的公司巨頭們不再生產(chǎn)咖啡壺也不再售賣洗衣機,他們轉(zhuǎn)而提供應(yīng)用程序,軟件等等。這樣的轉(zhuǎn)變造成了會計記賬的對象和實際產(chǎn)生價值的對象極其不匹配。

結(jié)果就是有用數(shù)據(jù)的缺少已經(jīng)成為了一個問題。市面價值與賬面價值的差別越來越大。公司們正在試圖利用機器學(xué)習(xí)輔助重要的商業(yè)決策來改善這一差別。有時,機器學(xué)習(xí)甚至?xí)〈恍┌嘿F的咨詢顧問們,而最后他們經(jīng)常會意識到算法所需的數(shù)據(jù)壓根不存在。所以實際上,那些閃瞎人眼的先進AI系統(tǒng)最后依舊只是在同樣老舊的數(shù)據(jù)上試圖實施新技術(shù)。

和人類一樣,除非有人教,機器學(xué)習(xí)系統(tǒng)并不會精通任何領(lǐng)域。不過比起人類,機器會需要更多的信息來進行學(xué)習(xí),并且它們確實比人類讀取數(shù)據(jù)的速度更快。因此,表面上公司間會互相競爭誰擁有更好的機器學(xué)習(xí)程序員以及誰先啟動AI項目,在幕后其實是對于數(shù)據(jù)新穎度和廣泛度的競爭。

比如說在金融領(lǐng)域,可供選擇的數(shù)據(jù)來源遠遠超過了傳統(tǒng)證券交易報告以及投資者展示等。數(shù)據(jù)還可以來源于社交網(wǎng)絡(luò)情感分析或者獲批專利數(shù)量等。

這些數(shù)據(jù)源的重要性主要基于兩點原因。首先,傳統(tǒng)數(shù)據(jù)局限于傳統(tǒng)資產(chǎn),在當今無形資產(chǎn)當?shù)赖臅r代,覆蓋面上遠遠不夠。第二,并沒有任何必要在市場上所有人都在分析的數(shù)據(jù)上使用機器學(xué)習(xí)方法。所有對此感興趣的人都早已經(jīng)嘗試過分析產(chǎn)業(yè)趨勢、利潤率、增長率、息稅前利潤、資產(chǎn)周轉(zhuǎn)率以及資產(chǎn)回報率和其它上千個常見的變量與股東回報率之間的相關(guān)性。

在所有人都在分析的數(shù)據(jù)上試圖發(fā)現(xiàn)相關(guān)性并不會幫助公司取勝。相反,希望使用AI取勝的公司需要尋找新數(shù)據(jù)集之間的聯(lián)系,因此他們可能必須自己創(chuàng)建那些新數(shù)據(jù)集來評估無形資產(chǎn)。

謹慎思考:你想知道什么?

創(chuàng)建數(shù)據(jù)比僅僅把銷售點與顧客信息兩個表聚合到一起然后丟進數(shù)據(jù)庫復(fù)雜得多。大多數(shù)企業(yè)錯誤地相信通過這樣一種權(quán)宜的方法能夠預(yù)測或區(qū)分出他們關(guān)心的信息:把所有能找到的數(shù)據(jù)都大費周章地聚合到一起然后指望能夠找到一絲希望之光。

盡管機器學(xué)習(xí)有時會突然發(fā)現(xiàn)某些從未有人意識到的事物從而使所有人都大吃一驚,但它并不能夠持續(xù)穩(wěn)定提供這樣的洞察。這并不意味著這項工具很垃圾,這意味著我們需要更明智地使用它。但說起來容易做起來難:比如,在我們研究外部數(shù)據(jù)市場時,我們發(fā)現(xiàn)大多數(shù)新數(shù)據(jù)提供者依舊在關(guān)注實體與金融資產(chǎn)。

許多企業(yè)遺漏的一步是提出一項真正重要的假設(shè)。機器學(xué)習(xí)真正體現(xiàn)優(yōu)越性之處在于,它們能夠通過采用人類已經(jīng)擁有的見解,這可以來自于經(jīng)驗法則、廣泛認知或者幾乎完全不被理解的相關(guān)性,來建設(shè)一種速度更快、更易于理解、更易于擴展且更低錯誤率的方法。

為了這樣使用機器學(xué)習(xí)方法,不應(yīng)向系統(tǒng)塞進任何你能找到的數(shù)據(jù)。你僅僅輸入被謹慎思考過的一組信息,希望它能夠?qū)W習(xí)并拓展,得到比人類掌握的更多的信息。

有意義的機器學(xué)習(xí)來自于不同的數(shù)據(jù)

以下是為希望搭建有影響力、有價值的機器學(xué)習(xí)應(yīng)用的公司提出的三點建議:

1.成功的AI在于與眾不同的數(shù)據(jù)。在你的競爭對手都已經(jīng)掌握的數(shù)據(jù)上你是得不出什么新穎信息的。審視企業(yè)內(nèi)部,找出只有你們知道并理解的信息并以此創(chuàng)建一個獨特的數(shù)據(jù)集。機器學(xué)習(xí)算法確實需要大量的數(shù)據(jù)支持,但這并不意味著模型需要考慮大量變量。你應(yīng)當把關(guān)注點放在企業(yè)已經(jīng)具有獨特之處的數(shù)據(jù)上。

2.有意義的數(shù)據(jù)比全面的數(shù)據(jù)好。你可能就某問題上擁有大量詳盡數(shù)據(jù),但它們可能壓根沒什么用。如果你的公司根本不會在決策過程中隨時使用這些信息,那這樣的數(shù)據(jù)八成對機器學(xué)習(xí)也沒有什么價值。專業(yè)的機器學(xué)習(xí)工程師會詢問許多困難的問題來找出什么才是真正重要的領(lǐng)域,以及那些領(lǐng)域?qū)⑷绾螌υ搼?yīng)用程序輸出結(jié)果產(chǎn)生影響。如果這些問題對你太難了,那么你并沒有為得到實際價值而仔細思考。

3.應(yīng)當從你已知的信息出發(fā)。最善于利用機器學(xué)習(xí)的公司會從一個獨特的視角出發(fā),來找到與他們重要決策最為相關(guān)的因素。這將會指導(dǎo)他們?nèi)ナ占畏N數(shù)據(jù)以及使用何種技術(shù)。就基于你們團隊已經(jīng)擁有的一部分知識之上進行拓展這個問題來著手是比較簡單的,這也將為你企業(yè)創(chuàng)造更多價值。

很明顯這個時代已經(jīng)是“軟件吃掉了整個世界”了(這個形容來源于軟件工程師Marc Andreessen)。但它們依然很饑餓!軟件們需要一份包含嶄新數(shù)據(jù)與科技的食譜來持續(xù)創(chuàng)造價值。

沒有人希望落后于這樣的洞察、機器與外部數(shù)據(jù)的轉(zhuǎn)變。那么,請從內(nèi)部審視企業(yè)開始,去發(fā)掘你獨特的見解以及你可以而且應(yīng)該得到的有價值的外部數(shù)據(jù)來源。通過這些步驟,你才能夠發(fā)現(xiàn)保持企業(yè)競爭力的相關(guān)洞見。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 數(shù)據(jù)
    +關(guān)注

    關(guān)注

    8

    文章

    6715

    瀏覽量

    88316
  • 機器學(xué)習(xí)
    +關(guān)注

    關(guān)注

    66

    文章

    8306

    瀏覽量

    131848

原文標題:機器學(xué)習(xí)競爭其實是一場數(shù)據(jù)上的競爭

文章出處:【微信號:mcuworld,微信公眾號:嵌入式資訊精選】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    【《時間序列與機器學(xué)習(xí)》閱讀體驗】+ 了解時間序列

    收到《時間序列與機器學(xué)習(xí)》一書,彩色印刷,公式代碼清晰,非常精美。感謝作者,感謝電子發(fā)燒友提供了一個讓我學(xué)習(xí)時間序列及應(yīng)用的機會! 前言第一段描述了編寫背景: 由此可知,這是一本關(guān)于時間序列進行大
    發(fā)表于 08-11 17:55

    雙電源無擾動快切裝置的小型化設(shè)計是否有意義

    快切裝置的小型化設(shè)計對于安裝空間有限的改造場景是非常有意義的,DCM635系列是目前業(yè)內(nèi)體積最小的快切裝置,前面板長266mm,寬146mm,裝置深210.5mm,安裝與進線柜或母聯(lián)柜上層二次控制室面板上,小型化設(shè)計節(jié)省安裝空間,尤其適用于改造項目中,開關(guān)柜前面板開孔尺寸有限的場景。
    的頭像 發(fā)表于 07-19 11:30 ?202次閱讀
    雙電源無擾動快切裝置的小型化設(shè)計是否<b class='flag-5'>有意義</b>?

    機器學(xué)習(xí)中的數(shù)據(jù)分割方法

    機器學(xué)習(xí)中,數(shù)據(jù)分割是一項至關(guān)重要的任務(wù),它直接影響到模型的訓(xùn)練效果、泛化能力以及最終的性能評估。本文將從多個方面詳細探討機器學(xué)習(xí)
    的頭像 發(fā)表于 07-10 16:10 ?618次閱讀

    機器學(xué)習(xí)中的數(shù)據(jù)預(yù)處理與特征工程

    機器學(xué)習(xí)的整個流程中,數(shù)據(jù)預(yù)處理與特征工程是兩個至關(guān)重要的步驟。它們直接決定了模型的輸入質(zhì)量,進而影響模型的訓(xùn)練效果和泛化能力。本文將從數(shù)據(jù)預(yù)處理和特征工程的基本概念出發(fā),詳細探討這
    的頭像 發(fā)表于 07-09 15:57 ?197次閱讀

    機器學(xué)習(xí)數(shù)據(jù)分析中的應(yīng)用

    隨著大數(shù)據(jù)時代的到來,數(shù)據(jù)量的爆炸性增長對數(shù)據(jù)分析提出了更高的要求。機器學(xué)習(xí)作為一種強大的工具,通過訓(xùn)練模型從
    的頭像 發(fā)表于 07-02 11:22 ?313次閱讀

    通過強化學(xué)習(xí)策略進行特征選擇

    更快更好地學(xué)習(xí)。我們的想法是找到最優(yōu)數(shù)量的特征和最有意義的特征。在本文中,我們將介紹并實現(xiàn)一種新的通過強化學(xué)習(xí)策略的特征選擇。我們先討論強化學(xué)習(xí),尤其是馬爾可夫決策
    的頭像 發(fā)表于 06-05 08:27 ?227次閱讀
    通過強化<b class='flag-5'>學(xué)習(xí)</b>策略進行特征選擇

    TLF35584處待機狀態(tài)時,能否通過SPI命令獲取其狀態(tài)?

    35584 處于待機狀態(tài)時,能否通過 SPI 命令獲取其狀態(tài)? 或者 DEVSTAT.STATE = 0x04(待機)是否有意義
    發(fā)表于 05-30 08:10

    機器學(xué)習(xí)入門:基本概念介紹

    機器學(xué)習(xí)(GraphMachineLearning,簡稱GraphML)是機器學(xué)習(xí)的一個分支,專注利用圖形結(jié)構(gòu)的
    的頭像 發(fā)表于 05-16 08:27 ?414次閱讀
    圖<b class='flag-5'>機器</b><b class='flag-5'>學(xué)習(xí)</b>入門:基本概念介紹

    Perplexity將Yelp數(shù)據(jù)引入其聊天機器

    Perplexity首席執(zhí)行官Aravind Srinivas告訴The Verge,許多人正在使用像常規(guī)搜索引擎一樣的聊天機器人 —— 直接從源頭提供他們想要的東西的信息是有意義的,比如選擇餐館。
    的頭像 發(fā)表于 03-19 17:36 ?544次閱讀
    Perplexity將Yelp<b class='flag-5'>數(shù)據(jù)</b>引入其聊天<b class='flag-5'>機器</b>人

    信號完整性是科學(xué)原理還是神秘玄學(xué)?

    那有人會問,那為什么隨著行業(yè)的發(fā)展,還是有人覺得SI是一門玄學(xué)?這個問題就變得有意義了。
    的頭像 發(fā)表于 03-12 11:10 ?284次閱讀

    數(shù)據(jù)挖掘的應(yīng)用領(lǐng)域,并舉例說明

    數(shù)據(jù)挖掘(Data Mining)是一種從大量數(shù)據(jù)中提取出有意義的信息和模式的技術(shù)。它結(jié)合了數(shù)據(jù)庫、統(tǒng)計學(xué)、機器
    的頭像 發(fā)表于 02-03 14:19 ?2348次閱讀

    干貨!收藏!一文講清楚數(shù)據(jù)治理到底是什么?

    是指對客觀事件進行記錄并可以鑒別的符號,是對客觀事物的性質(zhì)、狀態(tài)以及相互關(guān)系等進行記載的物理符號或這些物理符號的組合。 數(shù)據(jù)可以分為兩個部分,一是數(shù)字,二是文字。數(shù)字是沒有意義的抽象符號,數(shù)據(jù)
    的頭像 發(fā)表于 02-01 10:40 ?356次閱讀
    干貨!收藏!一文講清楚<b class='flag-5'>數(shù)據(jù)</b>治理到底是什么?

    請問同步電機使用矢量變頻器拖動有意義嗎?

    ,此時輸出電壓增加以求恢復(fù)轉(zhuǎn)速,同時內(nèi)環(huán)限制電流不能過載。但是在同步電機的情況下,除非負載達到失步,其轉(zhuǎn)速是與電壓無關(guān)的,是否可以認為此時外環(huán)是起不到作用的,只有內(nèi)環(huán)有作用,這豈不是可以認為用矢量變頻器拖動同步電動機是沒有意義的?或者說是一種浪費?
    發(fā)表于 11-16 06:49

    淺析機器學(xué)習(xí)的基本步驟

    機器學(xué)習(xí)中,機器學(xué)習(xí)的效率在很大程度上取決它所提供的數(shù)據(jù)集,
    發(fā)表于 10-30 11:13 ?334次閱讀
    淺析<b class='flag-5'>機器</b><b class='flag-5'>學(xué)習(xí)</b>的基本步驟

    機器學(xué)習(xí)數(shù)據(jù)挖掘方法和應(yīng)用

    機器學(xué)習(xí)數(shù)據(jù)挖掘方法和應(yīng)用(經(jīng)典)
    發(fā)表于 09-26 07:56