NEC開發(fā)出自動化預測分析技術,實現(xiàn)廣泛應用在業(yè)務系統(tǒng)的關系數(shù)據(jù)庫海量數(shù)據(jù)預測分析流程的全程自動化,AI技術群“NEC the WISE”(注1)又添新成員。
在分析由多個數(shù)據(jù)庫構成的關系數(shù)據(jù)庫時,需要數(shù)據(jù)分析專家找出數(shù)據(jù)庫之間的復雜關系和相關性,需要耗費很多工時去通過機器學習調整預測模型等。但是由于可以熟練分析數(shù)據(jù)的專家資源的稀缺,所以在應對急劇增長的高度數(shù)據(jù)分析需求時,為了迅速地進行海量數(shù)據(jù)分析,就需要即便不是專家也可以輕易掌握的精確分析手段。
NEC自動化預測分析技術可實現(xiàn)從抽取/設計有效數(shù)據(jù)項目(特征值)到構建最佳預測模型的一系列流程的自動化。因此即便不具備高度的數(shù)據(jù)分析能力,也可以快速精準地做出與數(shù)據(jù)分析專家一樣或更高水準的預測分析。
NEC與三井住友銀行、日本綜合研究所共同對此技術進行了驗證(注2)結果表明,此技術可以將數(shù)據(jù)分析專家需要2~3個月才可以完成的工作在保持精度的前提下縮短到1天。2017年,NEC力爭將此技術作為企業(yè)可在內部進行大數(shù)據(jù)分析的服務向企業(yè)用戶進行推廣。
NEC一直專注于社會解決方案業(yè)務,希望在進一步擴大和提升應用該技術的服務業(yè)務的同時,通過分析解決方案為客戶創(chuàng)造新的商機和提高企業(yè)價值貢獻力量。
背景
現(xiàn)今,企業(yè)都希望能夠第一時間精確把握在多變的事業(yè)環(huán)境下各種客戶的需求,并反映到企業(yè)的經營舉措中去。通過分析企業(yè)積累的龐大數(shù)據(jù)來發(fā)現(xiàn)/創(chuàng)造新的價值,大大影響企業(yè)的發(fā)展。另一方面,數(shù)據(jù)分析專家的全球性短缺和海量數(shù)據(jù)分析需求的急劇增長的矛盾,使得快速分析數(shù)據(jù)成為一個亟待解決的課題。
NEC自2012年開發(fā)出可發(fā)現(xiàn)混雜在大數(shù)據(jù)中的規(guī)律的分析手法“異構混合學習技術”(注3)以來,一直在不斷研發(fā),將資深數(shù)據(jù)分析專家的高度人工操作(發(fā)現(xiàn)數(shù)據(jù)關聯(lián)性、從抽取并設計特征值到構建分析模型)進行精確地自動化,開發(fā)出數(shù)據(jù)分析的前期處理技術“特征值自動設計技術(2015年發(fā)布,注4)”等。
本次發(fā)布的“自動化預測分析技術”是在以往技術基礎上的升級,可以全自動地對關系數(shù)據(jù)庫的海量數(shù)據(jù)進行分析預測。
新技術的優(yōu)勢
數(shù)據(jù)分析流程
1.加強了“特征值自動設計技術”,從關系數(shù)據(jù)庫中自動發(fā)現(xiàn)特征值
加強了2015年發(fā)布的“特征值自動設計技術”,從業(yè)務系統(tǒng)中常用的關系數(shù)據(jù)庫中自動設計特征值。
公司的重要經營信息通常被分為多個表,存儲在關系數(shù)據(jù)庫系統(tǒng)中。而AI技術則可以從多個要分析的關系數(shù)據(jù)庫中,快速搜索并發(fā)現(xiàn)假設的有效數(shù)據(jù)的排列組合值(特征值),其中必不可少的海量搜索請求的生成也是系統(tǒng)自動完成的。
因此,不需要依賴于分析經驗及相關知識的假設和計劃,也不需要操作數(shù)據(jù)生成特征值的大量作業(yè),從而大幅縮短分析時間和節(jié)省分析人力。此外,機器作業(yè)遠遠超越人工的速度,可以在短時內搜索大量假設,所以有分析結果精準化、能夠發(fā)現(xiàn)人注意不到的新知識等優(yōu)勢。
2.通過“預測模型自動設計”技術從多個模型中自動選擇最佳模型
除了基于特征值數(shù)據(jù)的“異構混合學習”技術,用戶還可從基于邏輯回歸及決策樹等各種機械學習手法的大量預測模型中,選擇或者組合可導出目標分析結果的最佳預測模型。另外,關于預測模型計算出的預測值,還會提供預測依據(jù)(為什么得出這樣的預測結果)。
由于可掌握預測依據(jù),用戶可以在根據(jù)情況做出適宜的計劃和判斷時更加有理有據(jù)。
本次開發(fā)出了直觀可操作的GUI(圖形用戶界面),操作者只需要按照提示畫面進行相應的操作,就可以簡單快速地完成過去需要花費很多工時的數(shù)據(jù)特征值探索與預測模型構建工作。因此即便不具備很專業(yè)的數(shù)據(jù)分析能力也可以在短時間內做出與分析專家同等或更高水平的精確預測分析。
此技術有助于分析企業(yè)重要的經營信息數(shù)據(jù),并基于新的潛在需求制定戰(zhàn)略、進行假說驗證、促使政策實施,從而為公司快速做出商業(yè)判斷做貢獻。
NEC集團致力于在全球范圍內推進社會解決方案,提供安心、安全、高效、公平的社會價值,將先進的ICT技術與知識相融合,為實現(xiàn)更加光明更加豐富多彩的高效社會盡一份力量。
(注1)
“NEC the WISE”的標志中所蘊含的意義
“NEC the WISE”的標志采用了立體圖形中最簡單的三角錐體,三角錐體的中心有一個立方體。銳角的三角錐體作為基礎預示著堅固、難以動搖,而位于中央的立方體則象征著聚集了智慧的AI技術。該商標的傾斜角度體現(xiàn)了通過人與人、人與社會、人與AI技術的協(xié)調解決所有社會課題,使其由不穩(wěn)定轉化為穩(wěn)定,創(chuàng)造更美好的社會這一想法。
新聞稿:NEC發(fā)布AI技術品牌名稱“NEC the WISE”
http://cn.nec.com/zh_CN/press/2016/0722.html
NEC有關AI的研究http://jpn.nec.com/rd/crl/ai/
(注2)2016年12月15日新聞稿
有關使用AI技術的自動化數(shù)據(jù)分析實證實驗
(注3)異構混合學習技術
2012年6月22日
NEC開發(fā)出可自動發(fā)現(xiàn)混在大數(shù)據(jù)中的多種規(guī)則的技術
http://jpn.nec.com/press/201206/20120622_02.html
2014年6月19日
NEC加強可自動發(fā)現(xiàn)混在大數(shù)據(jù)中的多種規(guī)則的技術http://jpn.nec.com/press/201406/20140619_01.html
(注4)自動設計特征值技術
2015年8月18日
NEC開發(fā)出將大數(shù)據(jù)預測分析時間縮短1/3的“自動設計特征值技術”
http://jpn.nec.com/press/201508/20150818_02.html