創新企業需要使用 DataOps 和新的技術,原因是老式資料整合方式早已不敷使用。傳統方法會建立單一、固定的資料管道,無法快速將資料轉化為洞察力,跟上企業發展腳步。以下趨勢正在帶動使用者採用 Hitachi 的Pentaho 平台套件:
1. 混合雲、多雲都是未來趨勢。
各行各業的企業都在雲端遷移,方便節省現金,壓低資訊科技 (IT) 成本,常為遠距辦公的使用者,提供一些支援和保障。在思考如何確保敏捷力和韌性時,他們越來越常去探索多雲和混合雲功能,包括邊緣運算能力。根據這份 IDC 預測,等到了 2022 年,全球將有超過 90% 的企業,會越來越仰賴地端/專用私有雲、多個公有雲和傳統平台組合,藉此滿足基礎架構需求。1
2. 現代化架構大幅提高大數據的可擴充力。
組織也在重新思考該如何利用大數據,從 Hadoop 導向的單體式資料湖,轉向物件儲存空間的分散式資料湖。如今,企業擁有資料結構,還有許多引擎、消費者。依照這種方法,可以將運算、儲存空間保持分開,還可透過許多技術存取資料,讓終端使用者能夠安全、輕鬆地存取資料,成本也更低。
3. 新的洞察力可以幫您從原先的「何事」轉向找出「做法」。
今日企業需要處理大數據,包括結構化資料、非結構化資料、半結構化資料。人類、機器、應用程式都可能產生這些資料。挑戰在於,先弄清楚擁有哪些資料,還有該如何將這些不同的資料全部整合在一起,方便讓企業使用者能更快取得可行的洞察力,主動做決策。
4. 針對物聯網邊緣智慧需求,正打算推動混合解決方案。
工業 4.0、智慧城市、醫療保健使用案例,還有其他眾多物聯網應用等趨勢,順勢帶動邊緣高度智慧的需求——邊緣智慧算是混合運算的一種形式。根據 IDC 預測,截至 2024 年,大約會有 25% 的組織打算透過和雲端、通訊服務供應商合作,將邊緣資料整合入雲端平台建置導向的應用程式,改善企業體質。2
5. 正在迅速提高人工智慧、機器學習的價值。
當今創新者正竭盡全力從機器學習 (ML) 中擷取價值,從原先思考「我能學到什麼」,轉為思考「我該如何才能完成這件事」。人工智慧 (AI)、機器學習 (ML) 正在開始走出實驗室,進入生產環境,以便支援努力,引起一場巨大變革。目前的工具大多把重點放在開發生命週期,而非用來開發生產生命週期,無法因應把 AI、ML 上的資料遷移到生產環境可能帶來的挑戰。
6. 風險和法務遵循問題日趨複雜。
資料風險與法務遵循始終都是眾人關注的焦點,在當今資料蔓延的世界中,《通用資料保護條例》 (GDPR) 等隱私權法規挑戰,更是無可匹敵。由於規模、生產時間和準確度方面各有要求,手動技術早已無法滿足需求。因此,企業需要人工智慧導向自動化技術,才能克服手動技術可能帶來的挑戰。
我們需要引進新技術:DataOps
DataOps 利用智慧、自動化和分析技術,將資料洞察力帶給最需要的人。DataOps 簡化資料交付,讓您能分析資料導向增進理解力,了解如何經營目前的業務,隨著市場和消費者喜好變化適時做出調整。
DataOps 將 DevOps 結合持續整合、持續交付原則,還有傳統資料交付等概念,讓您能夠:
- 簡化流程,再將流程自動化,以便跟上分散式環境中資料管理任務的腳步。
- 有支援跨雲端環境上的資料整合、中繼資料管理和資料治理。
- 支援治理和協作,提供資料、分析功能的自助服務,賦能企業生產線的組織。
- 促進環境日益分散式的遠端工作環境。
Pentaho 平台套件可協助您釋放智慧資料管理的潛力。該系統將資料分析和編目、邊緣裝置管理、全方位商業分析功能,全都整合到單一敏捷力套件中。可和現有的資料基礎架構、雲端環境協同工作,讓您能將僵化的資料孤島,轉型成全方位邊緣-核心-雲端的資料結構。
創新者如何使用 Pentaho 平台套件,改善成效
DataOps 可協助組織,將 IT 和營運技術 (OT) 整合在一起,以便簡化資料處理方式。反過來看,這種協作可以帶來更深入的洞察力,支援更明智的企業決策,提高效率,同時節省成本。以下是採用 DataOps 方法的創新者取得的正面成效。
- 強化可擴充性:某間金融服務巨頭建立單一傳統資料即服務平台,支援公司內部客戶,所有資料全都可以在 Pentaho 平台套件上實現標準化目標。該平台讓該組織能夠協助整間銀行的眾多客戶,再透過彈性、可擴充的解決方案,因應各種資料整合挑戰。
- 讓 IT 和 OT 緊密整合在一起:某間領導企業能在水務、能源、環境領域,管理並開發網路、服務,正在尋求簡化支援水務公司客戶、流程的方式。然而,這間大型公用事業公司還未完全整合公司的 IT 和 OT 營運。該公司選擇 Pentaho 平台套件,以便取得更統一的架構,妥善融合 IT 和 OT 資料,再由 Hitachi Vantara 的策略諮詢團隊提供支援。
- 讓資料儲存空間更具成本效益、彈性:另一間大型金融機構正在套用 DataOps 方法,設法解決資料湖最佳化問題。無論公司使用年限,或是使用情況為何,傳統 Hadoop 導向資料湖使用到結合儲存空間、運算的方式,針對資料湖中的所有資訊,建立統一環境。隨著資料湖不斷擴大,組織需要為 Hadoop 授權、儲存空間,支付高額鉅款費用——即使他們不會使用到大部分的資料。適用於 Hadoop 的 Lumada 資料優化器會將資料分層到物件儲存空間,打破原先儲存空間、運算之間的緊密耦合,讓組織能夠將大量資料卸載到成本更低的物件儲存空間中。只要到後台,適用於 Hadoop 的 Lumada Data Optimizer 就能將資料無縫移入、移出資料湖的冷熱區,以便提高效率,同時節省儲存空間。
- 自動化方便取得更深入的洞察力:某間領先業界的抵押貸款機構正在套用 DataOps 方法,因應資料編目挑戰。該機構每天都會透過各種來源取得資料。該公司希望能有效事先補充資料湖所需的資料集屬性,再透過 API 導向的自動化,設法提高處理效率。Lumada 的資料目錄讓該機構每天都能擷取、編輯超過 1000 萬個檔案條目,再提供完全可自訂、可搜尋的使用者介面。此自動化解決方案使用到有意義的業務相關標準化標籤,可用來標記資料庫、資料倉儲和資料湖中的行列,協助商務使用者,不用執行多項手動任務,即可查看資料,取得更深入的洞察力。
- 透過便捷存取方式,擬定明智決策:某間大型全國性電信公司為數千萬客戶提供行動、互聯網和電視服務,希望能簡化存取關鍵業務資料的流程,優化流程,同時改善企業決策。在這個充滿活力的市場中,企業敏捷力非常重要。使用到Lumada 資料整合和Lumada 分析,該公司已將 300GB 筆資料匯入單一平台上。更重要的是,這樣資料就更容易拿來做即時報告和分析。優化資料流程有助於降低成本,同時又能實現全天候資料存取自動化。目前商務使用者可以利用更具智慧的分析,支援公司做出更佳商務決策——所有以上資料都會參考公司服務營運的 360 度視圖。
即將推出更多創新
Hitachi 不斷強化、完善 Pentaho 平台功能,協助創新組織超越傳統資料孤島方法,邁向嶄新的資料範例。結合技術、流程和人員正在推動 DataOps、這種新的創新方式。還推出非常強大的進階技術,但這只是公司優勢的一部分。我們在Hitachi Group 公司、合作夥伴生態系統中,也都擁有深厚的 IT 和 OT 專業知識。我們長期以來致力於協助客戶加強業務,同時為世界帶來福祉。我們共同擬定客製化解決方案,以期滿足特定需求,推出邁向成功的創新。
有關更多資訊,請參閱我們為何建立 Pentaho 平台套件,還有五步驟將資料貨幣化。
要了解有關 Hitachi 如何協助您釋放 DataOps 可能性的更多資訊,請報名參加我們即將舉行的網路研討會,歡迎造訪官方網站,或可主動聯繫我們。
資料來源:
1:IDC FutureScape:2020 年全球雲端運算預測,文件編號為 US44640719,編輯時間為 2019 年 10 月
2:IDC「IDC FutureScape:2021 年全球雲端運算預測」,文件編號為 US46420120,編輯時間是 2020 年 12 月