本文轉自【東方網】；
今天,全球數字化浪潮正在重新塑造社會的生活方式,推動商業模式變革,催生規模性產業洗牌。各行業數字化“黑馬”順勢而為,應時而生。這其中,以汽車為代表的高端製造業在全面擁抱數字化的過程中,應用數字化技術,通過優化流程、改善工作方式等手段,提升生產效能,激發原動力;並利用數字化技術帶來的全價值鏈創新應用場景,全面顛覆原有產品生產、交付旅程,探索新的商業模式和價值動能,增加驅動力。
能力建設 科技創新賦能業務增長
8 月10 日,2020 《財富》世界 500 強正式公佈,吉利控股集團以 478 億美元(約 3308 億元人民幣)營收位列第 243 位。
這是吉利控股連續九年位列《財富》世界 500 強,也是其中唯一上榜的中國民營汽車集團。
2019 年,吉利控股旗下各品牌車型累計銷量超 217 萬輛。連續三年蟬聯中國品牌乘用車銷量第一;全球銷量連續六年創銷量新高。
吉利的快速發展,得益於持續不斷的科技創新。目前以 5G、物聯網、人工智能、大數據為代表的技術革新,驅動汽車 “新四化” 變革。而領先的數字化能力作為基礎可以護航車企駛入“新四化”賽道。吉利近年來主動迎接挑戰,把握歷史機遇,堅持高水平研發創新投入,十年研發超千億,以研發創新驅動科技轉型,持續引領着中國品牌汽車技術變革。
中流砥柱 信息化建設任重而道遠
業務高歌猛進的背後是吉利紮實的信息化建設。目前,吉利汽車集團在全國各地建有十多個數據中心,數據日增量已達到數十 TB 規模,如何對海量數據進行統一、高效的收集管理和監控分析,及時發現並快速響應各種日常安全事件,實施全面深入的安全調查是當前面臨的主要問題。
傳統運維的監控方式,通常以相對封閉的方式來檢測已知事件,思路停留在以 IT 視角獨立看待中間件、安全、網絡等問題,可在實際工作中,只靠人工應對分散海量的告警事件往往會產生故障發現難、定位難、處理時效性差等一系列問題。
早在與七牛雲合作之前,吉利便曾嘗試基於開源系統自建,但實踐下來發現構建和使用成本太高,效率和質量也很難滿足實際需求,如大文件日誌採集性能,資源消耗等問題需要付出極大的時間精力和資源投入,而如何高效的管理海量數據也是技術攻關的深水區。
作為國內知名的雲計算及數據服務提供商,七牛雲持續在海量文件存儲、CDN內容分發、視頻點播、互動直播及大規模異構數據的智能分析與處理等領域的核心技術進行深度投入。從最初的提升客户的IT效能,縮短從想法到產品之間的距離,到今天更進一步致力於提升客户的數據價值效能,七牛雲憑藉領先的技術創新能力和服務理念獲得了吉利的青睞。
簡單高效 機器數據分析不畏挑戰
七牛雲機器數據分析平台( Pandora)能實現數據的全生命週期智能管理,適用於智能運維管理、業務運營分析、安全事態分析、智能網聯數據分析等場景,幫助金融、汽車、運營商、智能製造、互聯網等行業客户探索數據、挖掘價值、預見未來。
基於吉利汽車集團數據源類型眾多、數據量大、數據分散、分析不靈活的痛點和數據統一管理、業務關聯分析、提高安全運營能力的需求。七牛雲機器數據分析平台( Pandora)遵循可擴展性和高可靠性原則與吉利共同構建了有效解決以上問題的機器數據分析平台。
首先,七牛雲機器數據分析平台( Pandora)提供了不同類型的數據對接採集方式,並通過預配置數據模型來實現不同來源類型的數據字段歸一化,將機器數據統一在一個平台上,用統一的方式對數據進行互聯和分析,有效減少節省了人力、時間和費用成本。
如文件系統、數據庫數據等可採用logkit採集器進行對接,數據採集後直接輸出到Pandora平台上,而在部分特殊場景例如網絡無法直通或者數據流量較大需要緩存的情況下,也支持把採集到的數據先存入本地文件或 kafka ,再將數據消費存入 Pandora 平台中。同時,例如 syslog、HTTP 服務等本身支持數據推送的數據源,則可以直接將數據推送到 Pandora 平台所監聽的服務端口,實現數據的直接上報,簡單、高效。
按照規劃,數據彙總到 Pandora 平台後會先進入熱數據節點提供數據查詢分析服務,隨着時間推移,根據預先設定的規則數據會自動遷移到冷數據節點中做持久化保存,這一針對業務特別優化的冷熱分離架構,在保障數據合規安全的同時也極大的提升並優化了資源成本和使用效率。
以上是七牛雲對機器數據分析標準語言 SPL 的實踐。SPL 支持對原始數據直接處理,並且統一了檢索、分析、可視化和告警等需求。引入 SPL 後的 Pandora 具備了更強大的計算能力,內置百餘種分析命令快速創建模型自定義搜索,針對典型場景及業務提供開箱即用的分析模板和檢測規則。用户在數據採集時無需對多種不同數據源進行梳理和解析,可以直接原始數據進行統一存儲歸檔,入庫後再根據不同的需求對數據進行高效靈活的處理和分析,日誌數據採集範圍的廣覆蓋為用户帶來了極其簡便、順滑的數據接入體驗。
而七牛雲機器數據分析平台 Pandora 特有的Schema On Read 模式,也能有效提高數據寫入速度,降低數據接入成本,實現對數據更高效的聚合和分析,讓億級數據檢索所需時間從原來的數分鐘縮減到秒級。極大的滿足了靈活的業務分析需求、便於開展探索性數據分析。
通過對各類機器數據的彙集、分析和關聯,並基於各種場景化的分析用例規則,Pandora 機器數據分析平台可從海量龐雜的原數據中快速分析出更直觀、準確的數據處理結果,實現高效的運維監控和安全態勢感知。降低各部門的信息獲取門檻,提高數據處理效率,最終達成對業務系統、應用系統及生產網絡等系統中各類潛在威脅的即時發現和響應處置,最大程度消除來自內外部的風險和威脅,提升整體運維安全質量。
考慮到吉利在全國各地數據中心業務高峯的時間/流量不同的實際情況,在設計上,七牛雲Pandora也幫助在各個數據中心的接入方案中預留了數據緩衝區,並做了突發流量控制,可起到數據平穩流動和落地的效用,避免突發網絡帶寬壓力,降本增效。
值得一提的是,七牛雲機器數據分析平台還內置了應用商店,通過沉澱領域知識針對行業典型場景提供了開箱即用的解決方案,並且具備極強的開放性,支持外部合作伙伴自主開發應用,生態共建。
目前,合作項目還處在一期階段,通過 Web 界面,吉利的應用管理員即可以很方便的一站式管理海量數據,實時監控關鍵指標,及時發現業務異常,使紛繁複雜的數據可視、可感、可知。將複雜業務單元的跨業務故障排查從幾天縮短到小時級。合作二期及將來規劃中七牛雲 Pandora 還能提供迴歸與分類、異常檢測、時序預測、事件聚類等豐富的機器學習算法,提升異常診斷及業務預判能力,維護系統穩定性,降低系統威脅,進一步實現對現代系統中不可預測行為的解釋,為決策提供可靠支撐。
數據賦能 吉利七牛攜手驅動未來
恰逢百年不遇的時代變局和行業顛覆性變革的大背景,吉利在以“讓世界充滿吉利”願景的指引下,不畏嚴寒,苦練內功,深化變革,以用户為中心,化“危”為“機”,推動中國製造業向價值鏈中高端挺進,推動製造業向科技型企業轉型,參與全球汽車產業格局的重塑。 七牛雲也將利用自身技術優勢和專業服務,堅守 “持續用數據科技全面驅動數字化未來,賦能各行各業全面進入 DT 時代”的使命,把產業合作實踐沉澱下來的技術和經驗進行更好的優化應用和反哺賦能。
此次七牛雲與吉利的合作實現了對集團海量複雜數據的統一管理和監控分析,作為數據底座,為吉利下一個“千萬輛”時代打好基礎。面對當前全球經濟的諸多不確定性,雙方也將與全球夥伴一起戰略協同,資源共享,推動產業變革,共創社會價值、商業價值、用户價值,引領中國汽車品牌重構全球汽車產業格局,讓用户感受中國製造的品質魅力。