欢迎访问博王软件计划官网有限公司网站! 关于我们 | 联系我们
全国统一服务热线
13181283869
0632-5509869
当前位置:主页 > 公司新闻 > >

以數據編排技術提高數據提取效率「Alluxio」已收

文章出处:博王软件计划官网 人气:发表时间:2021-04-17 17:12

  隨著數字經濟的發展,企業數字化轉型的不斷推進,企業數據規模正在以前所未有的速度迅速擴大,大數據、雲計算、AI分析等諸多技術應用得到了快速應用。同時,計算量和存儲量不匹配而影響運作效率的問題日漸凸顯。由此,計算與存儲分離的架構(如分佈式架構)漸漸成為主流,算力的按需使用成為可能。

  但新的問題也隨之出現:如今,企業擁有PB級數據已經成為常態,EB級數據時代也將很快到來,但是面對複雜、多元的海量數據,企業快速、精準地找到有效數據,合理分配相應的算力資源的難度也越來越大,相應的企業投入的用於數據進行管理、處理、分析的人力、財力也越來越多,希望通過技術手段優化數據管理,提升數據使用率的需求也越來越大。

  為了應對這些問題,36氪曾報道過的「Alluxio」構建了一個計算層和存儲層之間的橋梁,在二者之間抽象出一個易使用、標準化的數據編排層(Data Orchestration),來遮罩異構的存儲和複雜的部署。這是面向雲環境的的開源數據編排軟體,能夠跨集群、跨區域和跨國家將數據從存儲層移動到距離數據驅動型應用(如數據分析、AI /ML應用程式)更近的位置,從而能夠更容易被訪問,從而使得數據的訪問速度能比現有方案快幾個數量級。

  “數據編排平臺就好比構建了一個數據‘滴滴’平臺,一方面將各類型、存儲在各個不同地方的數據,也就是各個型號的‘車’進行虛擬化統一到平台中;另一方面,接受各類應用的需求,按需快速匹配相應的數據(車)。”Alluxio創始人李浩源告訴36氪,“如此,數據編排平臺簡化應用程式訪問其數據的方式,其最大的價值就是提升了企業從數據中提取有效資訊的效率,從而加速了數據應用的市場化速度,以AI應用為例,Alluxio可以幫助提升4倍以上的市場化效率。而對於雲廠商而言,Alluxio也可助其突破I/O瓶頸,提升性能。”

  比如,幾家雲EMR團隊與Alluxio社區合作,探索出了開箱即用的計算存儲分離優化版本,大幅優化網路頻寬,頻寬削峰10%-95%,節省總頻寬10%-50%,同時能在IO密集型場景提升性能10倍;雲端一站式數據管理與分析平臺Kyligence 整合 Alluxio 架構後,查詢響應性能提升了大概在50%以上,雲上 API Call 的次數也減少了70%。

  此前,36氪曾詳細介紹過Alluxio的成立背景、産品原理、特徵優勢及其相關應用的情況。經過近6年的發展,如今,Alluxio已在全球Web規模的現代化數據服務的生産環境中得到驗證,在包括阿里巴巴,Facebook,微軟,騰訊等諸多行業領導者的生産環境中落地,Alluxio的智慧數據分層和數據管理的功能已經為金融、高科技、零售、電信領域和基因制藥的客戶提供了服務。

  今年2月初,Alluxio公佈了其2021財年的報告,其中顯示2021財年(2020年2月-2021年1月)營收比2020財年增長3.5倍,實現正現金流。在這一年中,Alluxio實現了為全球排名前六公有雲中的五家提供數據編排層,客戶總數相較于2020年翻了一番,其中70%為世界財富五百強。2020年某頂級手機製造公司在大規模環境部署中採用了3,000個節點的Alluxio集群;某網際網路科技公司(財富50強)使用Alluxio部署管理的數據量超過了1 ZetaByte。

  “這些成績反映出Alluxio在商業上的價值。以開源為基礎,開發專業級企業軟體,並以收取license 授權年費為主要收入來源是我們的商業模式。”李浩源説,“而核心競爭力和壁壘則來源於活躍開源社區構建的生態。”

  産品方面,去年10月,Alluxio的2.4版本中已經配置了Alluxio的全新一代數據編排創新技術,提供增強的元數據服務,以及用於混合雲和多雲部署的全新管理控制臺,同時支援整合Vault來安全管理敏感資訊,支援更多的雲原生部署方式。

  接下來,Alluxio還將繼續優化産品,繼續增加細分功能支撐更大規模集群規模的部署。在商業化方面,李浩源還透露,將進一步擴大公司的商務銷售團隊,在中國、歐洲、美國等地區設置商業化服務團隊,以進一步推動銷售。

  “在大數據、機器學習持續發展的大趨勢下,智慧計算的需求也在不斷擴大。另外,全球科技競賽的大背景下,世界主要KA對開源IP擁抱趨勢也日益明確,這都是我們需要抓住的機會。”李浩源説。

  9點1氪 百度將加碼直播帶貨;證監會修訂科創板上市規定;純電SUV威馬汽車W6上市

  36氪首發 私域獲客+深度學習建立標準化壁壘,輕醫美連鎖品牌「蛋殼肌因」獲得4000萬元A輪融資

  破解不同技術平臺交互阻礙,「富數科技」和「微眾銀行」實現異構聯邦學習平臺互通

  36氪首發 「代數學家咖啡algebraist coffee」獲數千萬元A輪融資,定位精品潮流咖啡品牌

  36氪首發 兩萬億商旅市場行業分散,完成逾億元融資的「在途商旅」想做新一代TMC

  版權所有 中國網際網路新聞中心 京ICP證040089號 網路傳播視聽節目許可證號:0105123 京公網安備9號 京網文[2011]0252-085號

此文关键字:博王软件计划官网