• 简中
    • 繁中
  • 注册
  • 查看作者
  • 以数据编排技术提高数据提取效率,「Alluxio」已收获全球五大云厂商用户

    随住数字经济嘅发展,企业数字化转型嘅不断推进,企业数据规模正喺度以前所未有嘅速度迅速扩大,大数据、云计算、AI分析等诸多技术应用得到‌快速应用。同时,计算量和存储量不匹配而影响运行效率嘅问题日渐凸显。由此,计算同存储分离嘅架构(如分布式架构)渐渐成为主流,算力嘅按需使用成为可能。 

    但新嘅问题也随之出现:而家,企业拥有PB级数据已经成为常态,EB级数据时代也将好快到来,但是面对复杂、多元嘅海量数据,企业快速、精准地揾到有效数据,合理分配相应嘅算力资源嘅难度也越来越大,相应嘅企业投入嘅用于数据进行管理、处理、分析嘅人力、财力也越来越多,希望通过技术手段优化数据管理,提升数据使用率嘅需求也越来越大。

    为‌应对呢啲问题,转载曾报道过嘅「Alluxio」构建‌一个计算层和存储层之间嘅桥梁,喺二者之间抽象出一个易使用、标准化嘅数据编排层(Data Orchestration),来屏蔽异构嘅存储和复杂嘅部署。这是面向云环境嘅嘅开源数据编排软件,能够跨集群、跨区域和跨国家将数据从存储层移动到距离数据驱动型应用(如数据分析、AI /ML应用程序)更近嘅位置,从而能够更容易被访问,从而使得数据嘅访问速度能比现有方案快几个数量级。 

    “数据编排平台就好比构建‌一个数据‘滴滴’平台,一方面将各类型、存储在各个不同地方嘅数据,也就是各个型号嘅‘车’进行虚拟化统一到平台中;另一方面,接受各类应用嘅需求,按需快速匹配相应嘅数据(车)。”Alluxio创始人李浩源讲畀转载,“咁,数据编排平台简化应用程序访问其数据嘅方式,其最大嘅价值就是提升‌企业从数据中提取有效信息嘅效率,从而加速‌数据应用嘅市场化速度,以AI应用为例,Alluxio可以帮助提升4倍以上嘅市场化效率。而对于云厂商而言,Alluxio也可助其突破I/O瓶颈,提升性能。”

    比如,几家云EMR团队同Alluxio社区合作,探索出‌开箱即用嘅计算存储分离优化版本,大幅优化网络带宽,带宽削峰10%-95%,节省总带宽10%-50%,同时能在IO密集型场景提升性能10倍;云端一站式数据管理同分析平台 Kyligence 集成 Alluxio 架构后,查询响应性能提升‌大概在50%以上,云上 API Call 嘅次数也减少‌70%。 

    之前,转载曾详细介绍过Alluxio嘅成立背景、产品原理、特征优势及其相关应用嘅情况。经过近6年嘅发展,而家,Alluxio已在全球Web规模嘅现代化数据服务嘅生产环境中得到验证,喺包括阿里巴巴,Facebook,微软,腾讯等诸多行业领导者嘅生产环境中落地,Alluxio嘅智能数据分层和数据管理嘅功能已经为金融、高科技、零售、电信领域和基因制药嘅客户提供‌服务。

     今年2月初,Alluxio公布‌其2021财年嘅报告,其中显示2021财年(2020年2月-2021年1月)营收比2020财年增长3.5倍,实现正现金流。喺呢一年度,Alluxio实现‌为全球排名前六公有云中嘅五家提供数据编排层,客户总数相较于2020年翻‌一番,其中70%为世界财富五百强。2020年某顶级手机制造公司在大规模环境部署中采用‌3,000个节点嘅Alluxio集群;某互联网科技公司(财富50强)使用Alluxio部署管理嘅数据量超过‌1 ZetaByte。 

    “呢啲成绩反映出Alluxio在商业上嘅价值。以开源为基础,开发专业级企业软件,并以收取license 授权年费为主要收入来源是我哋嘅商业模式。”李浩源说,“而核心竞争力和壁垒则来源于活跃开源社区构建嘅生态。”

    据透露,目前Alluxio开源社区在Github嘅项目贡献者数量已超过1100个,喺社区Slack频道上有超过6000名成员,包括阿里巴巴、 Alluxio、 百度、 CMU、Google、 IBM、 Intel、 南京大学、 Red Hat、 腾讯、 UC Berkeley和 Yahoo在内嘅已经300多个组织机构也是社区成员。另外有超过5,000名开发者和数据工程师参加‌包括Alluxio Day和Data Orchestration Summit在内嘅Alluxio嘅在线会议。

    产品方面,上年10月,Alluxio嘅2.4版本中已经配置‌Alluxio嘅全新一代数据编排创新技术,提供增强嘅元数据服务,以及用于混合云和多云部署嘅全新管理控制台,同时支持集成Vault来安全管理敏感信息,支持更多嘅云原生部署方式。

    接下来,Alluxio还将继续优化产品,继续增加细分功能支撑更大规模集群规模嘅部署。喺商业化方面,李浩源还透露,将进一步扩大公司嘅商务销售团队,喺中国、欧洲、美国等地区设置商业化服务团队,以进一步推动销售。 

    “在大数据、机器学习持续发展嘅大趋势下,智能计算嘅需求也在不断扩大。另外,全球科技竞赛嘅大背景下,世界主要KA对开源IP拥抱趋势也日益明确,呢啲都系我哋需要抓住嘅机会。”李浩源说。

    据悉,Alluxio由Tachyon开源项目嘅创建者在加州大学伯克利分校AMPLab创立,以 Apache License 2.0 协议嘅方式开源,由Andreessen Horowitz,Seven Seas Partners和Volcanics Venture等提供风险投资支持。 

    cantonese.live 足跡 粵字翻譯

    2021-04-13 08:35:13

  • 0
  • 0
  • 0
  • 159
  • 请登录之后再进行评论

    登录
  • 任务
  • 发布
  • 偏好设置
  • 单栏布局 侧栏位置: