本篇文章2971字,读完约7分钟
离心机盖子打不开最近,汇款技术mobvista全面升级了saas产品“一站式云原生大数据ai平台”——engineplus 2.0,正式上线亚马逊云技术AWS市场平台。
随着公司业务的迅速扩张,派生数据量面临爆炸式增长,公司对数据解决解体的诉求越来越迫切。
在这种背景下,创新技术和方案成为公司应对数据智能解决的挑战所必需的。 快速构建湖仓一体大数据观察平台,高效实时获取数据,通过人工智能模型实现数据价值最大化,充分实现业务能力。
engineplus 2.0将数据湖、计算分解、人工智能集成到统一平台上,提供了面向多样化业务场景的实时数据湖框架starlake、机器学习框架mindalpha等自主开发的开源工具,为service提供了一个平台。 engineplus 2.0通过开放的产品体系结构解决开发者智能解决云和数据的难题,加速了企业数字化转型和业务创新。
引擎 2.0三板斧:大数据+ ai +云本机
新一代一站式云原生大数据ai平台engineplus 2.0通过融合创新大数据和云计算、人工智能等新闻技术,实现了数据采集、数据计算、模型培训、开通 在大规模业务的生产验证下,engineplus 2.0兼具高速访问、易用性、高性能、高稳定性等优势。
/ S2/1./ S2// S2 /开放源代码/ S2// S2 /数据湖框架/ S2// S2///S2 /。
作为核心数据存储的容器,数据湖具有高效、高速的特点,但随之而来的是相当高的复杂度和较高的计算价格。
为了让顾客更好地使用这种数据存储分解方法,mobvista研究开发了数据湖框架starlake,并将其开源,实现了大数据的实时采集和更新。
凭借矩阵upsert功能、高合并入湖、元数据管理可扩展性、目标存储io性能深度优化等特点,starlake数据湖框架可以有效构建湖仓一体化拆解平台,是开源的同类数据湖框架。
(照片: starlake vs. iceberg用于测试)
engineplus 2.0集成了云计算平台spark on k8s,可实现资源快速扩展、资源高效利用、满足企业超大数据需求和高效灵活的诉求
2.开放源码机器学习框架 迷你alpha
除了数据湖,用人工智能对数据进行建模是挖掘数据背后价值的重要方法,通过算法对数据进行建模,从而激活业务,产生价值。
mobvista自研开源机器学习框架mindalpha轻松解决大规模离散的特点,与engineplus 2.0上的spark、starlake无缝结合,实现从数据到智能的一体化、一站式高效体
mindalpha开源参数服务器SDK支持千亿级大规模稀疏离散特征,与pytorch、spark mllib无缝连接,特征求解和模型推理的逻辑和参数完全自动在线服务器 实际上达到毫秒级的延迟级别,提供实时反馈,并迅速捕获客户的行为。 另外,其高性能在线服务可以横向分割模型,支持万亿参数,具有低延迟、自动弹性伸缩的特点,可以进行cpu、gpu异构的调度和负载平衡。
(照片: mindalpha体系结构)
.基于spot max的云特定体系结构
轻松利用互联网资源,实现管理、业务等方面的数据化转型,公司内部云诉求火爆。 云的原生体系结构也因其高性能、可扩展性、一致性、符合标准、容错、易于管理、易模糊的支持等特点而受到公司的欢迎。
engineplus 2.0基于spotmax提供云的本机体系结构。 spotmax云的原生系统具有云资源调度优化、容器+服务网格融合、多云和混合云统一管理、无服务平台等特点。 engineplus 2.0是基于spotmax构建的云本机基础架构,支持快速部署一键,从而大幅降低运输成本。 在计算存储隔离的情况下,engineplus 2.0与目标存储系统进行了优化。 另外,所有组件都可以灵活伸缩,从而提高公司的效率,降低系统构建的价格。
/ S2// S2/mob vista/S2 /技术中台战术
在engineplus 2.0一站式云原生大数据ai平台的背后,是整个mobvista技术的中台。 打破业务界限,mobvista技术中台通过聚合协同作用对外提供能源。
年,mobvista启动了中台战术,自主开发了以ai+big data为核心的技术中台体系结构。 此时,mobvista旗下的移动计划广告平台mintegral、数据观察平台gameanalytics的高速发展,以及集团提出国际化战术,进一步扩大了全球业务。
年,基于数据中心数据库、大数据计算平台引擎、大型机器学习中心mindalpha、云本机架构开发的灵活集群管理平台spotmax mobvista将技术中台产品化,对外发布,目的是以智能技术驱动增长。
从自研走向商业化,mobvista技术的中台——为这个企业整体的各项业务提供处理方案的团队,迈出了对外赋能的越来越多的步骤。 无论是datatory、engineplus、mindalpha还是已成为集团二级企业品牌的spotmax,这些产品都来自mobvista的大型业务实践。 在深入融合商业诉求场景的基础上,mobvista技术中台从中沉淀平台能力,不断重用,产品化、商业化,对外创造价值。
这与mobvista提出的“saas工具生态”战术相一致。 互联网的“技术溢出效应”正在加速数字化转型,mobvista从技术创新者变为技术输出者。
市场诉求爆发,数据技术不断更迭。 对于希望加快数字化转型的企业来说,engineplus 2.0可以通过一体化的产品处理计划,帮助企业数字化进程,实际上可以推动企业业务的快速发展。
从网络广告、电子商务领域到金融监管,engineplus 2.0成功地迅速发展了数家国内公司、海外公司的业务。
以mobvista程序化互动广告平台mintegral为例,其日均数据量达到Pb级,需要调度数万cpu核心。 采用engineplus 2.0后,mintegral可以实时解决顾客的行为特征,进行毫秒级的反馈。 在日千亿次dnn模型预测要求下,满足万亿级排序量的排序业务服务,较有效地奠定了mintegral在全球的领先地位。 另外,由于engineplus 2.0的效果,一家网络进军海外的金融企业的业务成绩指标迅速上升了20%+。
“engineplus 2.0融合了丰富的领域工具包、开源代码和数据算法模型,帮助开发者在数据观察、技术开发和业务的快速发展中提供可靠、准确的分解应用能力。 让顾客站在大家的肩膀上,快速建立从数据采集、分解到ai模型离线培训、在线预测的一体化能力。 ”mobvista集团副总裁朱亚东博士说。
“当然,经过业务的大规模实践和可行性验证,我们积累了越来越多的经验和专业信息,为用户提供部署服务,让他们以最小的技术门槛、最小的价格、最小的风险进行数字化转型、智能化升级。 我们希望成为中国版ai承载的数据积木,跨越数据爆炸性增长到智能解决的鸿沟,构建新一代的基础设施体系。 ”
数字化快速发展前景广阔。 结合多年的技术经验和领域积累,mobvista为越来越多的公司组织构建了saas工具生态,以技术产品、实践经验使领域的智能化升级成为可能。
标题:“汇量科技EnginePlus 2.0上线AWS Marketplace 助推公司实现新一代数据智能开发”
地址:http://www.nqghw.cn/nfxw/35480.html