icon产品简介icon

弹性 MapReduce(简称EMR)是基于云原生技术构建的安全、低成本、高可靠、可弹性扩展及持续演进的开源大数据计算框架, 提供高效部署和易于管理的Hive、Spark、Hbase、Presto、Flink 、Doris、Iceberg 等开源大数据组件,帮助企业在提升研发效率、运维效率、降低硬件成本的同时,轻松应对 PB 级海量数据的价值挖掘挑战。

icon弹性 MapReduce助力各行业数字化转型icon

支持各行业大数据分析场景,为企业数字应用创新和业务转型助力

电商
商品个性推荐
客户画像建模
定向广告策略
文创
舆情分析
突发新闻监测
内容推荐
行业工具
用户标签构建
广告精准投放策略
功能路径优化
游戏
游戏数值运营分析
营销活动分析
游戏用户画像
教育
客户转化分析
教育渠道分析
课程开发效果
金融
欺诈探测
风险管理
实时监控
icon弹性 MapReduce支持大数据全链路全场景覆盖icon

大数据汇聚、存储、计算环节全链路全场景覆盖,支持企业大数据架构可持续演进

icon产品架构图icon

100%兼容开源生态,智能化运维大幅提高运维效率。

icon典型数据链路icon

与云生态产品无缝融合,快速构建大数据整体解决方案。

icon数据仓库icon

在金融、零售等领域,对销售、资产、供应链等业务数据进行汇总分析,需要结合不同数据源,提取不同源的数据、然后借助EMR强大的PB级数据分析能力,以及原生支持腾讯云COS、CHDFS存储,提供高性能存算分离数仓方案,对海量数据进行计算,发现数据中隐藏的商业价值,进行业务决策。

icon在线查询业务icon

在互联网金融、游戏、O2O等领域,需要对用户行为、系统日志、订单等结构化或半结构化数据进行高效分析,要收集在线网站、APP、系统的用户行为及系统日志等各种业务数据,通过EMR丰富的计算组件及分钟级集群构建与平行扩展能力,支撑在线业务实时查询,提高业务响应效率。

icon实时计算icon

在企业构建实时计算的业务领域,借助于EMR云端流计算服务,能够分钟级构建实时分析,对用户行为数据进行实时汇聚分析,帮助改进用户体验。通过同时搭建批、流处理系统,实现批流一体,降低资源投入,提升数据处理速度,及时分析业务运营效果,快速调整业务策略,支撑主流业务更好发展。

icon数据挖掘及分析icon

在实时风控、实时推荐等需要快速计算以及数据挖掘能力的业务场景,EMR可以提供高效的云端流计算服务以及数据挖掘组件能力支撑,帮助业务监控储户异常交易,及时发现金融漏洞,确保资金安全, 以及构建用户画像模型,帮助企业准确及时地了解用户群体。

icon弹性 MapReduce优势icon

EMR帮助企业快速构建大数据基础设施、提升大数据运维效率和支撑能力。

易于部署和管理
分钟级构建上百节点大数据集群
分钟级数百节点扩缩容,不停服
丰富便捷的运维管理,监控和作业分析工具
综合成本节约
资源弹性按需购买,降低硬件成本
托管省心,专家支持,降低运维成本
存算分离架构,降低整体成本
安全加固
逻辑VPC隔离,安全组等腾讯云统一安全加固
提供认证、权限管控、审计等全方位安全能力
提供ISO,等保,SOC等安全认证
开源技术优化
拥抱开源,无绑定风险
开源技术组件丰富,满足多场景需求
优化特性,增强且兼容社区版本
极致性能
组件和架构优化,与物理机构建性能接近
云端基础设施更新快,快速提升整体性能
PB至EB级COS数据高速分析
持续技术支撑
云厂商雄厚Hadoop技术支撑
腾讯海量数据场景验证
交流分享,落地最佳实践
icon易于部署和管理,大幅提升运维效率icon

分钟级构建上百节点大数据集群,丰富便捷的运维管理,监控工具,时间和负载维度设置扩缩容,轻松管理集群配置,全方位的监控告警等,助力企业运维人员大幅提高运维效率。高效实用的作业任务分析工具(Yarn, Impala),快速帮助业务团队和运维团队定位和解决任务运行问题。

icon拥抱开源,提供更开放,更灵活的大数据解决方案icon

开源技术优化:拥抱开源,无绑定风险。开源技术组件丰富,满足多场景需求。优化特性,增强且兼容社区版本。开源技术组件丰富:截止目前开源组件35个,在云厂商行业中领先,灵活满足多场景需求。云厂商行业中率先引入性能优异的ClickHouse,Doris, Iceberg等技术组件。

优化增强特性,兼容社区版本:计算引擎Spark支持物化视图,大幅提升物化视图后的查询速度。缓存加速引擎Alluxio透明加速,不需修改存储访问schema。数据湖引擎Iceberg支持对行级的删除和更新操作。

icon帮助企业降低大数据综合成本icon

弹性按需购买,降低硬件成本。托管省心,专家支持,提高运维效率。

存算分离架构,计算资源和存储资源分开购买,且可根据访问频率选择不同存储方案,降低整体方案成本。

icon提供优化增强的大数据基础能力,助力数据价值挖掘icon

获得Sort Benchmark全球排序冠军,组件深度优化,与物理机构建性能同等甚至部分更优。云端基础设施更新快,快速提升整体性能。

icon性能对比-根据在电商,游戏,文创,
金融等行业的多个头部客户的实际POC测试结果icon
IDC物理机自建对比
云端构建的EMR可以取得同等甚至部分更优的性能表现
组件深度优化
云端设施更新快,更先进
与友商对比
在TPC-DS,TPC-H的SQL测试结果都表现更优异,获得了客户的认可和选择。开源特性研究更深入,架构设计,参数设置更合理。
icon大数据资产全方位保驾护航icon

VPC隔离,网络防护等一体化腾讯云品质安全加固。通过Ranger支持文件,任务,表,列的细粒度权限控制。提供认证、权限管控、审计等全方位安全能力。ISO,等保,SOC等安全认证。

icon持续专业的技术支撑,助力最佳实践落地icon

持续专业技术支撑。腾讯产品海量数据场景的验证,和经验积累。线上线下交流分享,落地最佳实践。持续技术投入,拥抱专注开源:主导Apache Hadoop2.8.4版本发布。多位Apache项目主席,Member。10+个大数据技术社区PMC成员,20+个社区Commiter。200+技术PR,回馈社区大量重要特性。

icon企业自建大数据面临的困难icon

云原生大数据解决方案:使用云上EMR产品可以帮助企业有效应对自建大数据基础设施高成本、高复杂度的挑战。云端海量基础设施,技术先进稳定大规模验证,运维工具丰富,分钟级构建,快速弹性伸缩,持续成本优化,腾讯云高品质安全防护,技术支持专家分享交流。

技术复杂性高
业界开源大数据技术栈非常多,需要数十名Hadoop资深工程师保障
运维基础设施不足
全面配齐迁移、容灾备份、监控、异常告警触达等运维基础设施困难,以及需要经验长期积累
自建成本较高
自建设备及维护成本较高,部署及扩缩容的成本无法有效降低
构建周期长
从技术选型到产品应用,从硬件搭建到软件落地,构建周期长达数周甚至数月
技术抗风险能力弱
企业单薄的IT资源难以应对大数据技术的高速发展,技术栈迭代缓慢难以应对业务各种场景需求
技术支持缺乏
在真实应用中会遇到各种问题,通过网络和社区难以获得快速可靠的支持
icon产品优势 - 对比自建方案icon
icon存算分离场景与传统方式性价比对比icon

对比测试配置:数据量,10T(单sql)。测试工具,Hibench。集群配置:本地型方案,本地盘机型 * 10,Cpu:320c,内存:1280G,磁盘:sata,单机12块盘*5.5T。存算分离方案:AMD SA2机型 * 10,Cpu:320c,内存:1280G,存储:CHDFS。

icon富途证券数据中台icon

新一代互联网券商,用户数超过1400万,托管资产超过4600亿港元。解决方案:BI报表,内容推荐,离线/实时分析,实时风控,信息检索。业务价值:集群交付效率提升10倍+,降低运维人力成本20%,弹性伸缩,避免资源浪费,开放API,方便集成监控告警。

icon微盟大数据平台icon

中国领军的企业云端商业及营销解决方案提供商,注册商户超300万家。解决方案:BI报表,离线数仓,实时数仓,跨区双活。业务价值:弹性伸缩,节省硬件成本30%。整体性能比开源提升30%。支持存算分离,数据容灾。专家服务,架构可演进。

icon猎豹移动日志收集及经营分析平台icon

业务范围:中国、美国、印度、巴西等,主营业务:互联网娱乐、工具、人工智能、广告,员工人数:2500+。方案优势:高效运维提升,单集群节点级按需扩展,多集群同源数据共享,组件架构无缝升级。相关产品:EMR,ES,CDW PostgreSQL。

icon芒果TV离线大数据日志分析平台icon

芒果TV是湖南广播电视台互联网视频平台。方案优势:弹性低成本,平台快速搭建。无缝对接开源生态,一站式运维管理服务平台,提升运维效率。业务价值:大数据平台运维管理成本高,运维效率低。大数据分析场景下,资源成本控制。计算资源弹性能力不足。相关产品:EMR,CKafka,COS,CDB。

icon更多客户的明智选择icon
产品推荐 查看更多>>
    态势感知信息共享平台

    各接入单位与人行金融业态势感知与信息共享平台通过Kafka数据服务总线方式进行对接,接入数据包括网络攻击数据、DDOS攻击数据、病毒感染数据、防病毒安装数据、恶意邮件数据、垃圾邮件数据、钓鱼网站/假冒App数据和反欺诈数据(本期不接入)等。

    高效稳定

    功能完备

    腾讯乐享智慧校园解决方案

    腾讯乐享智慧校园解决方案,深度整合互联网技术,积极探索智慧研训。研训线上化,全过程可追溯。名师直播授课,突破线下小班教学限制,更多教师获得培训。分析教师研训行为,定制个性化学习计划。

    研训线上化

    全过程可追溯

    名师直播授课

    定制个性化学习

    腾讯云GAPP全球应用加速API

    腾讯云GAPP全球应用加速API,基于部署在全球各地的节点,针对目前跨国网络传输时延高,抖动剧烈等问题,通过高速通道、转发集群及智能路由技术,为客户提供全球网络加速一站式解决方案。

    提供多种通道监听方案

    控制台快捷配置

    控制台实时数据监控

    可定制安全防护机制