产品架构

  经过10年的蓬勃发展,以Hadoop和Spark为代表的大数据技术已经从热点的炒作名词变成了有实力真正承托起一大批企业的数据基础架构技术。大数据技术的发展正处于百花齐放的阶段,其中诞生的数据分析、机器学习和人工智能等技术正在快速改变人们思考和决策的方式,推动着由数据驱动的技术变革。随着大数据技术栈的进一步拓展,越来越多的企业用户愿意选择基于大数据技术来构建企业的IT基础架构,从而享受大数据带来的经营红利。

  然而随着大数据应用的深入,基于开源的大数据产品的问题逐渐暴露,技术门槛高、开发运维复杂、稳定性等缺陷,使企业对大数据的信心开始动摇。为攻克开源产品的不足,星环信息科技从2013年开始专注于大数据底层技术的开发和产品化,经过数百个项目的实施和历练,在产品功能、性能、稳定性等各方面取得了巨大的突破。星环大数据平台被高度产品化,大幅降低用户使用门槛,使企业不再需要组建专业的大数据技术团队就可以进行业务创新。目前星环已经有超过1000个合作伙伴成功完成了基于Transwarp Data Hub(TDH)平台的业务构建,并实现稳定上线运行。

  如今为了更好的满足更多的企业用户需求,同时作为对技术社区的反馈,星环科技决定肩负起企业社会责任,将TDH的核心功能独立出来,作为TDH社区版免费开放给社区,从而让更多的开发人员受益于星环大数据的核心优势。

八种核心服务
海量数据处理
适应海量数据持续增长、提供容错性保障。
分析型数据库
以批处理方式提供高性能分析,广泛应用于数据仓库和数据集市的构建
NewSQL数据库
可处理结构和非结构化数据,响应高并发请求,实现毫秒级精确查询。
实时计算引擎
多功能流数据计算平台,适应低延时和高吞吐双场景。
数据挖掘平台
分布式机器学习平台,内置丰富的算法库与行业应用模块。
图形化运维与管理
图形化的集群控制中心,提供按钮式与可视化的服务于机器管理。
报表与调度工具
多种高效轻便的开发工具,流畅实现大数据完整开发过程。
在线应用市场
上架丰富的大数据服务,支持一键在线安装、升级。
产品功能
图形化的部署,运维,告警
Transwarp Manager提供图形化的应用部署服务,对集群资源提供有效的管理和监控,以及服务启动、扩容、角色迁移等操作支持。
产品在线升级功能
Transwarp Manager内置应用市场,实时提供星环最新产品信息,支持一键升级到更新版本,以及订阅版或商业版等高阶版本。
批处理与离线计算
分布式分析引擎Transwarp Inceptor提供高效的批处理计算,实现SQL 99 + SQL 2003 OLAP扩展;提供线性可扩展的计算能力;支持JDBC和ODBC,对接主流数据处理工具;其批处理性能大幅度领先开源产品Spark 2.1。
NewSQL数据库
NewSQL数据库Transwarp Hyperbase,完整支持SQL 99语法;继承NOSQL的高并发能力,提供高速入库;可以结合Inceptor进行秒级的高效分析。
实时计算
高吞吐流处理引擎Transwarp Slipstream,实现StreamSQL标准,使开发人员能够基于SQL开发应用,降低开发门槛;支持数据窗支持高可用,可以在多个流上做聚合分析。
数据分析与挖掘
分布式的数据挖掘和分析平台Transwarp Discover,支持用Spark MLlib和R语言做数据分析,同时为开发者提供Notebook作为可视化的分析辅助。
调度工具
Transwarp Workflow是工作流开发和调度工具,提供图形化的操作平台;支持Shell、SQL、JDBC、HTTP、自定义Java等多种任务,支持复杂的调度和设计工作。
报表工具
Transwarp Pilot是基于web的报表展现工具,轻量、灵活,可以快速部署;支持多维度的分析和自助分析,支持团队协作和共享,支持报表导入和导出。
SQL开发工具
Transwarp Waterdrop是数据库管理工具,可进行跨平台管理,可作为InceptorSQL客户端,兼容多种数据库,提供丰富多样的功能。
与公有云的结合
可通过腾讯云市场一键安装,不需要集群时可以快速销毁,节省硬件成本以及组建技术团队的开销。
节点使用限制
社区版最多允许10个节点;订阅版没有节点限制。
产品优势
高度产品化形式

•图形化的工具部署、运维和开发,降低技术要求和成本。

•数据库的产品体验,无需专业大数据人才即可使用大数据技术。

•历经星环近千个大数据项目的磨砺和打造,平台稳定、性能卓越。

•产品功能涵盖面广,完整覆盖数据开发项目的各环节。

资源与技术生态

•社区版TDH可安装在物理集群、私有云或者公有云。无论采用哪种平台,任意用户都可以在本地集群通过应用市场试用、购买、升级高阶版本的产品组件工具。

•各租户享有包括文档服务和知识社区在内的星环公共资源,获取工具使用指导和常见问题解答。

•同时星环技术支持中心将提供专业的技术支持,提供问题解答、架构方案与技术培训,以及购买服务咨询,和解锁节点数量限制。

应用市场

•Manager内置大数据产品市场,上架包括TDH专业版服务在内的丰富应用。

•提供星环最新产品信息与服务版本,并保持实时更新。

•支持一键式的在线服务升级,支持升级至安装订阅版或商业版本等高阶版本。

•支持HDFS等各个服务的滚动升级,整体降低运营和运维成本。

技术支持

 

功能

TDH社区版

TDH订阅版
自助产品部署和安装
在线注册、管理License
产品文档
技术论坛问答
在线技术支持  
系统培训  
专业现场服务  
产品或平台架构设计  

 

产品推荐 查看更多>>
    数云BI赢家数据报表

    数云BI赢家数据报表,可下载EXCEL文件,BI基础版数据来源于数据赢家-人群营销,可查看截止前一天的数据。可根据需求对报表所需平台、店铺、时间等进行过滤设置。与“客户洞察-会员资产分析-店铺新增会员分析”一致。

    销售维度

    货品维度

    人群维度

    人群营销

    达梦数据共享集群软件DMDSC

    达梦数据共享集群软件(DMDSC)是在DM8中采用的一项新技术,具有高可用性、可扩展性,是数据库支持网络计算环境的核心技术,由达梦公司在国产数据库领域首次推出。

    可扩展

    高效稳定

    腾讯云云数据仓库CDW Doris

    腾讯云云数据仓库CDW Doris,100% 兼容开源Apache Doris,是一款支持在线业务和多维分析的实时数仓产品,整体架构简洁易用,助力企业快速构建云上数据分析平台。

    开箱即用、标准SQL、兼容MySQL协议

    整体架构简洁;FE/BE均可水平扩展

    全托管服务,SLA保障

    FE节点高可用部署,数据多副本管理