您的位置:首页 > 互联网

优刻得发布智能化、轻量级、一站式大数据管理平台

发布时间:2020-12-16 00:00:00  来源:互联网     背景:

  伴随着全球数字经济快速发展,知名咨询公司IDC预测,在2020年后的未来两年中,企业数据将以每年42.2%的速度持续增长。大量数据汇聚后的数据管理与运营分析,将使企业在客户粘性、整体收入、利润增长以及成本控制上得到更大收益,从而形成企业市场核心竞争力提升的关键。

  随着企业等各类型组织的业务增长,数据量持续增加,大量数据的实时与离线分析成为了新的诉求。以Hadoop为代表的大数据技术得到广泛应用与持续发展,然而大数据服务组件众多、部署与使用过程的复杂性,使企业在数据运营分析与开发管理中门槛重重。

  优刻得基于多年公有云大数据产品服务经验的沉淀,结合客户市场需求的深入解析。于近日正式推出了自主研发的“智能化、轻量级、一站式大数据服务组件管理平台USDP”(以下简称USDP)。平台支持对HDFS,Kudu,Elasticsearch等30余款,主流开源大数据服务组件进行实施部署、配置管理、监控告警、故障诊断等全方位协同管理。此外,还可适配专业用户经过自定义优化的组件。 USDP还集成了自研的工作台组件,囊括数据开发、任务管理、数据集成等功能,弥补开源组件短板。

  在核心定位上,USDP着手于为用户提供更加便捷、可视化的企业数据管理。一方面在用户搭建过程中,全流程自动化贯穿部署服务与组件整个环节,并提供一站式集中组件生态管理;另一方面USDP集成的实时监控视图与告警策略,可协助运维人员快速定位资源瓶颈,为资源优化提供有力支撑。轻量化的易捷架构、可视化的自动管理,将大大降低部署与平台建设的成本消耗 。

  拥抱开源、轻量智能、多云融合

  全面支持主流开源大数据服务组件

  1)全面兼容开源大数据生态

  作为优刻得自主研发的大数据管理平台,USDP支持众多(如 HDFS、YARN、Hive、HBase、Spark、Flink 等)主流开源大数据服务组件的安装部署、运行监控与配置管理。其中USDP 提供的开源服务组件的部署和管理能力,本身不会对客户的技术选型产生任何影响,也不会像其他厂商的自研服务对客户形成技术上的绑定。2)支持丰富完整的服务组件

  USDP完全中立、无捆绑原则,支持30余款主流服务组件协同工作。与其他同类型产品相比,USDP支持的服务组件数量更多,能够覆盖客户需要用到的绝大部分服务组件,使得客户可以通过一个平台纳管所有服务组件。同时,USDP产品中的服务完全基于Apache版本进行集成,并进行了大量兼容性测试与压力测试。在确保各个服务稳定运行的同时,兼顾 Apache 官方频繁的 BUG 修复,用户无需承担额外学习成本。

  轻量级、智能化的操作体验:

  USDP 从国内客户的操作和使用习惯出发,简化和优化客户的操作流程,提供系统初始化工具,支持将相关的先验知识。如服务间的组合和依赖关系,启动的先后顺序等内置在平台系统当中,对客户屏蔽复杂的操作细节,做到一键式环境检查和集群部署,从而大大降低了客户的使用门槛。

  得益于优刻得在公有云为海量用户提供大数据产品及服务的持续经验积累。USDP为每一个支持的服务组件预置了一套完善的,服务监控和告警配置模板。客户无需任何先验知识,即可通过监控模块掌握集群和服务运行状况,并通过简单配置对外发送预警信息,协助运维人员及时介入排查问题。

  对公有云、私有云环境的全面支持

  USDP 脱胎于优刻得公有云大数据服务之上,经过公有云大数据产品运营中的反复验证与打磨。在此基础上,针对于私有云部署等应用场景进行了升级和优化。一方面,USDP对各类型环境的部署具有良好的适配性,系统集成的服务组件经过了充分的兼容与压力性测试,能够确保持续稳定且高效运行。另一方面,优刻得将公有云上持续积累的大数据开发和运维经验,完整的融入到 USDP中。在用户使用 USDP 构建和管理大数据集群的过程中,如果遇到问题或故障,系统内置的智能诊断模块,结合技术专家的专业经验,能够快速帮助客户识别问题并排除故障。

  典型场景应用介绍

  场景一:数据仓库

  “维度数仓”是国内最常用的数仓模型之一。“维度数仓”按照事实表、维度表来构建数据仓库、数据集市。在维度建模方法体系中,维度描述事实的角度,如日期、客户、供应商等。事实是要度量的指标,如客户数、销售额等。通过 USDP 管理平台,用户可以部署构建维度数仓所需的一切服务,快速构建企业数据中台。

  场景二:机器学习

  机器学习是一类算法的总称,这些算法企图从大量历史数据中挖掘出其中隐含的规律,并用于预测或者分类。在机器学习领域,对运算往往有大量需求,此时通过 USDP 部署 YARN 以及 Spark、Flink 等分布式运算框架,搭配组件自有算法或企业自研算法,即可事半功倍的进行机器学习开发。同时,在深度学习领域,建模所需的大量数据,也可以存储于 HDFS,从而真正实现一站式开发。

  场景三:业务信息检索

  USDP 中提供的数仓类服务套件,可以方便用户快速针对 OLTP 系统进行数据读写,也许并非会使用到所有服务,但 USDP 依然支持在成熟的部署方案中,选择独立的服务进行部署。例如,业务系统需要使用 ES 存储服务器日志,用户只需要在 USDP 控制台中选择部署 ES 即可。

  USDP可以部署在用户私有数据中心,也可以与优刻得的云上资源管理和运维服务能力无缝结合,为用户提供稳定、一体化、高性价比的数据仓库、离线批处理、实时流处理、即时查询、数据挖掘等大数据解决方案。

特别提醒:本网内容转载自其他媒体,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。


返回网站首页

本文评论
华为举办首届闪存技术论坛,发布闪存创新理念
导读: 【中国,北京,2019年5月9日】华为在北京举办了主题为“探讨闪存未来发展之道,推动产......
日期:05-09
返程疫情将爆发?上百度App做好出行规划、出行后排查
近日,国务院发布通知,延长2020年春节假期至2月2日,2月3日起正常上班。而今,返程高峰期即将来临......
日期:02-01
软通动力云原生解决方案:用科技助力企业转型与发展
科技是第一生产力,在这个日新月异、高速发展的时代,只有牢牢把握住科技的命脉,才能不被时代所甩下。......
日期:06-07
3月26日最后一波!三星Galaxy Z Flip Thom Browne限量版将终轮开售
3月26日上午10点,三星电子与Thom Browne合作推出的Galaxy Z FlipThom Browne限量版,将于三星网上......
日期:03-24
国产化边缘推理首选 高性价比AI盒子——比特大陆SE5 AI计算盒
人工智能、机器深度学习技术的发展和应用使图像识别技术获得了关键性的突破,不同应用场景的图像识......
日期:06-23
网易严选赋能全球工厂 用“数据”拥抱中国消费浪潮
双11刚结束,在泰国的一家乳胶工厂,工人们又投入到另外一轮紧张的生产中,而工人手中此时正在生产......
日期:11-29
剑指一天1亿元目标 国美与TCL社群营销新模式5月出击
2020年受到疫情的影响,消费者宅在家中,电视作为客厅的娱乐中心,其重要地位又重新回归,成为维系家......
日期:05-09
央视网参展BIRTV2019 有百度智能云AI加持的多个产品引关注
8月24日,第二十八届北京国际广播电影电视展览会(BIRTV2019)北京现场,众多观众围绕在央视网的展台......
日期:08-26
测体温、发口罩、高考距离办公……复工第一天 云集员工很安心
关闭中央空调、进园区测体温、开工必戴口罩、座位不相邻……2月17日,本部位于杭州市的......
日期:02-18
爱彼迎在提速
彭韬毫不掩饰自己给员工的是“tough love” ,他把这形容为“扶上马,送一程”。...
日期:10-17
永无止境的贝佐斯:亚马逊的发展关键词便是不拒绝
亚马逊创始人杰夫·贝佐斯已成为当今世界公认的商界奇才。其最令人瞩目的成就便是将亚马逊从......
日期:09-29
斗米奋斗故事之:从迷茫到坚定,90后单车师傅的打拼路
对不同背景不同身份的很多人来说,来到大城市打拼,有收获和成长,也有失落和迷茫。但只要尽情“......
日期:06-05
美CCPA即将生效:禁止零售商将消费者数据出售第三方
北京时间12月31日早间消息,据外媒报道,美国大型零售商正在纷纷遵守一项新的法律:加利福尼亚州消......
日期:12-31
网络诈骗防不胜防,社交平台亦是受害者
网络的诞生将数亿人连接在了一起。随着移动网络的日新月异,在如今的虚拟世界里,你甚至能足不出户......
日期:08-13
从RSAC看人是安全的尺度 中美跨洋共话网络安全技术发展
3月25日,开创全球网络安全行业在线办会先河的“RSAC主题分享万人云峰会”技术峰会如期召......
日期:03-25
4月18日花椒直播上线业内首次“云婚礼”
4月18日,在花椒直播将举行业内首次“云婚礼”。...
日期:04-17
摄影大V王义博:微博改变了我的人生
10月22日,2020微博超级红人节-V影响力峰会进入“背后故事”环节,多位明星、大V与网友分......
日期:10-22
银行网点也搞地摊经济?这家银行做到了“高大上”与“接地气”并存
遍布各处的银行网点,曾是我国银行业的一大特点,但随着互联网渠道快速发展,这个特点正在削弱,加上今......
日期:07-22
《明月曾照江东寒》定档10月6日  融合喜剧元素创新年轻化题材
今日,爱奇艺古装武侠轻喜剧《明月曾照江东寒》正式定档,将于10月6日起每周二到周五20:00上线爱奇......
日期:09-30
苏宁冬季热水器节:热水器行业进入“看脸”时代
“好看的皮囊和有趣的灵魂,你选哪一个?”爱情世界的经典难题转嫁到热水器行业,会产生怎......
日期:11-26