365best体育官网入口

中文EN

股票代码:300682

运营监控治理 底盘数据处理工具

底盘数据处理工具DataIDM

产品简介

实现基于CDH大数据平台的数仓构建、使命设置执行、日志审查、搜索引擎等前端一站式开发工具。构建数仓治理、使命治理、系统治理、调理治理、搜索引擎等底盘数据处理工具DataIDM,快速实现大数据输入输出、模子盘算、指标标签系统盘算、搜索引擎的可设置。

产品聚焦

产品功效

  • 事情首页
  • 数据客栈
  • 事情流使命
  • 系统治理
  • 调理治理
  • 搜索设置

事情首页

通过使命完成情形、使命运行情形、使命执行时长、使命类型漫衍、近一月蜕化排行、调理数目趋势等指标展示,运维及开发职员可全局上相识使命总体运行情形以及发明执行问题,并举行整改或优化。

数据客栈

(1)通过数据源设置功效,可设置数据输入、输出使命使用数据源,并测试其连通性,作为数仓治理前置使命项;

(2)数仓设置用于构建数仓,指定命仓源库地点及库名;

(3)大数据表治理功效支持前端治理基于大数据平台的通例表、分区表、外部表;提供参照源表、源视图建表,简化大数据表治理操作,并支持自界说修改表、字段信息等。

事情流使命

可视化流程使命设计工具,支持数据接入、MR盘算使命、Spark盘算使命、事情流使命、数据输出等多使命恣意组合设置,串行、并行执行的同时提供了日志审查功效。

系统治理

指标盘算、标签盘算,基于事情流使命实现指标、标签盘算设置及执行。

调理治理

实现了基于Quartz的使命调理功效,事情流使命支持准时调理执行,通过设置完成差别营业需求,提供了使命调理执行日志审查功效,开发、实验职员可通过此功效监控使命运行情形以及剖析定位问题。

搜索设置

实现了基于HBase、Key Value Store Indexer、Solr的搜索引擎效劳。通过搜索设置功效,可快速完成搜索引擎设置、整合安排,并审查索引状态;构建完成后,通过数据接入、盘算使命爆发的数据将会准实时自动构建索引。

产品特点

使命可视化

使命设置及执行均使用流程图可视化形式,直观利便的监控使命执行全周期

效率提升

许多大数据统计剖析,使用交互式SQL盘算使命完成,阻止MR、Spark等开发周期较长方法实现;数仓构建、大数据建表、数据抽取、输出等均通过可视化向导模式完成,阻止使用种种下令以及后续治理杂乱,从而效率

知识沉淀

实现要害营业效果沉淀,效果复用度高

应用效果

< >

使命总体运行情形

事情使命可视化流程设计

使命执行日志实时审查

网站地图