业界资深大数据专家组、 多年深耕大数据业务领域、 帮助企业实现智能化运营,从容应对市场变革
IT大数据流量采集器部署服务配套IT大数据平台,面向行业、商业和运营商等客户,在大数据DataEngine平台的建设过程中,提供端到端的设计、部署、联调、验证和现场培训等一系列专业化服务。
IT大数据流量采集器部署服务可以帮助客户采集交换机、路由器的镜像流量,用于分析具体用户的应用访问情况。并且还将为客户提供现场的操作演示和培训,使得客户在系统运行过程中,具备基本的IT大数据流量采集器平台操作使用能力。
客户购买IT大数据流量采集器部署服务产品后,可以全天候获取专业、有效的IT大数据流量采集器产品的技术支持,并可以获取业界领先的大数据专业知识。IT大数据流量采集器部署服务产品技术支持团队成员均为大数据认证专家,拥有丰富的IT大数据项目经验,可以大程度帮助客户降低IT大数据流量产品使用过程中的各种环境风险,提升客户使用满意度,加快客户投资回报率。
专业化:经验丰富的服务专家,利用先进且成熟的场景化示例,为提供高保障实践。
完整性:结合规划、设计、调试、验证和演示培训等服务为一体,为客户提供端到端的一体化IT大数据流量采集器部署服务。
多样化:IT大数据流量采集器可同时对接多种网络设备,采集流量。
IT大数据流量采集器部署服务为客户提供了端到端的服务,服务交付人员需要详细了解客户需求,深入分析客户业务系统现状,设计出切实可行的实施方案,并细化成可供实施的各种图、表、配置文件等交付件。
服务名称 |
服务描述 |
详细信息收集 |
服务专家将根据信息收集模板,通过电话或现场交流的方式,收集客户需求和现场环境信息,主要收集内容如下: ² 客户当前的服务器配置(CPU、内存、磁盘、网卡) ² 当前组网拓扑、设备类型、配置、接口等 |
评估和分析 |
根据信息收集的结果,对用户需求进行评估和规划,主要包括如下内容: ² 评估IT大数据流量采集器是否满足现有场景。 ² 规划IT大数据流量采集器采集哪些流量用于分析展示。 |
实施方案设计 |
根据客户的实际需求和信息收集的结果,进行具体的实施方案设计,主要包括以下内容: ² 规划安装配置IT大数据流量采集器的服务器。 ² 方案实施计划,与客户讨论,共同确定合适的时间计划。 |
安装、调测和联调 |
通过实施环境准备阶段的工作,确认现场环境满足进场实施的条件后,即可根据实施方案设计中确定的内容和计划进行软件的安装、调测和联调工作,主要内容包括: ² 安装部署IT大数据流量采集器 ² 根据评估和分析的结果,对接网络设备采集流量 |
集成验证 |
完成IT大数据流量采集器的安装、调测和联调之后,将进行系统的集成验证,以确认IT大数据流量采集器各项功能和特性运行正常,主要包括如下内: ² 验证采集网络设备的流量是否正常。 ² 验证是否能够将采集的流量提供给IT大数据平台。 |
知识传递 |
根据客户需求和现场环境信息,确定现场演示培训的内容和计划,主要内容包括: ² IT大数据流量采集器演示 ² 客户问题答疑 |
加快业务上线:提供完整的端到端的一站式服务,缩短了方案设计和部署阶段的交付时间,加快业务部署和上线。
更稳定和高效:可有效确保客户业务系统的顺利上线和持续高效的运行。
持续提供服务:专业的大数据技术专家,可持续的为客户提供大数据技术的咨询。
降低OPEX:在整个服务交付过程中,技术专家将与客户进行充分的面对面交流,提高客户的管理能力,降低OPEX。
大数据软件技术支持服务是为大数据软件提供全面的软件服务而推出的专业服务产品。
大数据软件技术支持服务有1年、3年两个规格,客户采购大数据软件时会随产品自带1年技术支持服务,客户也可以根据需求选择购买3年技术支持服务。
基于大数据软件技术支持服务,客户可以全天候获取专业、有效的大数据软件技术支持,并可以获取业界领先的大数据专业知识。大数据软件技术支持团队成员均为大数据领域专家,拥有丰富的大数据技术规划、设计、实施和维护的经验,可以有效帮助客户降低虚拟化环境风险,加快客户投资回报率。
服务内容 |
服务描述 |
技术支持时间 |
24小时/天 7天/周 365天/年 |
技术支持获取方式 |
客户可以通过电话、Web访问技术支持资源,反馈问题并获取支持 |
问题处理 |
响应并解决客户咨询问题或软件问题 |
问题升级管理 |
对于复杂问题,提供问题升级通道,推动问题快速解决 |
在线信息访问 |
客户可通过网站获取新产品、方案信息。同时通过服务代码,可以访问知识案例库,查找产品相关案例;参与技术论坛讨论,与其他用户进行技术交流 |
版本更新 |
为客户提供了服务代码,客户可以根据服务代码从官方网站获取大数据软件版本及相关文档,实现版本更新 |
现场技术支持 |
7×24小时响应,根据问题级别到达 |
通过大数据软件技术支持服务,可以:
7×24小时,全天候获取支持
在软件问题发生后,快速获取解决方案
及时获取新版本信息,避免因已知问题而导致软件运行异常
不限次支持
及时获得软件文档更新
重大问题现场支持
无线大数据部署服务配套无线大数据系统(Data WA1.0)、大数据DataEngine管理平台,向客户提供端到端的设计、部署、联调、验证和现场培训等一系列专业化服务。
无线大数据部署服务根据客户个性化的需求和现场环境信息,通过综合性的评估和分析,提供有针对性的方案设计和严谨的实施计划,并提供专业化的大数据DataEngine管理平台和无线大数据系统的安装、调测、联调和集成验证。还将为客户提供现场的操作演示和培训,使得客户在系统运行过程中,具备基本的使用、管理和维护无线大数据系统的能力。
通过无线大数据部署服务,客户可将精力投放到无线业务分析和上层应用开发上,减少底层业务梳理和构建的时间以及成本。
更贴近客户需求:专业的方案设计和实施部署,基于客户的实际需求、真实环境和规模,结合具体配置的设备和主机软件进行有针对性的设计和部署,使整体的方案设计和实施部署更贴近客户的规划目标和业务需求。
专业化:由多名极富经验的大数据领域专家共同组建专家团,在集成部署服务交付的各个阶段,均可提供专业化的服务。
标准化:集成部署服务中包含的收集与分析、方案设计、工程交付、集成验证、演示培训等服务均结合了在各行业的服务交付经验实践,具备统一的交付标准,为客户提供标准化的服务
全面性:从客户IT业务系统角度考虑资源、安全等可用性问题,使整个大数据平台形成一个统一的、高效的资源池。
无线大数据部署服务为客户提供了端到端的服务,服务交付人员需要详细了解客户需求,深入分析客户无线业务系统现状,设计出切实可行的实施方案,并细化成可供实施的各种图、表、配置文件等交付件。
无线大数据系统部署服务内容如下表所示:
服务名称 |
服务描述 |
详细信息收集 |
服务专家将根据无线大数据调研模板,通过电话或现场交流的方式,收集客户需求和现场环境信息,主要收集内容如下: ² 客户当前的服务器配置(CPU、内存、磁盘) ² 当前组网拓扑、设备类型、配置、接口等 ² 客户对数据可靠性、安全性方面的要求 ² 客户所在区域地图说明 ² 客户使用的AP统一管理系统和上网认证系统。 |
实施方案设计 |
根据客户的实际需求和信息收集的结果,进行具体的实施方案设计,主要包括以下内容: ² 大数据DataEngine管理平台整体架构设计 ² 针对无线大数据应用对DataEngine服务组件进行规划 ² 无线大数据系统整体架构设计 ² 明确无线大数据所需数据源的对接方式 ² 资源需求和规划:IP资源、VLAN规划等 ² 方案实施计划,与客户讨论,共同确定合适的时间计划。 |
实施环境准备 |
完成实施方案设计之后,交付工程师将 与客户确认现场环境是否已满足进场实施的条件,主要将确认如下内容: ² 检查机房环境如强电、弱电、接地、制冷等配套设施是否满足设备长期稳定运行的需求 ² 检查硬件设备是否已经准备就绪 ² 检查无线大数据和DataEngine软件、License等是否已经准备就绪 ² 检查需客户提供的资源如IP地址、管理终端等是否已经准备就绪 ² 检查客户所在区域地理位置情况在百度地图中展现是否完整、准确 ² 检查客户的AP统一管理系统和上网认证系统是否具备对接权限。 |
安装、调测和联调 |
通过实施环境准备阶段的工作,确认现场环境满足进场实施的条件后,即可根据实施方案设计中确定的内容和计划进行软件的安装、调测和联调工作,主要内容包括: ² DataEngine管理平台软件安装和服务组件部署 ² 无线大数据软件所需配置文件准备和测试 ² 对接AP统一管理系统和上网认证系统数据源并采集数据 ² 无线大数据软件安装和部署 ² DataEngine平台整体联调 |
集成验证 |
完成无线大数据系统以及DataEngine管理平台的的安装、调测和联调之后,将进行系统的集成验证,以确认无线大数据系统各项功能和特性运行正常,主要包括如下内容: ² 根据客户需求和业务环境,输出测试和演示方案 ² 与客户讨论,制定明确的测试计划 ² 根据测试计划中的时间点,按照测试方案中的内容和步骤进行无线大数据系统验证测试 ² 完成测试后,输出测试报告 |
知识传递 |
根据客户需求和现场环境信息,确定现场演示培训的内容和计划,主要内容包括: ² 无线大数据系统使用及维护操作演示 ² 客户问题答疑 |
加快业务上线:提供完整的端到端的一站式服务,缩短了方案设计和部署阶段的交付时间,加快业务部署和上线。
更稳定和高效:可有效确保客户业务系统的顺利上线和持续高效的运行。
持续提供服务:专业的大数据技术专家,可持续的为客户提供大数据技术的咨询。
降低OPEX:在整个服务交付过程中,技术专家将与客户进行充分的面对面交流,提高客户的管理能力,降低OPEX。
IT大数据应用分析软件给用户提供一个海量数据处理分析平台,该平台主要针对半结构化的机器数据,通过多数据源采集、自定义解析、分布式存储、实时性全文检索和可视化分析一整套完整流程,实现机器数据的价值提炼。
在数据采集层上,该软件提供丰富的代理插件和端口监听方式实现多类型数据的采集接受。在数据缓存层上,采用了Hadoop2中的分布式消息订阅组件kafka和分布式系统协调组件zookeeper实现数据传递高并发和高可靠性。在数据解析层上,通过logstash组件内置多种filter插件实现不同格式机器数据的颗粒度解析和富化。在数据存储层上,采用分布式计算和多副本存储框架ElasticSearch,保证用户数据分析任务的时效性和可靠性。在数据可视化层上,通过kibana支持多种可视化图表类型和数据钻取方式,便于用户感知数据的新动态和变化趋势。另外IT大数据系统平台上附加原始数据与资产和业务关联、告警、权限控制、系统扩容等功能,满足用户日常使用需求。
通过该平台用户可以接入服务器和设备的操作日志,用于行为合规审计;接入网络安全设备日志,发现被忽略的安全事件;接入应用控制网关和 NetFlow流量日志,分析网络质量,规划网络负载。通过更多机器数据的接入实现便捷的IT运维和业务监控。
IT大数据部署服务配套大数据DataEngine平台,面向行业、商业和运营商等客户,在大数据DataEngine平台的建设过程中,提供端到端的设计、部署、联调、验证和现场培训等一系列专业化服务。
大数据平台部署服务根据客户个性化的需求和现场环境信息,通过综合性的评估和分析,提供有针对性的方案设计和严谨的实施计划,并提供专业化的大数据DataEngine安装、调测、联调和集成验证。还将为客户提供现场的操作演示和培训,使得客户在系统运行过程中,具备基本的管理和维护大数据DataEngine平台的能力。
通过大数据平台部署服务,客户可将精力投放到业务开发上,减少业务构建的时间和成本。
更贴近客户需求:专业的方案设计和实施部署,基于客户的实际需求、真实环境和规模,结合具体配置的设备和主机软件进行有针对性的设计和部署,使整体的方案设计和实施部署更贴近客户的规划目标和业务需求。
专业化:由多名极富经验的大数据领域专家共同组建专家团,在集成部署服务交付的各个阶段,均可提供专业化的服务。
标准化:集成部署服务中包含的收集与分析、方案设计、工程交付、集成验证、演示培训等服务均结合了
在各行业的服务交付经验和实践,具备统一的交付标准,为客户提供标准化的服务
全面性:从客户
IT
业务系统角度考虑资源、安全等可用性问题,使整个虚拟化平台形成一个统一的、高效的资源池。
IT大数据平台部署服务为客户提供了完整的机器数据采集、缓存、解析存储、可视化服务,服务交付人员需要详细了解客户需求,深入分析客户现场数据源格式和业务系统现状,设计出切实可行的实施方案,并细化成可供实施的各种图、表、配置文件等交付件。
大数据平台部署服务内容如下表所示:
服务名称 |
服务描述 |
详细信息收集 |
服务专家将根据信息收集模板,通过电话或现场交流的方式,收集客户需求和现场环境信息,主要收集内容如下: ² 客户当前的服务器硬件配置(CPU、内存、磁盘) ² 客户当前的服务器节点数量 ² 数据源设备的当前组网拓扑、设备类型、设备数量、日志样例数据、日志格式和字段说明 ² 客户当前日志产生峰值并发度、容量 ² 客户对可靠性、安全性方面的要求 ² 索引数据的命名规则 |
实施方案设计 |
根据客户的实际需求和信息收集的结果,进行具体的实施方案设计,主要包括以下内容: ² IT大数据平台整体架构设计 ² 数据采集、缓存、解析、存储、展示等子系统设计,包括服务器节点组件服务部署规划设计 ² IT大数据系统设计,包括服务器节点数量、存储空间设计 ² 资源需求和规划:IP资源、VLAN规划等 ² 方案实施计划,与客户讨论,共同确定合适的时间计划。 |
实施环境准备 |
完成实施方案设计之后,交付工程师将 与客户确认现场环境是否已满足进场实施的条件,主要将确认如下内容: ² 检查机房环境如强电、弱电、接地、制冷等配套设施是否满足设备长期稳定运行的需求 ² 检查硬件设备是否已经准备就绪 ² 检查软件、License等是否已经准备就绪 ² 检查需客户提供的资源如IP地址、管理终端等是否已经准备就绪 |
安装、调测和联调 |
通过实施环境准备阶段的工作,确认现场环境满足进场实施的条件后,即可根据实施方案设计中确定的内容和计划进行软件的安装、调测和联调工作,主要内容包括: ² ITOA平台软件安装和部署 ² 数据源接入 ² 解析规则适配 ² 存储策略检查 ² 可视化图表、仪表盘制作 ² IT大数据平台整体联调 |
集成验证 |
完成ITOA系统的安装、调测和联调之后,将进行系统的集成验证,以确认ITOA系统各项功能和特性运行正常,主要包括如下内容: ² 根据客户需求和业务环境,输出测试方案 ² 与客户讨论,制定明确的测试计划 ² 根据测试计划中的时间点,按照测试方案中的内容和步骤进行ITOA平台功能验证测试 ² 完成测试后,输出测试报告 |
知识传递 |
根据客户需求和现场环境信息,确定现场演示培训的内容和计划,主要内容包括: ² IT大数据平台日常管理操作演示 ² IT大数据平台日常维护操作演示 ² 客户问题答疑 |
加快业务上线:提供完整的端到端的一站式服务,缩短了方案设计和部署阶段的交付时间,加快业务部署和上线。
更稳定和高效:可有效确保客户业务系统的顺利上线和持续高效的运行。
持续提供服务:专业的大数据技术专家,可持续的为客户提供大数据技术的咨询。
降低OPEX:在整个服务交付过程中,技术专家将与客户进行充分的面对面交流,提高客户的管理能力,降低OPEX。
大数据平台部署服务配套大数据DataEngine平台,面向行业、商业和运营商等客户,在大数据DataEngine平台的建设过程中,提供端到端的设计、部署、联调、验证和现场培训等一系列专业化服务。
大数据平台部署服务根据客户个性化的需求和现场环境信息,通过综合性的评估和分析,提供有针对性的方案设计和严谨的实施计划,并提供专业化的大数据DataEngine安装、调测、联调和集成验证。还将为客户提供现场的操作演示和培训,使得客户在系统运行过程中,具备基本的管理和维护大数据DataEngine平台的能力。
通过大数据平台部署服务,客户可将精力投放到业务开发上,减少业务构建的时间和成本。
更贴近客户需求:专业的方案设计和实施部署,基于客户的实际需求、真实环境和规模,结合具体配置的设备和主机软件进行有针对性的设计和部署,使整体的方案设计和实施部署更贴近客户的规划目标和业务需求。
专业化:由多名极富经验的大数据领域专家共同组建专家团,在集成部署服务交付的各个阶段,均可提供专业化的服务。
标准化:集成部署服务中包含的收集与分析、方案设计、工程交付、集成验证、演示培训等服务均结合了在各行业的服务交付经验实践,具备统一的交付标准,为客户提供标准化的服务
全面性:从客户IT业务系统角度考虑资源、安全等可用性问题,使整个虚拟化平台形成一个统一的、高效的资源池。
大数据平台部署服务为客户提供了端到端的服务,服务交付人员需要详细了解客户需求,深入分析客户业务系统现状,设计出切实可行的实施方案,并细化成可供实施的各种图、表、配置文件等交付件。
大数据平台部署服务内容如下表所示:
服务名称 |
服务描述 |
详细信息收集 |
服务专家将根据信息收集模板,通过电话或现场交流的方式,收集客户需求和现场环境信息,主要收集内容如下: ² 客户当前的服务器配置(CPU、内存、磁盘) ² 当前组网拓扑、设备类型、配置、接口等 ² 客户对可靠性、安全性方面的要求 ² 命名规则 ² DataEngine平台服务组件需求 |
实施方案设计 |
根据客户的实际需求和信息收集的结果,进行具体的实施方案设计,主要包括以下内容: ² 大数据DataEngine平台整体架构设计 ² 数据存储、计算、管理、服务等子系统设计,包括服务器节点组件部署设计 ² MPP子系统设计,包括服务器节点、存储空间设计 ² 资源需求和规划:IP资源、VLAN规划等 ² 方案实施计划,与客户讨论,共同确定合适的时间计划。 |
实施环境准备 |
完成实施方案设计之后,交付工程师将 与客户确认现场环境是否已满足进场实施的条件,主要将确认如下内容: ² 检查机房环境如强电、弱电、接地、制冷等配套设施是否满足设备长期稳定运行的需求 ² 检查硬件设备是否已经准备就绪 ² 检查软件、License等是否已经准备就绪 ² 检查需客户提供的资源如IP地址、管理终端等是否已经准备就绪 |
安装、调测和联调 |
通过实施环境准备阶段的工作,确认现场环境满足进场实施的条件后,即可根据实施方案设计中确定的内容和计划进行软件的安装、调测和联调工作,主要内容包括: ² DataEngine平台软件安装和部署 ² 开启具有HA功能的组件的HA ² DataEngine平台整体联调 |
集成验证 |
完成DataEngine系统的安装、调测和联调之后,将进行系统的集成验证,以确认DataEngine系统各项功能和特性运行正常,主要包括如下内容: ² 根据客户需求和业务环境,输出测试方案 ² 与客户讨论,制定明确的测试计划 ² 根据测试计划中的时间点,按照测试方案中的内容和步骤进行DataEngine平台功能验证测试 ² 完成测试后,输出测试报告 |
知识传递 |
根据客户需求和现场环境信息,确定现场演示培训的内容和计划,主要内容包括: ² DataEngine平台日常管理操作演示 ² DataEngine平台日常维护操作演示 ² 客户问题答疑 |
加快业务上线:提供完整的端到端的一站式服务,缩短了方案设计和部署阶段的交付时间,加快业务部署和上线。
更稳定和高效:可有效确保客户业务系统的顺利上线和持续高效的运行。
持续提供服务:专业的大数据技术专家,可持续的为客户提供大数据技术的咨询。
降低OPEX:在整个服务交付过程中,技术专家将与客户进行充分的面对面交流,提高客户的管理能力,降低OPEX。
数据的ETL是指把用户的源主机上的数据通过ETL工具迁移到大数据平台,并且能够保证增量数据的完整性。
用户数据的种类繁多有结构化数据、半结构化数据、非结构化数据。将提供各种迁移工具满足各种场景。
ETL服务,可支撑用户TB、PB级别的数据迁移。提供更快速、更可靠的物有所值的专业化ETL服务,帮助客户高效的完成数据的迁移。
在实施数据ETL的过程中,我们除了要关注迁移过程的可靠性,还需要关注迁移的性能,即迁移的时间和对业务系统的影响,数据迁移的效率指标包括以下三个方面:
整体迁移时间:从源主机开始迁移到迁移结束的时间
对业务系统的性能影响:迁移对源主机上业务系统的影响程度
增量数据的自动化迁移
ETL服务的目标是优化整体迁移的时间和业务停机时间,并且迁移对于源主机上运行服务的性能造成的影响降低。在迁移过程中,这几个因素互相影响,将针对不同的业务场景和客户需求,进行充分和专业的评估与分析,并设计合理的和定制化的迁移方案,以达到预期的目标。
大数据ETL服务根据客户个性化的需求和现场环境信息,通过综合性的评估和分析,提供有针对性的方案设计和严谨的实施计划,并提供专业化的数据ETL过程中的安装、调测、联调和集成验证。还将为客户提供现场的操作演示和培训,使得客户在系统运行过程中,具备基本的数据ETL的能力。
数据ETL服务具有各种显著的优势,并提供灵活的选择,以帮助客户成功的完成数据的迁移,包括全量、增量数据及自动化。
快速响应:强大的专业化团队和遍布全国的办事处和渠道服务工程师,可快速响应客户的需求。
定制化:基于客户的实际业务环境和目标,经过专业的评估和分析,定制符合客户需求和业务目标的ETL方案。
专业化:经验丰富的服务专家,利用先进且成熟的ETL工具,可为所有客户的数据ETL提供实践。
完整性:结合规划、设计、迁移、验证和演示培训等服务为一体,为客户提供端到端的一体化ETL服务。
多样化:可同时提供多种ETL工具满足不同的场景。
大数据ETL服务是大数据平台建设的重要环节,用于将客户的业务系统的数据迁移到大数据平台。
大数据平台ETL服务为客户提供了端到端的服务,服务交付人员需要详细了解客户需求,深入分析客户业务系统现状,设计出切实可行的实施方案,并细化成可供实施的各种图、表、配置文件等交付件。
大数据ETL服务内容如下表所示:
服务名称 |
服务描述 |
详细信息收集 |
服务专家将根据信息收集模板,通过电话或现场交流的方式,收集客户需求和现场环境信息,主要收集内容如下: ² 客户当前的服务器配置(CPU、内存、磁盘) ² 当前组网拓扑、设备类型、配置、接口等 ² 数据源信息(数据表数量、表结构、数据量、增量数据等) ² ETL需求(数据源访问方式、数据安全、脱敏等) |
评估和分析 |
根据信息收集的结果,对用户数据ETL进行评估和规划,主要包括如下内容: ² 评估当前数据源物理服务器资源利用率,分析是否满足数据的ETL。 ² 评估当前数据源的数据种类、数据量、增量数据、数据字典等信息,分析采用何种ETL工具迁移,增量数据如何迁移。 ² 评估当前大数据平台可用资源(计算、存储、网络等)是否具备数据ETL的条件。 ² 评估数据ETL过程对业务系统的风险,包括业务暂停、数据丢失、性能下降等,并提出相应的规避或回退措施。 |
实施方案设计 |
根据客户的实际需求和信息收集的结果,进行具体的实施方案设计,主要包括以下内容: ² 采用合适的数据ETL工具 ² 数据处理,包括错误数据处理等 ² 定时增量数据抽取 ² 数据质量管理,数据字典整理等 ² 方案实施计划,与客户讨论,共同确定合适的时间计划。 |
数据ETL |
通过实施环境准备阶段的工作,确认现场环境满足进场实施的条件后,即可根据实施方案设计中确定的内容和计划进行数据的抽取、转换和加载工作,主要内容包括: ² DataEngine DI软件安装和部署 ² 数据ETL ² 增量数据ETL ² 自动化配置 |
集成验证 |
完成ETL的安装、调测和联调之后,将进行系统的集成验证,以确认ETL系统各项功能和特性运行正常,主要包括如下内容: ² 根据客户需求和业务环境,输出测试方案 ² 与客户讨论,制定明确的测试计划 ² 根据测试计划中的时间点,按照测试方案中的内容和步骤进行ETL功能验证测试 ² 完成测试后,输出测试报告 |
知识传递 |
根据客户需求和现场环境信息,确定现场演示培训的内容和计划,主要内容包括: ² DataEngine DI平台日常管理、维护操作演示 ² 数据ETL操作演示 ² 客户问题答疑 |
现阶段各行各业在使用数据进行查询分析基本都是通过前端业务人员需要与信息部IT人员沟通,向他们解释具体的业务流程,然后IT人员再根据业务流程来获取数据建立模板这样一个流程来完成的。随着信息化的长期发展,这样一个使用流程的弊端越来越明显,具体表现在以下几个方面:
数据结构混乱。数据库经过多年建设,数据非常庞大复杂,IT人员几乎不太可能弄清楚所有数据表结构。
沟通成本大。前端业务人员需要与信息部IT人员沟通,向他们解释具体的业务流程,然后IT人员再根据业务流程来获取数据建立模板,这中间的沟通会反复好几次才能达到前端业务人员想要的效果。
响应时间慢。大部分的查询分析都需要IT人员建立,工作量大,前端人员等待的时间长,不能及时响应。
灵活性差。查询需求多样化,每个查询分析模板均是固定不可变更,不能满足一个模板的重复使用。
DataEngineBI通过多人协同合作来解决上述弊端,系统管理员准备数据,转义数据,将数据变成业务人员可理解的状态,管理员无需具体了解所有数据表结构,DataEngineBI会自动将数据库中的表间关系读取出来;业务人员借助其对业务关系的了解在可理解的数据基础上创建BI分析,并分享给领导,无需再与IT人员反复沟通,降低沟通成本和使用门槛,并且能够及时响应;领导者直接查看分析,可通过修改统计维度和指标来达到了解各个方面数据的分析结果,灵活多变,利用分析结果发现问题,解决问题并辅助做出决策。
DataEngineBI的定位是业务人员自己分析报表,所以在引擎部分,我们将传统的关系型数据库非关系型化,这样用户在选择字段的时候才可以做到像在一张表里使用的效果,重点是自主分析,传统数据库非关系型化。
更贴近客户需求:专业的方案设计和实施部署,基于客户的实际需求、真实环境和规模,结合具体配置的设备和主机软件进行有针对性的设计和部署,使整体的方案设计和实施部署更贴近客户的规划目标和业务需求。
专业化:由多名极富经验的大数据领域专家共同组建专家团,在集成部署服务交付的各个阶段,均可提供专业化的服务。
标准化:集成部署服务中包含的收集与分析、方案设计、工程交付、集成验证、演示培训等服务均结合了在各行业的服务交付经验实践,具备统一的交付标准,为客户提供标准化的服务
全面性:从客户IT业务系统角度考虑资源、安全等可用性问题,使整个虚拟化平台形成一个统一的、高效的资源池。
华三DataEngineBI提供了从数据采集、数据加工处理、数据存储、数据分析、数据可视化于一体的完整解决方案,使用户可以更加直观简便地获取信息、探索知识、共享知识,从而降低了用户的人力和物力成本。它通过分析企业已有的信息化数据,帮助企业发现并解决存在的问题,预测模拟企业将来的发展,协助企业及时调整策略做出更好的决策,增强企业的可持续竞争性。
华三DataEngineBI部署服务内容如下表所示:
服务名称 |
服务描述 |
详细信息收集 |
服务专家将根据信息收集模板,通过电话或现场交流的方式,收集客户需求和现场环境信息,主要收集内容如下: ² 客户当前的服务器硬件配置(CPU、内存、磁盘) ² 业务数据来源,数据在哪些系统中,之间的联系,数据字典等 ² 客户数据展示指标,指标计算方法,展示形式或展示效果 |
实施方案设计 |
根据客户的实际需求和信息收集的结果,进行具体的实施方案设计,主要包括以下内容: ² 运行环境规划 ² 数据指标整理 ² 数据指标计算方法,数据建仓设计 ² 展示主题规划 ² 方案实施计划,与客户讨论,共同确定合适的时间计划和展示目标。 |
实施环境准备 |
完成实施方案设计之后,交付工程师将 与客户确认现场环境是否已满足进场实施的条件,主要将确认如下内容: ² 检查机房环境如强电、弱电、接地、制冷等配套设施是否满足设备长期稳定运行的需求 ² 检查硬件设备是否已经准备就绪 ² 检查软件、License等是否已经准备就绪 ² 检查需客户提供的资源如IP地址、管理终端等是否已经准备就绪 |
安装与调测 |
通过实施环境准备阶段的工作,确认现场环境满足进场实施的条件后,即可根据实施方案设计中确定的内容和计划进行软件的安装与调测工作,主要内容包括: ² BI软件部署 ² 展示指标算法实现,现有sql代码移植,业务建仓 ² 数据接入 ² 主题页面制作,包括页面设计,图标选择 ² 权限分配,报表分享 ² 客户演示 |
知识传递 |
根据客户需求和现场环境信息,确定现场演示培训的内容和计划,主要内容包括: ² DataEngineBI产品培训 ² 客户问题答疑 |
加快业务上线:提供完整的端到端的一站式业务数据分析服务,缩短了方案设计和部署阶段的交付时间,加快业务部署和上线。
更稳定和高效:可有效确保客户业务系统的顺利上线和持续高效的运行。
持续提供服务:专业的大数据技术专家,可持续的为客户提供大数据技术的咨询。
降低OPEX:在整个服务交付过程中,技术专家将与客户进行充分的面对面交流,提高客户的管理能力,降低OPEX。
大数据建仓服务配套大数据DataEngine数据框架引擎,面向行业、商业和运营商等客户,在大数据DataEngine数据框架建设过程中,提供端到端的业务系统数据分析、业务数据融合、数据主题创建、建立数据模型、数据分析计算、现场培训等一系列专业化服务。
用户数据的种类繁多有结构化数据、半结构化数据、非结构化数据。数据框架将提供满足各种数据存储分析的场景。
数据建仓服务,可支撑用户TB、PB级别的数据存储。提供通用数据分层模型,支持数据通用管理功能,数据管理功能,通用算法模型、行业模型。
通用管理功能
提供各项目通用的功能模块,包括用户权限管理、日志审计管理等。
数据管理功能
提供数据源管理、数据仓库管理、数据集管理、数据模型管理、图表分析,基于各种数据源的模型管理功能,可以依据数据特点选择不同的多维模型,支持模型中事实、维度、度量的设置。支持多维模型的数据查看、上卷、下钻、切片等多维分析操作。
通用算法支持
提供各项目通用的基础算法,包括全文检索、用户画像、同行分析、关联分析、关系分析等。
行业模型支持
提供基于各行业标准的行业模型支持,包括行业标准维度、行业数据仓库和行业算法模型。
大数据建仓服务根据客户个性化的需求和用户业务系统信息,通过综合性的评估和分析,提供有针对性的方案设计和严谨的实施计划,并提供专业化的大数据DF安装、调测、联调和集成验证。还将为客户提供现场的操作演示和培训,使得客户在系统运行过程中,具备基本的管理和维护大数据DataEngine DF平台的能力。
通过大数据建仓服务,客户可将精力投放到业务开发上,减少业务构建的时间和成本
大数据建仓服务具有各种显著的优势,并提供灵活的选择,以帮助客户成功的完成数据的标准化、数据分析、数据挖掘、数据计算的功能。
方便部署
:方便部署,减少了搭建数据仓库的繁琐工作。
统一标准:统一标准,适用于大部分场景
易用易扩展:便于扩展和更新,针对个性化和定制化需求便于快速扩展
多样化:支持分布式存储,支持多种结构化、非结构化、半结构化数据。
可视化:可以通过可视化的方式,管理分析数据
大数据建仓服务是大数据平台建设的重要环节,用于将客户的业务系统的数据转移到标准数据框架中,并且分层进行挖掘分析计算,以及对数据模型的建立和对整个数据的管理。
大数据建仓服务为客户提供和各个业务系统数据融合服务,服务交付人员需要详细了解客户需求,深入分析客户业务系统现状,设计出切实可行的融合实施方案,并编写数据融合程序,进行各个业务系统按照统一标准融合到数据框架中来。
大数据框架服务内容如下表所示:
服务名称 |
服务描述 |
业务系统数据分析 |
服务专家将根据信息收集模板,通过电话或现场交流的方式,收集客户需求和现场环境信息,主要收集内容如下: ² 业务系统种类。 ² 数据情况分析(数据字典、数据质量) ² 业务情况分析(一数一源,数据来源,数据逻辑关系) ² 数据标准分析 |
业务数据融合 |
根据信息收集的结果,对用户数据融合进行规划和实现,主要包括如下内容: ² 比对源数据标准和数据仓库数据标准的差异 ² 根据主题进行数据标准统一融合 ² 设计实现数据联动机制,数据增量机制 ² 对于问题数据进行归类处理。 ² 数据校验和监测 |
数据主题创建 |
根据客户的实际需求和信息收集的结果,进行具体数据汇总分类,创建数据集市,主要包括以下内容: ² 分析数据业务类别 ² 创建分类主题数据集市 ² 创建具体主题汇聚表 ² 将数据进行挖掘汇聚。 |
建立数据模型 |
通过实施数据主题集市创建以及数据归类分析,根据客户需求创建数据模型,主要内容包括: ² 多维数据模型创建 |
数据分析计算 |
通过客户具体需求和数据主题,模型的建立,对数据进行分析、挖掘、计算: ² 数据分析、计算 ² 计算结果汇总,归类 |
数据标准接口 |
根据客户需求和数据计算结果,提供对外数据传输标准接口: ² Rest标准接口 ² SQL标准接口 |
知识传递 |
根据客户需求和现场环境信息,确定现场演示培训的内容和计划,主要内容包括: ² DataEngine DF平台日常管理、维护操作演示 ² 数据框架数据分析功能操作演示 ² 客户问题答疑 |
提供通用数据仓库分层模型,形成数据建模的实践,降低数据仓库建设难度
内置国家和行业标准,使数据治理、建仓建模、共享交换和业务建模有据可依
内置多维模型和常见维度指标,方便多维数据分析
内置行业数据模型和主题域模型,降低行业数据建模和建仓难度
提供通用算法支持,方便数据分析处理和数据挖掘
积累行业业务模型,形成行业实践,降低项目风险
提供模型管理手段,方便模型定制和修改
提供从数据源、数据集、数据仓库、数据分析到数据展现全流程工具支持
专业化的评估和设计,有效确保数据建仓过程的可靠性和业务的高效运行。
专业的大数据技术专家,可持续的为客户业务系统的数据建仓服务提供咨询和规划。
大数据技术服务是为购买了大数据产品的客户在标准服务基础上提供的专家支持类服务,可以帮助客户更好的使用大数据产品,为客户带来更大的服务收益。
具有丰富的资深技术专家,依托先进的服务管理理念和独特的软硬件工具,与客户的技术人员和IT 管理人员紧密合作,针对客户基于产品的技术服务之外的需求,在基础架构、数据和业务各个层次,提供专业、标准的技术服务。
可以根据客户实际需求,为客户灵活组织服务内容,提供现场技术支持和远程技术支持的服务方式。
大数据技术服务的定位:
相应的服务产品未正式发布之前
已发布的服务产品中未能完整覆盖的服务内容
根据客户需求所定制并与客户达成协议的服务
基于大数据软件技术支持服务,客户可以全天候获取专业、有效的大数据软件技术支持,并可以获取业界领先的大数据专业知识。大数据软件技术支持团队成员均为大数据领域专家,拥有丰富的大数据规划、设计、实施和维护的经验,可以大程度帮助客户降低大数据环境风险,加快客户投资回报率
大数据技术服务是根据客户实际需求提供的技术服务,服务内容包含以下内容,但不仅限于以下内容,可以根据客户实际需求进行自由组合:
服务名称 |
服务描述 |
大数据现场技术支持服务 |
大数据技术支持基础服务不能满足客户需求时,可以购买通过技术服务提供更多的服务专家到现场技术支持; |
大数据技术咨询与交流服务 |
大数据技术突飞猛进,当客户在使用大数据时碰到任何疑难问题,大数据专家可以提供全面专业的技术交流和咨询服务,为客户排忧解难,包括大数据概念、大数据技术、大数据应用、大数据学习等。 |
重大事件保障服务 |
当新业务上线,年终结算,或者任何关键业务事件时,您需要临时性的远程或现场支持,从而使你能够全神贯注于事件本身的成功而不是复杂的大数据技术。 重大事件保障服务包括: • 远程和(或)现场支持 • 确保大数据正常运营的优化方案 • 快速故障处理 |
大数据培训服务 |
根据客户需求,制定全面的培训计划和培训课程,以保证用户操作人员能够熟练地操作和维护、测试、开发等工作,技术人员的学习培训,重在学习知识、提升专业技能,以解决安全生产、产品开发实际问题为契机,不断提高技术人员的技能和实践能力,进而全面提升全体人员的综合业务水平。 |
大数据健康检查服务 |
对大数据运行的软硬件环境、参数配置、可靠性、安全性等进行健康检查,给出改进意见; |
数据备份 |
对客户数据中心的数据进行备份; |
数据库健康检查 |
对客户运行的大数据平台的数据库进行健康性检查,给出改进意见; |
数据库设计评估服务 |
对客户的数据库设计方案进行评估,给出优化建议; |
灾备方案设计评估服务 |
对客户的灾备设计方案进行评估,给出优化建议; |
大数据应急演练服务 |
针对客户实际大数据环境,制定应急演练方案和演练计划,与客户一起对进行应急演练,验证大数据平台的强壮性,消除可能存在的隐患; |
根据客户实际业务,灵活组合提供服务内容,更贴近客户实际需求;
专业的大数据技术专家,可为客户更加全面和专业的服务;
大数据驻场运维服务是公司以客户信息服务管理成熟度、运维规范成熟度、运维人员技能成熟度、服务价值期望及服务质量管控要求等为需求基准, 安排专家组实地深入地了解客户大数据平台运营、日常维护、人员培养等方面的现状,并根据客户的服务需求,派驻驻场工程师到客户现场对大数据平台运营维护、人员技能提升等提供技术保障的服务。
5*8规格:标配1名大数据工程师,支持一周5个工作日,每个工作日8小时的日常维护工作。
序号 |
服务模块 |
服务子项 |
服务描述 |
1 |
基础运维 |
服务计划与监控 |
根据客户需求制定年度维护服务计划,每季度对服务内容进行回顾和调整,全程对服务质量进行监控 |
2 |
日常维护与监控 |
协助客户对的大数据平台软件和相关的服务器等硬件设备进行日常维护和例行监控,并提供维护服务记录 |
|
3 |
高级巡检服务 |
每季度一次,定期采集大数据软件和相关硬件设备的运行信息并进行分析,对大数据的运行和维护现状进行检查,并对存在的潜在风险和漏洞进行分析和汇报。 |
|
4 |
信息分析整理 |
协助客户管理设备资产信息(序列号、维保起始时间)、数据库相关信息(字典、SQL说明等),为后续运维工作提供参考依据。 |
|
5 |
故障与问题处理 |
快速解决由于新华三产品本身原因造成的故障和问题,并恢复业务;对于重大问题,直接升级到原厂专家,提升问题处理效率,并全程跟踪问题的处理进展,定期回顾。 |
|
6 |
设备硬件维护 |
根据服务器等硬件设备的备件服务级别,协助客户进行快速备件更换 |
|
漏洞整改 |
进行安全漏洞扫描,对发现新的安全隐患及安全漏洞,由维护人员对漏洞进行修复,并将扫描结果和处理结果向甲方报备 |
||
应急预案 |
针对重大故障,制定应急对应的决策,以保障故障能够及时响应和解决 |
||
软件升级 |
根据客户需要,制定升级方案,进行软件版本的升级服务 |
||
配置变更 |
根据客户需要,制定配置变更方案,进行软硬件的配置变更操作 |
||
7 |
重大变更协助 |
协助变更责任人制定大数据变更实施方案,对变更实施方给予必要的指导和配合 |
|
8 |
服务总结与汇报 |
每季度一次日常维护服务总结,每年度一次对客户汇报,听取客户相关意见,做出后续服务工作规划 |
|
9 |
大数据运维 |
大数据服务开通 |
协助客户开通大数据服务。 |
10 |
大数据资源管理 |
每周输出大数据资源(CPU、内存、存储、网络等)使用情况的总结报表,为容量管理决策提供参考 |
|
11 |
大数据数据迁移协助 |
有数据迁移需求时,根据迁移服务商要求,提供ETL迁移协助。 |
|
12 |
大数据技术培训 |
每季度一次向客户提供大数据相关产品培训、运维案例分享,提升运维团队技术水平。 |
|
13 |
专项保障 |
重大时刻值守 |
在任何可能对业务运营产生重大影响或客户指定的其他重要时刻,提供专业的值守保障服务 |
主动式实时监控
不间断的监控大数据平台软件的运行状态,不漏过任何一件计划外事件;
当监控到异常事件后,第一时间根据知识库、应急预案采用合理的措施,排除故障,恢复业务;
多领域专家团队
包含网络、服务器、操作系统、数据库、大数据等各领域的技术专家和运维专家,全面覆盖各领域技能,可以处理涉及面更广、复杂程度更高的问题和需求;
熟悉现网环境
运维组的成员作为专职的运维团队,全流程深度参与项目的建设、变更、升级、优化等事项,对本项目的现网环境非常熟悉,具备快速解决各种紧急或重大故障的基本条件;
运维经验拉通
运维团队支持全国数十个大数据项目的运维工作,丰富的大数据运维经验内部拉通、共享
快速升级通道
根据事件的不同级别,提供了VIP坐席、L2和L3等事件的快速升级通道,并统一由远程运维团队协调各方面资源,快速的恢复业务、解决问题;
高价值的增值服务
运维团队,除了负责处理重大故障,协助驻场运维组快速恢复业务之外,同时提供大数据平台的架构优化、数据持续性、平台可用性、业务上线咨询、重大变更、系统/平台扩容和升级等各方面提供远程或现场的技术支撑和保障。
基于ITIL标准的运维管理体系和流程
基于ITIL的标准建设远程运维团队的管理体系和流程,可以有效的保障运维的质量