专利转让平台_买专利_卖专利_中国高校专利技术交易-买卖发明专利上知查网

全部分类
全部分类
一种Hadoop云平台的监控装置及方法

一种Hadoop云平台的监控装置及方法

IPC分类号 : H04L12/24,H04L12/26,G06F16/22,G06F16/25

申请号
CN201910046468.7
可选规格
  • 专利类型: 发明专利
  • 法律状态: 有权
  • 申请日: 2019-01-18
  • 公开号: CN109951313A
  • 公开日: 2019-06-28
  • 主分类号: H04L12/24
  • 专利权人: 长江大学

专利摘要

一种Hadoop云平台的监控装置,其特征在于,在搭建Hadoop云平台时设定一个主节 点,其余节点为从节点,所述装置包括数据采集模块、数据传输模块、数据处理模块;所述数 据采集模块、数据传输模块分布在Hadoop云平台的每个节点上,所述数据处理模块位于 Hadoop云平台的主节点上; 所述数据采集模块用于利用SNMP协议、日志文件和JMX接口采集节点上基础设备和 Hadoop组件的实时监控数据; 所述数据传输模块用于利用Nagios组件NRPE将各个节点上的实时监控数据发送至所 述数据处理模块; 所述数据处理模块用于对所述实时监控数据进行筛选、转换、计算和对比,实现数据可 视化、报警和数据存储功能; 所述数据处理模块具体包括: 数据可视化单元:将所述实时监控数据与预设的门限阈值进行比较,来判定监控状态; 借助PNP4Nagios插件,以前一次检测时间为起点、本次检测时间为终点的方式绘制检测曲 线,以图形的方式展示所述实时监控数据和监控状态;使用Nagios框架对整个Hadoop云平 台的监控进行管理与维护; 报警单元:根据所述监控状态判定是否报警,若报警,则生成报警信息; 通过包括短信、QQ或微信的方式将报警信息发送给预先设定的联系人;当处理完问题, 监控状态恢复正常时,发送报警取消信息; 数据存储单元:根据监控对象名称在HBase中创建对应表,将所述实时监控数据转换为 HBase中表的数据格式,并按照监控时间保存在所述对应表中。 2.根据权利要求1所述Hadoop云平台的监控装置,其特征在于,所述数据采集模块中, 所述基础设备包括Hadoop云平台中的每个Linux主机;所述Hadoop组件包括HDFS、 MapReduce、HBase;所述实时监控数据包括:Linux 主机资源情况、Hadoop集群的情况、HDFS 使用的情况、MapReduce的运行情况、HBase的使用情况。 3.根据权利要求1所述Hadoop云平台的监控装置,其特征在于,所述数据传输模块中, 所述NRPE包括check_nrpe插件和NRPE守护进程,所述check_nrpe插件位于Hadoop主节点 上,所述NRPE守护进程位于其它从节点上。 4.根据权利要求1所述Hadoop云平台的监控装置,其特征在于,所述预设的门限阈值包 括第一阈值t1、第二阈值t2,且t1 态为正常“OK”,若所述实时监控数据大于第一阈值t1且小于第二阈值t2,则判定监控状态 为异常“WARNING”,若所述实时监控数据大于第二阈值t2,则判定监控状态为严重错误 “CRITICAL”,若出现未知错误或无法获取监控数据,则判定监控状态为未知错误或监控停 止“UNKNOWN”;当监控状态为“WARNING”、“CRITICAL”、“UNKNOWN”均报警。 5.一种Hadoop云平台的监控方法,其特征在于,所述方法包括: S1、搭建一个拥有多个节点的Hadoop云平台,设定一个主节点,其余节点为从节点,在 Hadoop平台上安装HBase数据库; S2、在各个节点上编写脚本,按预设监控周期采集基础设备和Hadoop组件的实时监控 数据; S3、在所述主节点上先后安装Nagios框架和NRPE,在Nagios安装目录配置Nagios文件, 设置Nagios检测策略;在所述从节点上配置NRPE的守护进程NRPE Daemon;将各个节点的实 时监控数据传输至所述主节点上; S4、在所述主节点上安装并配置可视化插件PNP4Nagios,将所述实时监控数据与预设 的门限阈值进行比较,来判定监控状态,按预设检测周期绘制检测曲线,以图形的方式展示 所述实时监控数据和监控状态; S5、在所述主节点上配置报警模块,根据所述监控状态判定是否报警,若报警,则通过 短信、QQ或微信的方式发送报警信息给预先设定的联系人;当监控状态恢复正常时,发送报 警取消信息; S6、根据监控对象名称在HBase数据库中创建对应表,将所述实时监控数据按照监控时 间保存至HBase数据库中所述对应表中; S7、查看Hadoop平台的监控情况; 所述步骤S2的具体过程为: 通过Python处理Linux系统主机的资源日志来获取所需系统资源的实时监控数据;利 用SNMP协议,通过snmpwalk命令获取网络流量的实时监控数据;利用JMX接口查看Hadoop组 件的数据并通过Python获取所需的实时监控数据;所述Hadoop组件包括HDFS、MapReduce、 HBase。 6.根据权利要求5所述Hadoop云平台的监控方法,其特征在于,所述步骤S4中,所述将 所述实时监控数据与预设的门限阈值进行比较,来判定监控状态的具体过程为: 为每一项实时监控数据分别预设门限阈值,所述预设门限阈值包括第一阈值t1和第二 阈值t2,且t1 述实时监控数据大于第一阈值t1且小于第二阈值t2,则判定监控状态为异常“WARNING”,若 所述实时监控数据大于第二阈值t2,则判定监控状态为严重错误“CRITICAL”,若出现未知 错误或无法获取监控数据,则判定监控状态为未知错误或监控停止“UNKNOWN”。 7.根据权利要求5所述Hadoop云平台的监控方法,其特征在于,所述步骤S5中,所述在 所述主节点上配置报警模块的具体实现方式为: 通过OneAlert创建Nagios应用并获取key值,在所述主机上安装onealert‑agent,在安 装目录配置所述key值并添加联系人,实现短信报警; 下载Python的第三方库wxpy或qqbot编写Python脚本实现QQ或微信报警。 8.根据权利要求5所述Hadoop云平台的监控方法,其特征在于,所述步骤S7的具体方式 包括: 在Hadoop平台的主节点上,通过访问Nagios框架自带的Web界面,查看Hadoop平台的监 控情况; 在Hadoop平台的其它从节点上,通过Hadoop平台每台主机之间配置的SSH登录所述主 节点,查看Hadoop平台的监控情况; 在其它计算机上,使用TeamViewer连接所述主节点,查看Hadoop平台的监控情况。

一种Hadoop云平台的监控装置及方法专利购买费用说明

专利买卖交易资料

Q:办理专利转让的流程及所需资料

A:专利权人变更需要办理著录项目变更手续,有代理机构的,变更手续应当由代理机构办理。

1:专利变更应当使用专利局统一制作的“著录项目变更申报书”提出。

2:按规定缴纳著录项目变更手续费。

3:同时提交相关证明文件原件。

4:专利权转移的,变更后的专利权人委托新专利代理机构的,应当提交变更后的全体专利申请人签字或者盖章的委托书。

Q:专利著录项目变更费用如何缴交

A:(1)直接到国家知识产权局受理大厅收费窗口缴纳,(2)通过代办处缴纳,(3)通过邮局或者银行汇款,更多缴纳方式

Q:专利转让变更,多久能出结果

A:著录项目变更请求书递交后,一般1-2个月左右就会收到通知,国家知识产权局会下达《转让手续合格通知书》。

动态评分

0.0

没有评分数据
没有评价数据
×

打开微信,点击底部的“发现”

使用“扫一扫”即可将网页分享至朋友圈

×
复制
用户中心
我的足迹
我的收藏

您的购物车还是空的,您可以

  • 微信公众号

    微信公众号
在线留言
返回顶部