CN111880810B - 一种服务实例部署方法、装置及电子设备和存储介质 - Google Patents

一种服务实例部署方法、装置及电子设备和存储介质 Download PDF

Info

Publication number
CN111880810B
CN111880810B CN202010738665.8A CN202010738665A CN111880810B CN 111880810 B CN111880810 B CN 111880810B CN 202010738665 A CN202010738665 A CN 202010738665A CN 111880810 B CN111880810 B CN 111880810B
Authority
CN
China
Prior art keywords
service instance
service
monitoring
hbase
regionserver
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010738665.8A
Other languages
English (en)
Other versions
CN111880810A (zh
Inventor
申胜利
亓开元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Inspur Intelligent Technology Co Ltd
Original Assignee
Suzhou Inspur Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Inspur Intelligent Technology Co Ltd filed Critical Suzhou Inspur Intelligent Technology Co Ltd
Priority to CN202010738665.8A priority Critical patent/CN111880810B/zh
Publication of CN111880810A publication Critical patent/CN111880810A/zh
Priority to PCT/CN2021/076872 priority patent/WO2022021850A1/zh
Priority to US18/005,945 priority patent/US20230289238A1/en
Application granted granted Critical
Publication of CN111880810B publication Critical patent/CN111880810B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061—Partitioning or combining of resources
    • G06F9/5072—Grid computing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5083—Techniques for rebalancing the load in a distributed system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/60—Software deployment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45504—Abstract machines for programme code execution, e.g. Java virtual machine [JVM], interpreters, emulators
    • G06F9/45516—Runtime code conversion or optimisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G06F9/5016—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals the resource being the memory

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Debugging And Monitoring (AREA)
  • Stored Programmes (AREA)

Abstract

本申请公开了一种服务实例部署方法、装置及一种电子设备和计算机可读存储介质，该方法包括：在目标物理节点中创建多个进程；其中，每个所述进程为一个RegionServer组件、用于执行一个服务实例；为每个所述服务实例分配标志字符，并基于所述标志字符为每个所述服务实例分配对应的端口；其中，每个所述服务实例标志字符作为对应的进程的系统参数；基于所述标志字符为每个所述服务实例创建对应的日志文件和pid文件。本申请提供的服务实例部署方法，实现了HBASE的RegionServer服务在同一物理节点上部署多个实例，充分使用一个物理节点的资源，提高了HBASE集群稳定性。

Description

一种服务实例部署方法、装置及电子设备和存储介质
技术领域
本申请涉及计算机技术领域，更具体地说，涉及一种服务实例部署方法、装置及一种电子设备和一种计算机可读存储介质。
背景技术
HBASE(Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统)的RegionServer服务提供具体的数据查询和插入，管理存储数据的region，对内存需求比较高。但是单个RegionServer服务不建议使用太高的内存，容易引发朱丽叶暂停，并且不利于稳定性。而Ambari管理平台默认只能一个节点安装一个RegionServer实例，在专门的HBASE物理集群下，无法充分有效地利用物理资源。
因此，如何在同一个物理节点上部署多个服务实例，充分使用一个物理节点的资源，提高HBASE集群稳定性是本领域技术人员需要解决的技术问题。
发明内容
本申请的目的在于提供一种服务实例部署方法、装置及一种电子设备和一种计算机可读存储介质，在同一个物理节点上部署多个服务实例，充分使用一个物理节点的资源，提高了HBASE集群稳定性。
为实现上述目的，本申请提供了一种服务实例部署方法，包括：
在目标物理节点中创建多个进程；其中，每个所述进程为一个RegionServer组件、用于执行一个服务实例；
为每个所述服务实例分配标志字符，并基于所述标志字符为每个所述服务实例分配对应的端口；其中，每个所述服务实例标志字符作为对应的进程的系统参数；
基于所述标志字符为每个所述服务实例创建对应的日志文件和pid文件。
其中，基于所述标志字符为每个所述服务实例分配对应的端口，包括：
基于所述标志字符在主函数参数位置添加每个所述服务实例对应的命令行，以便覆盖HBASE自身的端口配置，为每个所述服务实例分配对应的端口。
其中，还包括：
在JAVA虚拟机的设置位置添加每个所述服务实例对应的命令行，以便将每个所述服务实例标志字符作为对应的进程的系统参数。
其中，还包括：
基于所述标志字符在ambari的HBASE服务的元信息配置文件中添加每个所述服务实例对应的RegionServer组件；
基于所述标志字符在ambari的HBASE服务的角色操作顺序文件中添加每个所述服务实例对应的角色，并配置每个角色对应的操作的执行顺序；其中，所述服务实例对应的角色包括所述服务实例对应的RegionServer组件；
基于所述标志字符为每个所述服务实例创建对应的操作执行脚本，以便按照所述操作执行顺序执行对应的操作执行脚本。
其中，还包括：
基于所述标志字符在ambari的HBASE服务的警告配置文件中添加每个所述服务实例对应的告警模块，以便每个所述告警模块每隔第一预设时间检测所述服务实例对应的端口是否被使用，并对未被使用的端口对应的服务实例进行告警。
其中，还包括：
每个第二预设时间获取每个所述告警模块的告警内容，确定包含告警服务示例的告警节点，并统计所有所述告警节点的数量。
其中，还包括：
基于所述标志字符在ambari的监控组件中添加每个所述服务实例对应的监控指标，以便所述监控组件对每个所述服务实例的所有所述监控指标进行监控；
基于所述标志字符在ambari的HBASE服务的监控指标配置文件中添加每个所述服务实例对应的监控模块，以便每个所述监控模块从所述监控组件中获取对应的服务实例的所有所述监控指标；
基于所述标志字符在ambari的HBASE服务的窗口工具配置文件中添加每个所述服务实例对应的监控窗口，以便每个所述监控窗口显示对应的服务实例的所有所述监控指标。
为实现上述目的，本申请提供了一种服务实例部署装置，包括：
第一创建模块，用于在目标物理节点中创建多个进程；其中，每个所述进程为一个RegionServer组件、用于执行一个服务实例；
分配模块，用于为每个所述服务实例分配标志字符，并基于所述标志字符为每个所述服务实例分配对应的端口；其中，每个所述服务实例标志字符作为对应的进程的系统参数；
第二创建模块，用于基于所述标志字符为每个所述服务实例创建对应的日志文件和pid文件。
为实现上述目的，本申请提供了一种电子设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如上述服务实例部署方法的步骤。
为实现上述目的，本申请提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上述服务实例部署方法的步骤。
通过以上方案可知，本申请提供的一种服务实例部署方法，包括：在目标物理节点中创建多个进程；其中，每个所述进程为一个RegionServer组件、用于执行一个服务实例；为每个所述服务实例分配标志字符，并基于所述标志字符为每个所述服务实例分配对应的端口；其中，每个所述服务实例标志字符作为对应的进程的系统参数；基于所述标志字符为每个所述服务实例创建对应的日志文件和pid文件。
本申请提供的服务实例部署方法，实现了HBASE的RegionServer服务在同一物理节点上部署多个实例，能够在相同region数的情况下减轻单个RegionServer的压力，也可以在同样总内存占用的情况下降低朱丽叶暂停的发生，提高了HBASE集群的稳定性，能够更充分地利用集群的物理资源，在没有物理扩容的情况下部署更多的RegionServer实例，在某些场景下降低扩容成本。本申请还公开了一种服务实例部署装置及一种电子设备和一种计算机可读存储介质，同样能实现上述技术效果。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本申请。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。附图是用来提供对本公开的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本公开，但并不构成对本公开的限制。在附图中：
图1为根据一示例性实施例示出的一种服务实例部署方法的流程图；
图2为根据一示例性实施例示出的一种HBASE集群的结构图；
图3为根据一示例性实施例示出的一种服务实例部署装置的结构图；
图4为根据一示例性实施例示出的一种电子设备的结构图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请实施例公开了一种服务实例部署方法，在同一个物理节点上部署多个服务实例，充分使用一个物理节点的资源，提高了HBASE集群稳定性。
参见图1，根据一示例性实施例示出的一种服务实例部署方法的流程图，如图1所示，包括：
S101：在目标物理节点中创建多个进程；其中，每个所述进程为一个RegionServer组件、用于执行一个服务实例；
本实施的执行主体为HBASE集群的管理节点，目的为在同一物理节点在部署多个服务实例。在本实施例中，在同一个目标物理节点中创建多个进程，每个进程为一个RegionServer组件，用于执行一个服务实例(即RegionServer实例)，即响应用户的读写请求，服务实例是HBASE的数据处理和计算单元，维护预写日志、读写缓存，管理多个Region。
S102：为每个所述服务实例分配标志字符，并基于所述标志字符为每个所述服务实例分配对应的端口；其中，每个所述服务实例标志字符作为对应的进程的系统参数；
在具体实施中，改造HBASE自身的执行方式，使其能识别操作RegionServer实例时执行命令中服务实例的标志字符，优选的，每个服务实例的标志字符可以在参数RegionServer上添加后缀的方式实现，基于该标志字符可以启动对应的RegionServer实例，并根据不同标志字符在启动JAVA进程时为不同服务实例添加上相应的系统参数和端口配置等。
具体的，基于所述标志字符为每个所述服务实例分配对应的端口的步骤包括：基于所述标志字符在主函数参数位置添加每个所述服务实例对应的命令行，以便覆盖HBASE自身的端口配置，为每个所述服务实例分配对应的端口。本实施例还包括：在JAVA虚拟机的设置位置添加每个所述服务实例对应的命令行，以便将每个所述服务实例标志字符作为对应的进程的系统参数。在具体实施中，在最终启动JAVA进程时，使用“-D参数名＝参数值”的方式添加三对到java命令行中(java[options]classname[args])，其中一对添加到“options”JVM(Java Virtual Machine，JAVA虚拟机)设置的位置，以便将标志字符作为该进程的一个系统参数，另外两对添加到的“args”主函数参数的位置，以覆盖两个HBASE自身的端口相关配置，实现为不同标志字符的服务实例分配不同的两个端口。
S103：基于所述标志字符为每个所述服务实例创建对应的日志文件和pid文件。
在本步骤中，为不同服务实例创建对应的日志文件和pid(ProcessIdentification)文件，Pid文件为文本文件，其内容仅有一行，记录了其对应进程的ID。基于其标志字符对文件进行命名，以供对应的进程进行使用，以实现在目标物理节点部署多个服务实例，如图2所示，HBASE集群包括两个物理节点，每个物理节点部署三个服务实例，每个服务实例的标识分别为RegionServer、RegionServer1和RegionServer2。
作为一种优选实施方式，本实施例还包括：基于所述标志字符在ambari的HBASE服务的元信息配置文件中添加每个所述服务实例对应的RegionServer组件；基于所述标志字符在ambari的HBASE服务的角色操作顺序文件中添加每个所述服务实例对应的角色，并配置每个角色对应的操作的执行顺序；其中，所述服务实例对应的角色包括所述服务实例对应的RegionServer组件；基于所述标志字符为每个所述服务实例创建对应的操作执行脚本，以便按照所述操作执行顺序执行对应的操作执行脚本。
在具体实施中，改造ambari(一种基于Web的工具，支持Apache Hadoop集群的供应、管理和监控)的HBASE服务RegionServer组件的页面操作对应的后台执行步骤，使其能执行新添加的带有不同后缀的RegionServer组件的操作，如开始，停止，重启，开启安全模式和自动重启，并在整体操作HBASE服务时遵循正确的顺序。在ambari的HBASE服务的目录中的元信息配置文件中，新添的带有不同后缀的RegionServer组件，会去执行改造后的ambari操作RegionServer组件的步骤，改造后的步骤中，开启安全后需要执行的部分和其它RegionServer公有的部分如用户组权限检查等仍使用原本RegionServer的执行流程，最终调用HBASE本身的执行命令的部分如开始，停止，重启等，将在使用HBASE本身执行命令时在原本的参数RegionServer上添加此处的后缀。在ambari的HBASE服务的目录中的角色操作顺序文件里，新添的带有不同后缀的HBASE-RegionServer角色，将会和HBASE-RegionServer同等级别依次执行。
本申请实施例提供的服务实例部署方法，实现了HBASE的RegionServer服务在同一物理节点上部署多个实例，能够在相同region数的情况下减轻单个RegionServer的压力，也可以在同样总内存占用的情况下降低朱丽叶暂停的发生，提高了HBASE集群的稳定性，能够更充分地利用集群的物理资源，在没有物理扩容的情况下部署更多的RegionServer实例，在某些场景下降低扩容成本。
在上述实施例的基础上，作为一种优选实施方式，还包括：基于所述标志字符在ambari的HBASE服务的警告配置文件中添加每个所述服务实例对应的告警模块，以便每个所述告警模块每隔第一预设时间检测所述服务实例对应的端口是否被使用，并对未被使用的端口对应的服务实例进行告警。
在具体实施中，在ambari的HBASE服务配置目录中的警告配置文件里新添的带有不同后缀的HBASE_RegionServer模块，即告警模块，将使ambari隔一段时间去检测带有该后缀组件所在节点对应的不同端口，并将在检测不到该端口被使用时在页面显示带有该后缀的HBASE_RegionServer红色警告信息，并显示出错内容。
优选的，本实施例还包括：每个第二预设时间获取每个所述告警模块的告警内容，确定包含告警服务示例的告警节点，并统计所有所述告警节点的数量。
在具体实施中，在server模块中，新添的带有后缀的子模块，将使ambari隔一段时间去检测上述模块的监控内容，并在上述模块报警时，统计带有该后缀组件总节点和报警节点的个数。
由此可见，本实施例可以在某些节点上新添加的带后缀的RegionServer组件宕掉后触发告警，并显示正常和异常的个数。
在上述实施例的基础上，作为一种优选实施方式，还包括：基于所述标志字符在ambari的监控组件中添加每个所述服务实例对应的监控指标，以便所述监控组件对每个所述服务实例的所有所述监控指标进行监控；基于所述标志字符在ambari的HBASE服务的监控指标配置文件中添加每个所述服务实例对应的监控模块，以便每个所述监控模块从所述监控组件中获取对应的服务实例的所有所述监控指标；基于所述标志字符在ambari的HBASE服务的窗口工具配置文件中添加每个所述服务实例对应的监控窗口，以便每个所述监控窗口显示对应的服务实例的所有所述监控指标。
在具体实施中，改造ambari的监控信息后台收集的流程，根据每个服务实例的标志字符将对应进程的监控指标名添加上不同的标记作为后缀形成新的指标名，区分不同进程的同一个监控内容，存储到ambari的监控组件后端存储中。在ambari的HBASE服务配置目录中的监控指标配置文件中，新添的不同后缀的HBASE_RegionServer模块，即监控模块，其下的监控指标名与上述的新指标名完全对应，使ambari能从监控组件后端存储取到不同后缀的RegionServer组件所在进程的监控指标内容。在ambari的HBASE服务配置目录中的窗口工具配置文件中，新添的不同后缀的监控窗口，在页面显示不同后缀的RegionServer组件的相应监控内容，如热点图HBASE Region数和监控读写次数，在其下子模块中，每个监控窗口所需运算的的监控指标名与所在添加后缀的上述指标名完全对应，使带有不同后缀名的监控窗口能够体现不同后缀名的RegionServer组件所在不同RegionServer进程的具体监控信息。和上述类似的，也能自定义窗口来显示不同后缀RegionServer组件的其它监控信息。
由此可见，本实施例可以展示新添加的带后缀的RegionServer的各种监控项，以及各种自定义组合监控。
下面介绍本申请提供的一种应用实施例，服务实例部署可以包括后台操作模块、页面操作模块、警告模块和监控模块，实现上述模块可以包括以下步骤：
步骤1：实现后台操作模块，改造HBASE自身的执行方式，使其能识别在原本的操作RegionServer实例时执行的命令中参数“RegionServer”上添加的后缀，启动不同的RegionServer的实例。
步骤2：实现页面操作模块，改造Ambari的HBASE服务RegionServer组件的页面操作对应的后台执行步骤，使其能执行新添加的带有不同后缀的RegionServer组件的操作，如开始，停止，重启，开启安全模式和自动重启，并在整体操作HBASE服务时遵循正确的顺序。
步骤3：实现告警模块，在某些节点上新添加的带后缀的RegionServer组件宕掉后也能如原有RegionServer一样触发告警。并显示正常和异常的个数。
步骤4：实现监控模块，能够和原有RegionServer组件一样展示新添加的带后缀的RegionServer的各种监控项，以及各种自定义组合监控。
下面对本申请实施例提供的一种服务实例部署装置进行介绍，下文描述的一种服务实例部署装置与上文描述的一种服务实例部署方法可以相互参照。
参见图3，根据一示例性实施例示出的一种服务实例部署装置的结构图，如图3所示，包括：
第一创建模块301，用于在目标物理节点中创建多个进程；其中，每个所述进程为一个RegionServer组件、用于执行一个服务实例；
分配模块302，用于为每个所述服务实例分配标志字符，并基于所述标志字符为每个所述服务实例分配对应的端口；其中，每个所述服务实例标志字符作为对应的进程的系统参数；
第二创建模块303，用于基于所述标志字符为每个所述服务实例创建对应的日志文件和pid文件。
本申请实施例提供的服务实例部署装置，实现了HBASE的RegionServer服务在同一物理节点上部署多个实例，能够在相同region数的情况下减轻单个RegionServer的压力，也可以在同样总内存占用的情况下降低朱丽叶暂停的发生，提高了HBASE集群的稳定性，能够更充分地利用集群的物理资源，在没有物理扩容的情况下部署更多的RegionServer实例，在某些场景下降低扩容成本。
在上述实施例的基础上，作为一种优选实施方式，所述分配模块302具体为为每个所述服务实例分配标志字符，基于所述标志字符在主函数参数位置添加每个所述服务实例对应的命令行，以便覆盖HBASE自身的端口配置，为每个所述服务实例分配对应的端口的模块。
在上述实施例的基础上，作为一种优选实施方式，还包括：
第一添加模块，用于在JAVA虚拟机的设置位置添加每个所述服务实例对应的命令行，以便将每个所述服务实例标志字符作为对应的进程的系统参数。
在上述实施例的基础上，作为一种优选实施方式，还包括：
第二添加模块，用于基于所述标志字符在ambari的HBASE服务的元信息配置文件中添加每个所述服务实例对应的RegionServer组件；
第三添加模块，用于基于所述标志字符在ambari的HBASE服务的角色操作顺序文件中添加每个所述服务实例对应的角色，并配置每个角色对应的操作的执行顺序；其中，所述服务实例对应的角色包括所述服务实例对应的RegionServer组件；
第三创建模块，用于基于所述标志字符为每个所述服务实例创建对应的操作执行脚本，以便按照所述操作执行顺序执行对应的操作执行脚本。
在上述实施例的基础上，作为一种优选实施方式，还包括：
第四添加模块，用于基于所述标志字符在ambari的监控组件中添加每个所述服务实例对应的监控指标，以便所述监控组件对每个所述服务实例的所有所述监控指标进行监控；
第五添加模块，用于基于所述标志字符在ambari的HBASE服务的监控指标配置文件中添加每个所述服务实例对应的监控模块，以便每个所述监控模块从所述监控组件中获取对应的服务实例的所有所述监控指标；
第六添加模块，用于基于所述标志字符在ambari的HBASE服务的窗口工具配置文件中添加每个所述服务实例对应的监控窗口，以便每个所述监控窗口显示对应的服务实例的所有所述监控指标。
在上述实施例的基础上，作为一种优选实施方式，还包括：
告警模块，用于基于所述标志字符在ambari的HBASE服务的警告配置文件中添加每个所述服务实例对应的告警模块，以便每个所述告警模块每隔第一预设时间检测所述服务实例对应的端口是否被使用，并对未被使用的端口对应的服务实例进行告警。
在上述实施例的基础上，作为一种优选实施方式，还包括：
统计模块，用于每个第二预设时间获取每个所述告警模块的告警内容，确定包含告警服务示例的告警节点，并统计所有所述告警节点的数量。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
本申请还提供了一种电子设备，参见图4，本申请实施例提供的一种电子设备400的结构图，如图4所示，可以包括处理器11和存储器12。该电子设备400还可以包括多媒体组件13，输入/输出(I/O)接口14，以及通信组件15中的一者或多者。
其中，处理器11用于控制该电子设备400的整体操作，以完成上述的服务实例部署方法中的全部或部分步骤。存储器12用于存储各种类型的数据以支持在该电子设备400的操作，这些数据例如可以包括用于在该电子设备400上操作的任何应用程序或方法的指令，以及应用程序相关的数据。该存储器12可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，例如静态随机存取存储器(Static Random Access Memory，简称SRAM)，电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory，简称EEPROM)，可擦除可编程只读存储器(Erasable Programmable Read-Only Memory，简称EPROM)，可编程只读存储器(Programmable Read-Only Memory，简称PROM)，只读存储器(Read-Only Memory，简称ROM)，磁存储器，快闪存储器，磁盘或光盘。多媒体组件13可以包括屏幕，例如可以是触摸屏。I/O接口14为处理器11和其他接口模块之间提供接口，上述其他接口模块可以是键盘，鼠标，按钮等。这些按钮可以是虚拟按钮或者实体按钮。通信组件15用于该电子设备400与其他设备之间进行有线或无线通信。无线通信，例如Wi-Fi，蓝牙，近场通信(Near Field Communication，简称NFC)，2G、3G或4G，或它们中的一种或几种的组合，因此相应的该通信组件15可以包括：Wi-Fi模块，蓝牙模块，NFC模块。
在一示例性实施例中，电子设备400可以被一个或多个应用专用集成电路(Application Specific Integrated Circuit，简称ASIC)、数字信号处理器(DigitalSignal Processor，简称DSP)、数字信号处理设备(Digital Signal Processing Device，简称DSPD)、可编程逻辑器件(Programmable Logic Device，简称PLD)、现场可编程门阵列(Field Programmable Gate Array，简称FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述的服务实例部署方法。
在另一示例性实施例中，还提供了一种包括程序指令的计算机可读存储介质，该程序指令被处理器执行时实现上述服务实例部署方法的步骤。例如，该计算机可读存储介质可以为上述包括程序指令的存储器12，上述程序指令可由电子设备400的处理器11执行以完成上述的服务实例部署方法。
说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以对本申请进行若干改进和修饰，这些改进和修饰也落入本申请权利要求的保护范围内。
还需要说明的是，在本说明书中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

Claims (9)

1.一种服务实例部署方法，其特征在于，包括：
在目标物理节点中创建多个进程；其中，每个所述进程为一个RegionServer组件、用于执行一个服务实例；
为每个所述服务实例分配标志字符，并基于所述标志字符为每个所述服务实例分配对应的端口；其中，每个所述服务实例标志字符作为对应的进程的系统参数；
基于所述标志字符为每个所述服务实例创建对应的日志文件和pid文件；
其中，还包括：
基于所述标志字符在ambari的HBASE服务的元信息配置文件中添加每个所述服务实例对应的RegionServer组件；
基于所述标志字符在ambari的HBASE服务的角色操作顺序文件中添加每个所述服务实例对应的角色，并配置每个角色对应的操作的执行顺序；其中，所述服务实例对应的角色包括所述服务实例对应的RegionServer组件；
基于所述标志字符为每个所述服务实例创建对应的操作执行脚本，以便按照所述操作执行顺序执行对应的操作执行脚本。
2.根据权利要求1所述服务实例部署方法，其特征在于，基于所述标志字符为每个所述服务实例分配对应的端口，包括：
基于所述标志字符在主函数参数位置添加每个所述服务实例对应的命令行，以便覆盖HBASE自身的端口配置，为每个所述服务实例分配对应的端口。
3.根据权利要求1所述服务实例部署方法，其特征在于，还包括：
在JAVA虚拟机的设置位置添加每个所述服务实例对应的命令行，以便将每个所述服务实例标志字符作为对应的进程的系统参数。
4.根据权利要求1所述服务实例部署方法，其特征在于，还包括：
基于所述标志字符在ambari的HBASE服务的警告配置文件中添加每个所述服务实例对应的告警模块，以便每个所述告警模块每隔第一预设时间检测所述服务实例对应的端口是否被使用，并对未被使用的端口对应的服务实例进行告警。
5.根据权利要求4所述服务实例部署方法，其特征在于，还包括：
每个第二预设时间获取每个所述告警模块的告警内容，确定包含告警服务示例的告警节点，并统计所有所述告警节点的数量。
6.根据权利要求1所述服务实例部署方法，其特征在于，还包括：
基于所述标志字符在ambari的监控组件中添加每个所述服务实例对应的监控指标，以便所述监控组件对每个所述服务实例的所有所述监控指标进行监控；
基于所述标志字符在ambari的HBASE服务的监控指标配置文件中添加每个所述服务实例对应的监控模块，以便每个所述监控模块从所述监控组件中获取对应的服务实例的所有所述监控指标；
基于所述标志字符在ambari的HBASE服务的窗口工具配置文件中添加每个所述服务实例对应的监控窗口，以便每个所述监控窗口显示对应的服务实例的所有所述监控指标。
7.一种服务实例部署装置，其特征在于，包括：
第一创建模块，用于在目标物理节点中创建多个进程；其中，每个所述进程为一个RegionServer组件、用于执行一个服务实例；
分配模块，用于为每个所述服务实例分配标志字符，并基于所述标志字符为每个所述服务实例分配对应的端口；其中，每个所述服务实例标志字符作为对应的进程的系统参数；
第二创建模块，用于基于所述标志字符为每个所述服务实例创建对应的日志文件和pid文件；
其中，还包括：
第二添加模块，用于基于所述标志字符在ambari的HBASE服务的元信息配置文件中添加每个所述服务实例对应的RegionServer组件；
第三添加模块，用于基于所述标志字符在ambari的HBASE服务的角色操作顺序文件中添加每个所述服务实例对应的角色，并配置每个角色对应的操作的执行顺序；其中，所述服务实例对应的角色包括所述服务实例对应的RegionServer组件；
第三创建模块，用于基于所述标志字符为每个所述服务实例创建对应的操作执行脚本，以便按照所述操作执行顺序执行对应的操作执行脚本。
8.一种电子设备，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1至6任一项所述服务实例部署方法的步骤。
9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至6任一项所述服务实例部署方法的步骤。
CN202010738665.8A 2020-07-28 2020-07-28 一种服务实例部署方法、装置及电子设备和存储介质 Active CN111880810B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202010738665.8A CN111880810B (zh) 2020-07-28 2020-07-28 一种服务实例部署方法、装置及电子设备和存储介质
PCT/CN2021/076872 WO2022021850A1 (zh) 2020-07-28 2021-02-19 一种服务实例部署方法、装置、电子设备和存储介质
US18/005,945 US20230289238A1 (en) 2020-07-28 2021-02-19 Service Instance Deployment Method and Apparatus, Electronic Device, and Storage Medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010738665.8A CN111880810B (zh) 2020-07-28 2020-07-28 一种服务实例部署方法、装置及电子设备和存储介质

Publications (2)

Publication Number Publication Date
CN111880810A CN111880810A (zh) 2020-11-03
CN111880810B true CN111880810B (zh) 2022-12-27

Family

ID=73200892

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010738665.8A Active CN111880810B (zh) 2020-07-28 2020-07-28 一种服务实例部署方法、装置及电子设备和存储介质

Country Status (3)

Country Link
US (1) US20230289238A1 (zh)
CN (1) CN111880810B (zh)
WO (1) WO2022021850A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023070426A1 (zh) * 2021-10-28 2023-05-04 华为技术有限公司 一种配置方法和装置
CN117280320A (zh) * 2022-04-20 2023-12-22 华为技术有限公司 一种映射关系生成方法、装置和存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109032674A (zh) * 2018-06-07 2018-12-18 烽火通信科技股份有限公司 一种多进程管理方法、系统及网络设备
CN110519100A (zh) * 2019-09-03 2019-11-29 浪潮云信息技术有限公司 一种多集群管理方法、终端及计算机可读存储介质

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9268808B2 (en) * 2012-12-31 2016-02-23 Facebook, Inc. Placement policy
CN103259688B (zh) * 2013-06-04 2017-03-08 北京搜狐新媒体信息技术有限公司 一种分布式存储系统的故障诊断方法与装置
US10642800B2 (en) * 2013-10-25 2020-05-05 Vmware, Inc. Multi-tenant distributed computing and database
US20160179494A1 (en) * 2014-12-18 2016-06-23 Vladimir Pavlov Integration of an arbitrary server installed as an extension of a computing platform
CN108563698B (zh) * 2018-03-22 2021-11-23 中国银联股份有限公司 一种HBase表的Region合并方法和装置
US10853368B2 (en) * 2018-04-02 2020-12-01 Cloudera, Inc. Distinct value estimation for query planning
CN108549717B (zh) * 2018-04-23 2021-06-29 泰华智慧产业集团股份有限公司 自动化部署运维Hadoop生态圈组件的方法及系统
US20200097847A1 (en) * 2018-09-21 2020-03-26 Gloudera, lnc. Hyperparameter tuning using visual analytics in a data science platform
CN109257440A (zh) * 2018-10-29 2019-01-22 南京南瑞信息通信科技有限公司 一种基于服务注册中心的服务发现和客户端负载均衡方法
US11301496B2 (en) * 2018-12-26 2022-04-12 Imperva, Inc. Using access logs for network entities type classification
CN110825660A (zh) * 2019-09-27 2020-02-21 苏州浪潮智能科技有限公司 一种基于HBase的朱丽叶暂停优化方法、系统及设备
US11698820B2 (en) * 2020-02-25 2023-07-11 Hewlett Packard Enterprise Development Lp Autoscaling nodes of a stateful application based on role-based autoscaling policies

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109032674A (zh) * 2018-06-07 2018-12-18 烽火通信科技股份有限公司 一种多进程管理方法、系统及网络设备
CN110519100A (zh) * 2019-09-03 2019-11-29 浪潮云信息技术有限公司 一种多集群管理方法、终端及计算机可读存储介质

Also Published As

Publication number Publication date
US20230289238A1 (en) 2023-09-14
WO2022021850A1 (zh) 2022-02-03
CN111880810A (zh) 2020-11-03

Similar Documents

Publication Publication Date Title
CN111314141B (zh) 路由更新方法及装置
US11513942B2 (en) Debug session management
CN107256178B (zh) 一种容器管理平台
WO2017140131A1 (zh) 数据写入、读取方法及装置、云存储系统
US9417870B2 (en) Managing user access to alternative versions of a particular function of a software product from within a current version of the software product
CN111880810B (zh) 一种服务实例部署方法、装置及电子设备和存储介质
KR101368550B1 (ko) 모듈 보호 기능을 가진 단말기 및 이를 이용한 모듈 관리 방법
CN110427258B (zh) 基于云平台的资源调度控制方法及装置
CN104486421B (zh) 一种无线业务系统云平台业务策略管理的实现方法
US20220210126A1 (en) Systems and methods for automated firewall provisioning for virtual machines
CN110941779A (zh) 加载页面的方法、装置、存储介质及电子设备
CN115357590A (zh) 针对数据变更的记录方法、装置、电子设备及存储介质
CN112100552A (zh) 页面渲染方法、装置、设备及计算机可读存储介质
US20170160842A1 (en) Method of generating display name of objects to be managed
WO2020001391A1 (zh) 菜单动态管理方法、服务器和系统
CN112527459B (zh) 一种基于Kubernetes集群的日志分析方法及装置
CN108809838B (zh) 一种基于树形结构的服务发现处理方法及装置
CN111736825B (zh) 一种信息展示方法、装置、设备和存储介质
CN110879701B (zh) 工作流可视化配置方法、服务器、系统及介质
CN107832403A (zh) 目录文件管理方法、装置、电子终端及可读存储介质
CN109766235A (zh) 基于软件监控的配置文件检测方法、系统、设备及介质
CN109543420B (zh) 基于sudo的权限配置方法、装置、电子设备及存储介质
CN113591000A (zh) 一种浏览器引擎的切换方法和装置及设备
CN109450874B (zh) 用户账号监控方法及装置
CN113362021A (zh) 组织管理方法及装置、电子设备、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant