FusionInsight LibrA V100R002C80SPC300安装指南

FusionInsight LibrA是企业级的大规模并行处理关系型数据库。FusionInsight LibrA采用MPP(Massive Parallel Processing)架构，支持行存储与列存储，提供PB(Petabyte，2的50次方字节)级别数据量的处理能力。
FusionInsight LibrA在核心技术上跟传统数据库相比有巨大优势，可以解决很多行业用户的数据处理性能问题，可以为超大规模数据管理提供高性价比的通用计算平台，并可用于支撑各类数据仓库系统、BI(Business Intelligence)系统和决策支持系统，统一为上层应用的决策分析等提供服务。
FusionInsight解决方案是华为企业级大数据存储、查询、分析的统一平台，能够帮助企业快速构建海量数据信息处理系统，通过对海量信息数据进行实时与非实时的分析挖掘，发现全新价值点和企业商机。
FusionInsight LibrA是FusionInsight解决方案的一个子产品。FusionInsight LibrA在FusionInsight解决方案中的位置如图所示：
FusionInsight LibrA V100R002C80SPC300安装指南
FusionInsight解决方案由2个子产品FusionInsight HD、FusionInsight LibrA和1个操作运维系统FusionInsight Manager构成。

  • FusionInsight HD：企业级的大数据处理环境，是一个分布式数据处理系统，对外提供大容量的数据存储、分析查询和实时流式数据处理分析能力。
  • FusionInsight LibrA：企业级的大规模并行处理关系型数据库。FusionInsight LibrA采用MPP(Massive Parallel Processing)架构，支持行存储和列存储，提供PB(Petabyte，2的50次方字节)级别数据量的处理能力。
  • FusionInsight Manager：企业级大数据的操作运维系统，提供高可靠、安全、容错、易用的集群管理能力，支持大规模集群的安装部署、监控、告警、用户管理、权限管理、审计、服务管理、健康检查、问题定位、升级和补丁等功能。

    一、安装前准备

    1.1 环境介绍

    本文使用的服务器都是基于VMware虚拟化平台，具体信息如下图所示:
    FusionInsight LibrA V100R002C80SPC300安装指南
    集群组网方案如下图所示：
    FusionInsight LibrA V100R002C80SPC300安装指南

    1.2 软件下载

    从华为官方网站下载HD软件安装包和配置工具(需要账号)，如下：

    [root@hwd01 opt]# la /u02/software/hw/
-rw-r--r-- 1 root root 898M Jul 30 15:07 FusionInsight_LibrA_V100R002C80SPC300_RHEL.tar.gz
-rw-r--r-- 1 root root 301K Sep 14 11:40 FusionInsight_SetupTool_V100R002C80SPC200.tar.gz

    二、安装过程

    2.1 安装包准备

    这里安装过程中使用了集群模式，所以需要将安装包上传至2个管理节点上。另外还需在一个管理节点上挂载操作系统的镜像至media目录，因为在配置规划工具中会用到。这里用的是nfs共享，如下：

    [root@hwd01 ~]# mkdir /u02;mount onas:/u02 /u02;mount /u02/CentOS-7-x86_64-DVD-1708.iso /media
[root@hwd02 ~]# mkdir /u02;mount onas:/u02 /u02

    2.2 解压软件包

    需要在集群的2个管理节点上进行解压操作。

    --hwd01
[root@hwd02 ~]# cd /opt/
[root@hwd02 opt]# tar -xzf /u02/software/hw/FusionInsight_SetupTool_V100R002C80SPC200.tar.gz 
[root@hwd02 opt]# tar -xzf /u02/software/hw/FusionInsight_LibrA_V100R002C80SPC300_RHEL.tar.gz 
--hwd02
[root@hwd02 ~]# cd /opt/
[root@hwd02 opt]# tar -xzf /u02/software/hw/FusionInsight_SetupTool_V100R002C80SPC200.tar.gz 
[root@hwd02 opt]# tar -xzf /u02/software/hw/FusionInsight_LibrA_V100R002C80SPC300_RHEL.tar.gz

    2.3 生成配置文件

    通过配置规划工具，生成配置文件。此工具就是一个execl文件，里面通过宏来进行一些配置，最后输出为文件。

  • 基础配置
    FusionInsight LibrA V100R002C80SPC300安装指南
    FusionInsight LibrA V100R002C80SPC300安装指南
  • 选择服务
    FusionInsight LibrA V100R002C80SPC300安装指南
  • IP规划与进程部署
    FusionInsight LibrA V100R002C80SPC300安装指南
  • 节点信息
    FusionInsight LibrA V100R002C80SPC300安装指南
  • 浮动IP
    FusionInsight LibrA V100R002C80SPC300安装指南
  • 磁盘配置
    FusionInsight LibrA V100R002C80SPC300安装指南
  • 集群参数设置
    FusionInsight LibrA V100R002C80SPC300安装指南
  • 实例参数设置
    FusionInsight LibrA V100R002C80SPC300安装指南
  • 生成配置文件
    FusionInsight LibrA V100R002C80SPC300安装指南
    生成的配置文件会存放在d:\software文件夹下，根据提示输入用户名以及密码并上传至指定的节点目录。

    2.4 预安装配置

    [root@hwd01 FusionInsight_SetupTool]# ./setuptool.sh preinstall

    FusionInsight LibrA V100R002C80SPC300安装指南

    2.5 安装集群服务

    现在主节点执行，完了后在备用节点执行，如下：

    --主节点hwd01
[root@hwd01 ~]# /opt/FusionInsight/software/install.sh -f /opt/FusionInsight/software/install_oms/192.168.120.122.ini

    FusionInsight LibrA V100R002C80SPC300安装指南

    --备用节点hwd02
[root@hwd02 ~]# /opt/FusionInsight/software/install.sh -f

    FusionInsight LibrA V100R002C80SPC300安装指南
    安装完成后，初次访问需要更改admin账户的初始密码，初始密码为：Admin@123。

    三、配置集群服务

    通过web界面访问，选择使用模板安装，导入生成的模板文件，会弹出输入主机的root密码，然后点击查找主机，验证通过后，会跳到“确认”步骤。
    FusionInsight LibrA V100R002C80SPC300安装指南
    FusionInsight LibrA V100R002C80SPC300安装指南
    FusionInsight LibrA V100R002C80SPC300安装指南
    FusionInsight LibrA V100R002C80SPC300安装指南
    配置完成后，点击“完成”。
    FusionInsight LibrA V100R002C80SPC300安装指南

  • 实时监控标签
    FusionInsight LibrA V100R002C80SPC300安装指南
  • 服务管理标签
    FusionInsight LibrA V100R002C80SPC300安装指南
  • 主机管理标签
    FusionInsight LibrA V100R002C80SPC300安装指南

    四、客户端安装与使用

    这里还是使用nfs服务批量部署，具体过程参考之前的FusionInsight HD 客户端安装与使用的批量部署客户端。

[root@onas FusionInsight_Services_ClientConfig]# ./install.sh /u02/huawei/client
[18-10-08 14:30:28]: Pre-install check begin...
[18-10-08 14:30:28]: Checking necessary files and directory.
[18-10-08 14:30:28]: Checking NTP service status.
[18-10-08 14:30:28]: Checking "/etc/hosts" config.
[18-10-08 14:30:28]: Pre-install check is complete.
[18-10-08 14:30:28]: Precheck on components begin...
[18-10-08 14:30:28]: Precheck on components is complete.
[18-10-08 14:30:28]: Deploy "dest_hosts" begin ...
[18-10-08 14:30:28]: Warning: "hwd02" already exists in "/etc/hosts", it will be overwritten.
[18-10-08 14:30:28]: Warning: "hwd01" already exists in "/etc/hosts", it will be overwritten.
[18-10-08 14:30:28]: Warning: "hwd05" already exists in "/etc/hosts", it will be overwritten.
[18-10-08 14:30:28]: Warning: "hwd04" already exists in "/etc/hosts", it will be overwritten.
[18-10-08 14:30:28]: Warning: "hwd03" already exists in "/etc/hosts", it will be overwritten.
[18-10-08 14:30:28]: Deploy "dest_hosts" is complete.
[18-10-08 14:30:28]: Install public library begin ...
[18-10-08 14:30:28]: Install components client begin ...
[18-10-08 14:30:28]: Install JDK begin ...
[18-10-08 14:30:28]: Decompress jdk.tar.gz to /u02/huawei/client/JDK.
/u02/tmp/FusionInsight_Services_ClientConfig/JDK
[18-10-08 14:30:34]: Create JRE env file "/u02/huawei/client/JDK/component_env".
[18-10-08 14:30:34]: JDK installation is complete.
[18-10-08 14:30:34]: Warning: /u02/tmp/FusionInsight_Services_ClientConfig/JDK/VERSION not exist.
[18-10-08 14:30:34]: Install KrbClient begin ...
[18-10-08 14:30:34]: Copy /u02/tmp/FusionInsight_Services_ClientConfig/KrbClient/FusionInsight-kerberos-1.15.2.tar.gz to /u02/huawei/client/KrbClient.
/u02/tmp/FusionInsight_Services_ClientConfig/KrbClient
[18-10-08 14:30:34]: Copy KRB config files to "/u02/huawei/client/KrbClient/kerberos/conf"
[18-10-08 14:30:34]: Copy security script files to "/u02/huawei/client/KrbClient/kerberos/bin"
[18-10-08 14:30:34]: Create KRB env file "/u02/huawei/client/KrbClient/component_env".
[18-10-08 14:30:34]: KrbClient installation is complete.
[18-10-08 14:30:34]: Install MPPDB begin ...
[18-10-08 14:30:34]: Decompress Gauss200-OLAP-V100R007C10-REDHAT-64bit-ClientTools.tar.gz to /u02/huawei/client/MPPDB.
[18-10-08 14:30:35]: Copy config files to "/u02/huawei/client/MPPDB/"
[18-10-08 14:30:35]: Begin to update the client ssl certificates.
[18-10-08 14:30:35]: Success to update the client ssl certificates.
[18-10-08 14:30:35]: Create MPP env file "/u02/huawei/client/MPPDB/component_env".
[18-10-08 14:30:35]: MPPDB installation is complete.
[18-10-08 14:30:35]: Components client installation is complete.
[root@onas ~]# source /u02/huawei/client/bigdata_env 
[root@onas ~]# kinit candon
Password for candon@HADOOP.COM: 
Password expired.  You must change it now.
Enter new password: 
Enter it again: 
[root@onas ~]# kinit candon
Password for candon@HADOOP.COM: 
[root@onas ~]# klist 
Ticket cache: FILE:/tmp/krb5cc_0
Default principal: candon@HADOOP.COMValid starting       Expires              Service principal
10/08/2018 14:53:16  10/09/2018 14:53:12  krbtgt/HADOOP.COM@HADOOP.COM

五、数据库使用

5.1 确认连接信息

以操作系统用户omm登录LibrA集群任意一套主机，执行source ${BIGDATA_HOME}/mppdb/.mppdbgs_profule命令启动环境变量。

[omm@hwd01 ~]$ source /opt/huawei/Bigdata/mppdb/.mppdbgs_profile

然后使用gs_om命令查询集群各实例情况，确认CN所在的服务器的IP地址及数据路径（端口号查询备用）。如下：

[omm@hwd01 ~]$ gs_om -t status --detail

FusionInsight LibrA V100R002C80SPC300安装指南
FusionInsight LibrA V100R002C80SPC300安装指南
默认的端口号是25308，也可以通过查看/srv/BigData/mppdb/data1/coordinator/postgresql.conf配置文件确认端口号。

5.2 配置远程连接

由于服务器默认只监听localhost,而进行远程连接的时候还需要监听管理平面的IP，所以需要配置listen_addresses，增加对外提供服务的网卡IP或者主机名（英文逗号分隔），其中NodeName为当前节点名称。这里直接将listen_addresses配置为，此配置下将监听所有网卡，但存在安全风险，不推荐使用，官方建议按照需要配置IP或者主机名，打开监听。

[omm@hwd01 ~]$ gs_guc set -N all -I all -Z coordinator -c "listen_addresses = '*'"Total instances: 5. Failed instances: 0.
Success to perform gs_guc!

参数说明:

  • -Z coordinator表示实例类型为coordinator。
  • -N all表示集群的所有主机。
  • -I all表示主机中的所有实例。
  • 星号(*)表示本地所有网卡的IP地址。
    最后，执行以下命令重启集群： 
    [omm@hwd01 ~]$ gs_om -t stop && gs_om -t start

    FusionInsight LibrA V100R002C80SPC300安装指南
    FusionInsight LibrA V100R002C80SPC300安装指南

    5.3 连接数据库

    [omm@hwd01 ~]$ gsql -d postgres -p 25308
gsql ((Gauss200 OLAP V100R007C10 build e542e841) compiled at 2018-07-29 09:09:48 commit 1880 last mr 2754 )
Non-SSL connection (SSL connection is recommended when requiring high-security)
Type "help" for help.
postgres=# \l

    FusionInsight LibrA V100R002C80SPC300安装指南

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/277123.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

云托管，边缘物理计算托管物理计算，你所需要了解的……

云托管，边缘物理计算托管物理计算，你所需要了解的……

随着业务发展，传统数据中心建设复杂性越来越高，基建的管理、设备的繁杂、人力成本的提升，是否让你的运维成本越来越高？企业生产效率却越来越低？ 业务快速发展，设备采购周期冗长，大量采购造成CAP…
阅读更多...
软件设计师09-面向对象-用例图

软件设计师09-面向对象-用例图

感谢任铄老师滴视频 用例图 1）描述一组用例、参与者及它们之间的关系 2）用例模型用于需求分析阶段 3）关系（依赖关系）：1）包含（include） 1）两个以上用例具有共同…
阅读更多...
手把手教你可复用的SSO组件设计（设计篇）

手把手教你可复用的SSO组件设计（设计篇）

周末陪女朋友去了，没写，告罪，上班后急忙补上。 这里说到了可复用得设计，所谓可复用就是指的，引入Dll，改改配置就能使用，而不是打开源代码东改改西改改再来调试调试最后OK。我们这里尽量提高抽象…
阅读更多...
Anaconda＋vscode＋pytorch环境搭建

Anaconda＋vscode＋pytorch环境搭建

1、安装Anaconda Anaconda指的是一个开源的Python发行版本，其包含了conda、Python等180多个科学包及其依赖项。在官网上下载https://www.anaconda.com/distribution/，因为服务器在国外会很慢，建议从清华镜像https://mirrors.tuna.tsinghua.ed…
阅读更多...
git learn

git learn

$ git config --global user.name "Your Name" $ git config --global user.email "emailexample.com"因为Git是分布式版本控制系统，所以，每个机器都必须自报家门：你的名字和Email地址。你也许会担心，如果有人…
阅读更多...
AngularJS的学习--$on、$emit和$broadcast的使用

AngularJS的学习--$on、$emit和$broadcast的使用

来源：http://www.cnblogs.com/CraryPrimitiveMan/p/3679552.html AngularJS中的作用域有一个非常有层次和嵌套分明的结构。其中它们都有一个主要的$rootScope(也就说对应的Angular应用或者ng-app)，然后其他所有的作用域部分都是继承自这个$rootScope的&a…
阅读更多...
17、【 商品管理模块开发】——后台商品图片的springmvc和富文本上传以及ftp文件服务器的开发...

17、【 商品管理模块开发】——后台商品图片的springmvc和富文本上传以及ftp文件服务器的开发...

1、FTP文件服务器的搭建： 软件下载：ftpserver； image.png浏览器访问：ftp://127.0.0.1/image.png点击任意一个文件，就可以看到我们图片啦，前提是前面指定的目录里面有图片文件~ image.png2、接口编写&#x…
阅读更多...
我们常说……

我们常说……

从过完元旦到现在，乖乖在公司办公的时间很少，好多时候都是在外地，或者是在路上、车上。有n多次，乖乖一天至少坐6个小时的车，回到家里都是带着一身的疲惫，虽然他并不表现出来，但是因为长时间坐车…
阅读更多...
那些油管上高质量的学习编程的频道 之一

那些油管上高质量的学习编程的频道 之一

国内确实有很多不错的学习编程的网站或者个人博客，但是对于初学者，往往更希望获得那种引导性的教学：即一步一步的教你跟着操作的教学。这种教学最好的方式当然就是视频了。毕竟在Apple Podcast上超火爆的斯坦福教授iOS开发的课程也是这种形式…
阅读更多...
SQL Server 2005 Express附加(Attach)的数据库为“只读”的解决方法

SQL Server 2005 Express附加(Attach)的数据库为“只读”的解决方法

我的操作系统为Windows 2003 Server , 文件系统NTFS, 在SQL Server 2005 Express 上附加(Attach)从另外一台电脑Copy过来的数据库后，数据库为“只读”。如下图： 解决办法： 打开 SQL Server Configuration Manager, 打开SQL Server SQLEXPRESS…
阅读更多...
[导入]blog年终小结

[导入]blog年终小结

1. 2006-11-30 注册了本域名thws.cn，喜欢的thw.com被注册了，只好退而就其次了；2. 12-20在alexa上登陆站点，综合排名从起初490多万上升到现在的590327,下期566,880；3. 2007-1-11适逢google PR更新，PR值从0变…
阅读更多...
Maven学习笔记(2) --mvn archetype:create 说明

Maven学习笔记(2) --mvn archetype:create 说明

前面一篇相对比较简单。 看完前面的内容我们会来到实战部分，也就是创建一个简单的项目 1 mvn archetype:create -DgroupIdorg.sonatype.mavenbook.ch03 \ 2 -DartifactIdsimple \ 3 -DpackageNameorg.sonatype.mavenbook 于是我们得到了步入Maven领域的第一份打击 真…
阅读更多...
单点登录（sso）入门

单点登录（sso）入门

单点登录的英文名叫做Single Sign On，简称SSO。 在以前，一般我们就单系统，所有的功能都在同一个系统上。 后来，我们为了合理利用资源和降低耦合性，于是把单系统拆分成多个子系统。 比如阿里系的淘宝和天猫，…
阅读更多...
Cocopods的升级错误解决

Cocopods的升级错误解决

2019独角兽企业重金招聘Python工程师标准>>> 写在前面： 这篇笔记的由来，是因为在这个周五下班后想起了之前 GitHub 上一个关于 iOS Charts 的 demo 仍处于未完待续的状态。便想着完成了它，遂打开了该工程，开始用 pod 更…
阅读更多...
XML 命名空间以及它们如何影响 XPath 和 XSLT (Extreme XML)

XML 命名空间以及它们如何影响 XPath 和 XSLT (Extreme XML)

Dare Obasanjo Microsoft Corporation 2002 年 5 月 20 日 本文是有望长期发表的系列文章的第一篇，这些文章专门阐释由 Microsoft 支持的 W3C XML 技术的更微妙的内容。尽管 XML 的核心仍相当简单，但是围绕它的技术已经变得日益复杂，而且其中…
阅读更多...
走马观花：Visual Studio Code Name Orcas Mar07CTP /体验DLINQ

走马观花：Visual Studio Code Name Orcas Mar07CTP /体验DLINQ

不知道什么叫“Orcas”？简单说应该就是下一版本的Visual Studio 吧。现在atlas，LINQ，WF之类东西，对于VS2005是单独安装的，Orcas应该是全内置吧。还有很多功能的增强，可以参考英文说明。闲话不说&#xff0c…
阅读更多...
[导入]C＃实现Des加密和解密

[导入]C＃实现Des加密和解密

文章来源:http://blog.csdn.net/21aspnet/archive/2007/03/24/1540018.aspx 转载于:https://www.cnblogs.com/zhaoxiaoyang2/archive/2007/03/25/816385.html
阅读更多...
帆软报表（finereport）图表钻取详细类别 当前页对话框展示

帆软报表（finereport）图表钻取详细类别 当前页对话框展示

添加参数栏，季度下拉框的控件命名为 jd 这里添加雷达图做案例 编辑→特效→ 添加JavaScript 参数：wd 值：分类名 #取雷达图所点击的点 参数：jd 值：公式$jd #取参数下拉所选参数 JavaScript详细: var if…
阅读更多...
大数据之MySql笔记-0916

大数据之MySql笔记-0916

2019独角兽企业重金招聘Python工程师标准>>> 复习: 1.MySQL部署 拓展题: rm -rf $MYSQL_HOME/arch/* binlog日志 恢复 主从同步 rm -rf $MYSQL_HOME/data/* 数据 $MYSQL_HOME/scripts/mysql_install_db \ --usermysqladmin \ --basedir/usr/local/mysql \ --dat…
阅读更多...
Sql Server设置用户只能查看并访问特定数据库

Sql Server设置用户只能查看并访问特定数据库

1.新建登录用户 以管理员身份登陆数据库（权限最高的身份如sa），点击安全性->登录名，右键新建登录名，输入登录名和密码，取消强制实施密码策略。 2.将服务器角色设置为public 注意：很重要的一…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023