发帖
翼度科技»论坛 › 编程开发 › mysql › 查看内容

在CentOS环境下编译GreatSQL RPM包

席军博

4

主题

4

帖子

12

积分

新手上路

Rank: 1

积分
12
显示全部楼层
本文介绍如何在CentOS环境下编译GreatSQL RPM包。
运行环境是docker中的CentOS 8 x86_64：
  1. $ docker -v
  2. Docker version 20.10.10, build b485636
  4. $ docker run -itd --hostname c8 --name c8 centos bash
  5. a0a2128591335ef41e6faf46b7e79953c097500e9f033733c3ab37f915b69439
  7. $ docker exec -it c8 bash
复制代码
1、准备工作

1.1、配置yum源

开始编译之前，需要先配置好yum源，方便安装一些辅助工具。
在这里采用阿里云的yum源：
  1. [root@c8 /]# rm -f /etc/yum.repos.d/* && \
  2. curl -o /etc/yum.repos.d/CentOS-Base.repo https://mirrors.aliyun.com/repo/Centos-vault-8.5.2111.repo && \
  3. sed -i -e '/mirrors.cloud.aliyuncs.com/d' -e '/mirrors.aliyuncs.com/d' /etc/yum.repos.d/CentOS-Base.repo && \
  4. yum clean all && yum makecache
复制代码
1.2、安装编译所需要的软件包

安装 rmp-build 包，它会附带安装其他必要的相关依赖包：
  1. [root@c8 /]# dnf install -y rpm-build
复制代码
1.3 创建构建RPM包所需的目录

创建相应的目录
  1. [root@c8 /]# mkdir -p /root/rpmbuild/SOURCES
复制代码
1.4 下载GreatSQL源码包

戳此链接 https://gitee.com/GreatSQL/GreatSQL/releases/tag/GreatSQL-8.0.32-25，找到 greatsql-8.0.32-25.tar.xz 下载GreatSQL源码包，放在上面创建的 /root/rpmbuild/SOURCES 目录下，并解压缩。
1.5 下载greatsql.spec文件

戳此链接 https://gitee.com/GreatSQL/GreatSQL-Doc/blob/master/build-gs/greatsql.spec，下载 greatsql.spec 文件，放在上面创建的 /root/rpmbuild/ 目录下。
1.6 下载boost源码包

编译GreatSQL 8.0.32-25版本需要配套的boost版本是1.77，戳此链接下载 https://boostorg.jfrog.io/artifactory/main/release/1.77.0/source/boost_1_77_0.tar.gz，放在上面创建的 /root/rpmbuild/SOURCES 目录下。
1.7 下载rpcsvc-proto包并编译安装

编译GreatSQL需要配套rpcsvc-proto包，戳此链接下载 https://github.com/thkukuk/rpcsvc-proto/releases/download/v1.4/rpcsvc-proto-1.4.tar.gz，放在 /tmp/ 目录下。
2、开始准备编译GreatSQL RPM包

从GreatSQL源码包中拷贝几个必要的文件
  1. [root@c8 /]# cd /root/rpmbuild/SOURCES/greatsql-8.0.32-25/build-gs/rpm
  2. [root@c8 rpm]# cp filter-*sh mysqld.cnf mysql-5.7-sharedlib-rename.patch mysql.init mysql_config.sh /root/rpmbuild/SOURCES/
复制代码
修改 greatsql.spec 文件中的部分内容：
  1. [root@c8 rpm]# vim /root/rpmbuild/greatsql.spec
  2. ...
  3. %global greatsql_version 25
  4. %global revision db07cc5cb73
  5. ...
  6. SOURCE0:        greatsql-8.0.32-25.tar.xz
  7. ...
  8. SOURCE10:       boost_1_77_0.tar.gz
  9. ...
  10. %changelog
  11. * Fri Dec 29 2023 GreatSQL <greatsql@greatdb.com> - 8.0.32-25.1
  12. - Release GreatSQL-8.0.32-25.1
  14. * Wed Jun  7 2023 GreatSQL <greatsql@greatdb.com> - 8.0.32-24.1
  15. - Release GreatSQL-8.0.32-24.1
  16. ...
复制代码
开始尝试编译RPM包
  1. [root@c8 rpm]#  cd /root/rpmbuild
  2. [root@c8 rpmbuild]# rpmbuild --nodebuginfo --define "_smp_mflags -j14" --define 'dist .el8' --define "_topdir /root/rpmbuild/" -bb ./greatsql.spec
复制代码
在使用 rpmbuild 编译RPM包时，通常会选择加上 -ba 或 -bb 参数，下面是关于这两个参数的注释：
  1. -ba    Build binary and source packages (after doing the %prep, %build, and %install stages).
  3. -bb    Build a binary package (after doing the %prep, %build, and %install stages).
复制代码
简单说，-ba 会编译出RPM包和SRPM包，而 -bb 只会编译出RPM包。
第一次运行时，大概率会提示N多依赖包缺失，先耐心地逐个安装上：
  1. [root@c8 rpmbuild]# rpmbuild --nodebuginfo --define "_smp_mflags -j14" --define 'dist .el8' --define "_topdir /root/rpmbuild/" -bb ./greatsql.spec
  2. ...
  3. warning: Macro expanded in comment on line 787: %{_mandir}/man1/mysql.server.1*
  5. warning: Macro expanded in comment on line 956: %{_datadir}/mysql-*/audit_log_filter_linux_install.sql
  6. ...
  7. warning: bogus date in %changelog: Wed Jun  6 2022 GreatSQL <greatsql@greatdb.com> - 8.0.25-16.1
  8. error: Failed build dependencies:
  9.         bison is needed by greatsql-8.0.32-25.1.el8.x86_64
  10.         cmake >= 2.8.2 is needed by greatsql-8.0.32-25.1.el8.x86_64
  11.         cmake >= 3.6.1 is needed by greatsql-8.0.32-25.1.el8.x86_64
  12. ...
  13.         zlib-devel is needed by greatsql-8.0.32-25.1.el8.x86_64
  14.         
复制代码
这里贴一下我用上述干净docker环境中安装的一些依赖包：
  1. [root@c8 rpmbuild]# dnf install -y  bison cmake cyrus-sasl-devel gcc-c++ gcc-toolset-11 gcc-toolset-11-annobin-plugin-gcc yum krb5-devel 1libaio-devel libcurl-devel libtirpc-devel m4 make ncurses-devel numactl-devel openldap-devel openssl openssl-devel pam-devel perl perl-Carp perl-Data-Dumper perl-Errno perl-Exporter perl-File-Temp perl-Getopt-Long perl-JSON perl-Memoize perl-Time-HiRes readline-devel time zlib-devel
复制代码
由于安装了 gcc-toolset-11 包，需要执行下面的命令才能切换到 gcc11 版本环境中，并确认gcc、cmake的版本是否符合要求：
  1. [root@c8 rpmbuild]# source /opt/rh/gcc-toolset-11/enable
  2. [root@c8 rpmbuild]# gcc --version
  3. gcc (GCC) 11.2.1 20210728 (Red Hat 11.2.1-1)
  4. Copyright (C) 2021 Free Software Foundation, Inc.
  5. This is free software; see the source for copying conditions.  There is NO
  6. warranty; not even for MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.
  8. [root@c8 rpmbuild]# cmake --version
  9. cmake version 3.20.2
  11. CMake suite maintained and supported by Kitware (kitware.com/cmake).
复制代码
还需要编译安装rpcsvc-proto依赖包
  1. [root@c8 rpmbuild]# cd /tmp/
  2. [root@c8 tmp]# tar xf rpcsvc-proto-1.4.tar.gz
  3. [root@c8 tmp]# cd rpcsvc-proto-1.4
  4. [root@c8 rpcsvc-proto-1.4]# ./configure && make && make install
  5. ...
  6. make[2]: Leaving directory '/tmp/rpcsvc-proto-1.4'
  7. make[1]: Leaving directory '/tmp/rpcsvc-proto-1.4'
复制代码
安装完这些依赖包后，再次开始尝试编译RPM包。
  1. [root@c8 rpcsvc-proto-1.4]# cd /root/rpmbuild/
  2. # 将编译过程输出到日志文件中，更方便观察的排查错误
  3. [root@c8 rpmbuild]# rpmbuild --nodebuginfo --define "_smp_mflags -j14" --define 'dist .el8' --define "_topdir /root/rpmbuild/" -bb ./greatsql.spec > ./rpmbuild.log 2>&1
  4. warning: Macro expanded in comment on line 787: %{_mandir}/man1/mysql.server.1*
  6. warning: Macro expanded in comment on line 956: %{_datadir}/mysql-*/audit_log_filter_linux_install.sql
  7. ...
  8. warning: bogus date in %changelog: Wed Jun  6 2022 GreatSQL <greatsql@greatdb.com> - 8.0.25-16.1
  9. Executing(%prep): /bin/sh -e /var/tmp/rpm-tmp.jOIUMM
  10. + umask 022
  11. + cd /root/rpmbuild//BUILD
  12. + cd /root/rpmbuild/BUILD
  13. + rm -rf greatsql-8.0.32-25
  14. ...
复制代码
如果编译失败了，会有类似这样的结果：
  1.     bogus date in %changelog: Wed Jun  6 2022 GreatSQL <greatsql@greatdb.com> - 8.0.25-16.1
  2.     Bad exit status from /var/tmp/rpm-tmp.k8RLOL (%build)
复制代码
只需打开 /root/rpmbuild/rpmbuild.log 文件，搜索 error/fail 等关键字（不区分大小写）应该就能分析出错误原因了。
解决完错误原因，再一次重试编译，这次应该顺利了，耐心等着吧。在这过程中，我们还可以通过观察 /root/rpmbuild/rpmbuild.log 文件了解编译的进度情况，例如下面这样，可见进度大约到了91%，胜利在望 ~
  1. ...
  2. [ 91%] Building CXX object sql/CMakeFiles/binlog.dir/changestreams/misc/column_filters/column_filter_outbound_func_indexes.cc.o
  3. ...
复制代码
编译GreatSQL RPM包的过程中要做两遍，一次编译出release包，一次编译出debug包，所以会有一点点费时，正好泡杯好茶安心喝着就是了。
最后，查看编译结果，会有类似下面的日志：
  1. [root@c8 rpmbuild]# tail rpmbuild.log
  2. Wrote: /root/rpmbuild/RPMS/x86_64/greatsql-client-debuginfo-8.0.32-25.1.el8.x86_64.rpm
  3. Wrote: /root/rpmbuild/RPMS/x86_64/greatsql-test-debuginfo-8.0.32-25.1.el8.x86_64.rpm
  4. Wrote: /root/rpmbuild/RPMS/x86_64/greatsql-shared-debuginfo-8.0.32-25.1.el8.x86_64.rpm
  5. Wrote: /root/rpmbuild/RPMS/x86_64/greatsql-mysql-router-debuginfo-8.0.32-25.1.el8.x86_64.rpm
  6. Executing(%clean): /bin/sh -e /var/tmp/rpm-tmp.Z174QT
  7. + umask 022
  8. + cd /root/rpmbuild//BUILD
  9. + cd greatsql-8.0.32-25
  10. + /usr/bin/rm -rf /root/rpmbuild/BUILDROOT/greatsql-8.0.32-25.1.el8.x86_64
  11. + exit 0
复制代码
再看下编译生成的RPM文件包：
  1. [root@c8 rpmbuild]# du -sch *
  2. 45G     BUILD        #编译工作目录，产生大量编译文件，所以特别大，可以清空
  3. 0       BUILDROOT
  4. 976M    RPMS        #编译产生的RPM包
  5. 1.8G    SOURCES
  6. 0       SPECS
  7. 0       SRPMS
  8. 37M     rpmbuild.log
  9. 64K     greatsql.spec
  10. 47G     total
  12. [root@c8 rpmbuild]# cd /root/rpmbuild/RPMS/x86_64
  13. [root@c8 x86_64]# ls -la
  14. total 998740
  15. drwxr-xr-x 2 root root      4096 Dec 29 10:27 .
  16. drwxr-xr-x 3 root root        20 Dec 29 10:21 ..
  17. -rw-r--r-- 1 root root  19061972 Dec 29 10:22 greatsql-client-8.0.32-25.1.el8.x86_64.rpm
  18. -rw-r--r-- 1 root root  36091240 Dec 29 10:27 greatsql-client-debuginfo-8.0.32-25.1.el8.x86_64.rpm
  19. -rw-r--r-- 1 root root   4591912 Dec 29 10:25 greatsql-debuginfo-8.0.32-25.1.el8.x86_64.rpm
  20. -rw-r--r-- 1 root root  26174384 Dec 29 10:25 greatsql-debugsource-8.0.32-25.1.el8.x86_64.rpm
  21. -rw-r--r-- 1 root root   2241908 Dec 29 10:24 greatsql-devel-8.0.32-25.1.el8.x86_64.rpm
  22. -rw-r--r-- 1 root root   2145368 Dec 29 10:24 greatsql-icu-data-files-8.0.32-25.1.el8.x86_64.rpm
  23. -rw-r--r-- 1 root root      8100 Dec 29 10:24 greatsql-mysql-config-8.0.32-25.1.el8.x86_64.rpm
  24. -rw-r--r-- 1 root root   5259796 Dec 29 10:24 greatsql-mysql-router-8.0.32-25.1.el8.x86_64.rpm
  25. -rw-r--r-- 1 root root  37427440 Dec 29 10:28 greatsql-mysql-router-debuginfo-8.0.32-25.1.el8.x86_64.rpm
  26. -rw-r--r-- 1 root root  78317640 Dec 29 10:22 greatsql-server-8.0.32-25.1.el8.x86_64.rpm
  27. -rw-r--r-- 1 root root 379119548 Dec 29 10:27 greatsql-server-debuginfo-8.0.32-25.1.el8.x86_64.rpm
  28. -rw-r--r-- 1 root root   1502984 Dec 29 10:24 greatsql-shared-8.0.32-25.1.el8.x86_64.rpm
  29. -rw-r--r-- 1 root root   2805716 Dec 29 10:27 greatsql-shared-debuginfo-8.0.32-25.1.el8.x86_64.rpm
  30. -rw-r--r-- 1 root root 409911420 Dec 29 10:24 greatsql-test-8.0.32-25.1.el8.x86_64.rpm
  31. -rw-r--r-- 1 root root  18017572 Dec 29 10:27 greatsql-test-debuginfo-8.0.32-25.1.el8.x86_64.rpm
复制代码
大功告成。
3、安装GreatSQL

将编译产生的RPM包文件拷贝到另外一个全新的docker CentOS 8环境下，测试安装是否顺利。下面略过拷贝文件以及新docker镜像环境初始化过程，直接开始安装：
  1. [root@cc8 cc8]# rpm -ivh *rpm
  2. Verifying...                          ################################# [100%]
  3. Preparing...                          ################################# [100%]
  4. Updating / installing...
  5.    1:greatsql-shared-8.0.32-25.1.el8  ################################# [ 13%]
  6.    2:greatsql-client-8.0.32-25.1.el8  ################################# [ 25%]
  7.    3:greatsql-icu-data-files-8.0.32-25################################# [ 38%]
  8.    4:greatsql-server-8.0.32-25.1.el8  ################################# [ 50%]
  9.    5:greatsql-test-8.0.32-25.1.el8    ################################# [ 63%]
  10.    6:greatsql-mysql-router-8.0.32-25.1################################# [ 75%]
  11.    7:greatsql-mysql-config-8.0.32-25.1################################# [ 88%]
  12.    8:greatsql-devel-8.0.32-25.1.el8   ################################# [100%]
复制代码
看起来一切都很顺利，成功搞定。
延伸阅读

全文完。

Enjoy GreatSQL
来源:https://www.cnblogs.com/greatsql/p/17956333
免责声明：由于采集信息均来自互联网，如果侵犯了您的权益，请联系我们【E-Mail:cb@itdo.tech】 我们会及时删除侵权内容，谢谢合作！

上一篇: MySQL运维实战（2）MySQL用户和权限管理

下一篇: MySQL运维实战（2）MySQL用户和权限管理

发表于 2024-1-10 21:22:58 来自手机

举报 回复 使用道具

返回列表 发新帖

Archiver|手机版|小黑屋|翼度科技

Copyright © 2001-2020, Tencent Cloud.　Powered by Discuz! X3.4