MySQL项目迁移华为GaussDB PG模式指南

文章目录

  • 0. 前言
  • 1. 数据库模式选择（B/PG）
  • 2.驱动选择
    • 2.1. 使用postgresql驱动
    • 2.1. 使用opengaussjdbc驱动
  • 3. 其他考虑因素
  • 4. PG模式
    • 4.1 MySQL和OpenGauss不兼容的语法处理建议
    • 4.2 语法差异
  • 6. 高斯数据库 PG模式JDBC 使用示例验证
  • 6. 参考资料

本章节主要介绍MySQL项目迁移华为GaussDB PG模式指南
在这里插入图片描述

0. 前言

本文是关于如何将MySQL项目迁移到华为GaussDB PG模式的详细教程。

背景：在当今的国际形势严峻，很多卡脖子的技术搞得我们国内奋发图强，以华为为代表的国产数据库。在很多国企的系统中已经开始迁移。国产数据库的重要性不言而喻。

本文整理总计了一下从MySQL迁移到华为的GaussDB PG模式。这两种数据库在核心上有很大的不同，因此这个迁移过程可能会遇到一些困难。本文将详细介绍如何进行这种迁移，包括数据迁移，表结构迁移，以及索引、触发器、存储过程和函数的迁移等步骤。无论你是数据库管理员，还是只是想要了解这个过程的人，都可以从本文中获得有用的信息。

1. 数据库模式选择（B/PG）

GaussDB 是华为提供的一种数据库解决方案，它支持多种存储引擎和数据库模式。在 GaussDB 中，B 和 PG 分别是两种不同的数据库模式。

  • B 模式：这通常是基于 GaussDB 自己的原生存储引擎。这种模式可能提供更多的高级特性和优化，特别是针对大规模、高并发的环境。

  • PG 模式：这是基于 PostgreSQL 的模式。如果你的应用或系统已经在使用 PostgreSQL，或者你需要一个与 PostgreSQL 兼容的解决方案，那么这可能是更好的选择。

2.驱动选择

2.1. 使用postgresql驱动

如果使用PG模式，在3.x版本可以直接使用pgSQL的驱动我们项目亲测

org.postgresql postgresql 42.3.1

在代码中创建连接之前任意位置隐含装载：Class.forName(“org.postgresql.Driver”);
在JVM启动时参数传递：java -Djdbc.drivers=org.postgresql.Driver jdbctest
这些文件都是不同版本的OpenGauss JDBC驱动，用于Java应用程序连接到OpenGauss数据库。

2.1. 使用opengaussjdbc驱动

当使用opengaussjdbc.jar时，上面的Driver类名相应修改为“com.huawei.opengauss.jdbc.Driver”。

文件名称说明文件大小最后修改时间
gsjdbc200.jar针对某些版本的Java（如Java 2.0）的OpenGauss JDBC驱动909 kB2023/3/27 00:43:23
gsjdbc4.jar针对Java 4或更高版本的OpenGauss JDBC驱动896 kB2023/3/27 00:43:23
opengaussjdbc.jar通用的OpenGauss JDBC驱动909 kB2023/3/27 00:43:23

3. 其他考虑因素

  1. 兼容性：如果你需要与 PostgreSQL 兼容，那么 PG 模式可能是更好的选择。

  2. 性能需求：对于特定的高性能或大规模需求，B 模式可能提供更多的优化选项。

  3. 特性需求：某些高级功能可能只在特定的模式下可用。

  4. 团队经验：如果你的团队有更多的 PostgreSQL 经验，那么 PG 模式可能更适合；反之亦然。

  5. 迁移和集成：考虑到数据迁移和系统集成的复杂性和成本，选择一个与现有系统更兼容的模式。

  6. 成本：不同的模式可能有不同的成本结构，包括授权费用和运维成本。

项目迁移数据库类型可是一个大工程，在迁移之初一定要做好充分的调研。建议在确定模式之前，进行性能和兼容性测试，以确保你的选择能满足业务和技术需求。
在 GaussDB 的 PG 模式下，虽然它已经做出了很大的努力来实现对 PostgreSQL 的兼容，但仍然可能存在一些与 MySQL 不兼容的情况。如果你在迁移过程中遇到了这样的问题，以下是一些处理建议：

  1. 了解两种数据库的差异：首先，你需要理解 MySQL 和 OpenGauss（GaussDB 的 PG 模式）在 SQL 语法、数据类型、函数、存储过程等方面的差异。这将帮助你更好地理解迁移过程中可能出现的问题。

  2. 使用数据库迁移工具：对于大规模的数据库迁移，手动修改 SQL 语句可能并不现实。你可以考虑使用数据库迁移工具，如 AWS DMS（Database Migration Service）或 Azure Database Migration Service，这些工具可以自动处理一些常见的不兼容问题。

  3. 手动修改 SQL 语句：对于一些特定的不兼容问题，你可能需要手动修改你的 SQL 语句。例如，MySQL 使用 AUTO_INCREMENT 在表定义中创建自增字段，而 OpenGauss 使用 SERIAL 数据类型。对于这样的差异，你需要手动修改你的表定义。

  4. 修改应用代码：在某些情况下，你可能需要修改你的应用代码来适应新的数据库。例如，如果你的应用依赖于 MySQL 的特定功能（如全文搜索或地理空间查询），你可能需要重新实现这些功能以使用 OpenGauss 的等价功能。

4. PG模式

4.1 MySQL和OpenGauss不兼容的语法处理建议

以下是在GaussDB PG（OpenGauss）和MySQL之间的一些主要的SQL语法不兼容性。这个列表包含了一些主要的不同之处，但并不是全部的不兼容性。在进行迁移之前，建议深入对比和测试以确保兼容性。

MySQLOpenGauss备注
AUTO_INCREMENTSERIAL序列生成器
SHOW TABLES\dt查看所有表
SHOW DATABASES\l查看所有数据库
LIMIT n OFFSET mLIMIT n OFFSET m 或 FETCH FIRST n ROWS ONLY OFFSET m分页查询
DESCRIBE table or DESC table\d table描述表结构
CONCAT(str1, str2, ...)`str1
SUBSTRING(str, pos, len)SUBSTRING(str FROM pos FOR len)子字符串
LENGTH(str)LENGTH(str)或CHAR_LENGTH(str)字符串长度
CURDATE()CURRENT_DATE当前日期
NOW()CURRENT_TIMESTAMP当前时间
RAND()RANDOM()生成随机数
IFNULL(exp, replace_exp)COALESCE(exp, replace_exp)判断表达式是否为空
ISNULL(exp)exp IS NULL判断表达式是否为空
` 作为标识符引用符" 作为标识符引用符标识符引用符
存储过程使用 BEGIN 和 END存储过程使用 $$存储过程定义
TRUNCATE TABLE 不可在事务中TRUNCATE TABLE 可在事务中清空表数据
REPLACE INTOINSERT ... ON CONFLICT DO UPDATE插入冲突更新
REGEXP~正则表达式搜索
CREATE DATABASE 不支持所有者CREATE DATABASE 支持所有者创建数据库
ENUM 类型无对应，可用 CHECK 约束代替类型不一致
SET 类型无对应，可用 ARRAY 类型代替类型不一致
YEAR 类型无对应，可用 INTERVAL YEAR 或 DATE 类型代替类型不一致
UNSIGNED 类型无对应，需注意数值范围类型不一致
ZEROFILL 类型无对应，需在应用层处理类型不一致
SHOW CREATE TABLEpg_dump -t table -s查看表创建语句
ENGINE = InnoDB无对应存储引擎
CHARSET = utf8mb4ENCODING = UTF8字符集
COLLATE = utf8mb4_binCOLLATE "C"排序规则
分区表分区表分区定义语法不同
CREATE USERCREATE ROLE创建用户
REVOKE ALL PRIVILEGESREVOKE ALL撤销权限
GRANT SELECT ON *.*GRANT SELECT ON ALL TABLES IN SCHEMA授予权限
/*!50003 CREATE*/CREATE OR REPLACE创建或替换
LOCK TABLESLOCK TABLE锁表
UNLOCK TABLESCOMMIT解锁
KILL QUERYCANCEL取消查询
SHOW PROCESSLISTSELECT * FROM pg_stat_activity查看进程列表
LOAD DATA INFILECOPY数据导入
SELECT INTO OUTFILECOPY TO数据导出
RENAME COLUMNALTER COLUMN RENAME重命名列
RENAME INDEXALTER INDEX RENAME重命名索引
RENAME DATABASE无对应重命名数据库
ALTER DATABASE 不支持修改所有者ALTER DATABASE 支持修改所有者修改数据库所有者
ALTER DATABASE 支持修改字符集和排序规则ALTER DATABASE 不支持修改字符集和排序规则修改数据库字符集和排序规则
ALTER TABLE 支持一次修改多个列ALTER TABLE 一次只能修改一个列修改表列
ALTER TABLE 支持一次添加多个索引ALTER TABLE 一次只能添加一个索引添加表索引
ALTER TABLE 支持一次删除多个索引ALTER TABLE 一次只能删除一个索引删除表索引
ALTER TABLE 支持修改存储引擎ALTER TABLE 不支持修改存储引擎修改表存储引擎
ALTER TABLE 支持修改字符集和排序规则ALTER TABLE 不支持修改字符集和排序规则修改表字符集和排序规则
ALTER TABLE 支持修改自增值ALTER TABLE 不支持修改自增值修改表自增值

4.2 语法差异

序号描述MySQLGaussDB PG
1插入并在存在时更新REPLACE INTO 或 INSERT … ON DUPLICATE KEY UPDATE …INSERT … ON CONFLICT DO UPDATE …
2使用 LIMIT 进行分页查询SELECT … LIMIT offset, countSELECT … LIMIT count OFFSET offset
3单行插入返回插入的 IDINSERT INTO …; SELECT LAST_INSERT_ID();INSERT INTO … RETURNING id;
4单行更新返回更新的行UPDATE …; SELECT …;UPDATE … RETURNING *;
5单行删除返回删除的行DELETE …; SELECT …;DELETE … RETURNING *;
6随机获取一行记录SELECT … ORDER BY RAND() LIMIT 1SELECT … ORDER BY RANDOM() LIMIT 1
7索引字段查询优化SELECT * FROM table USE INDEX(index) WHERE column = valueSET enable_seqscan TO OFF; SELECT * FROM table WHERE column = value; SET enable_seqscan TO ON;
8使用全文索引搜索MATCH(column) AGAINST(‘text’)to_tsvector(column) @@ to_tsquery(‘text’)
9查询特定范围的行SELECT * FROM table LIMIT x, ySELECT * FROM table LIMIT y OFFSET x
10使用存储过程CALL procedure_name()SELECT * FROM procedure_name()
11事务处理START TRANSACTION; COMMIT; ROLLBACK;BEGIN; COMMIT; ROLLBACK;
12创建临时表CREATE TEMPORARY TABLE table_nameCREATE TEMP TABLE table_name
13MySQL使用反引号(``)引用表名和列名SELECT column FROM tableSELECT “column” FROM “table”
14时间和日期函数DATE(), NOW(), YEAR(), MONTH(), DAY(), HOUR(), MINUTE(), SECOND()CURRENT_DATE, CURRENT_TIME, DATE_PART(‘year’, column), DATE_PART(‘month’, column), DATE_PART(‘day’, column), DATE_PART(‘hour’, column), DATE_PART(‘minute’, column), DATE_PART(‘second’, column)
15字符串连接函数CONCAT(column1, column2)column1
16对分组的限制SELECT … FROM … GROUP BY … WITH ROLLUPSELECT … FROM … GROUP BY … ROLLUP(…)
17对NULL的处理SELECT IFNULL(column, 0) FROM tableSELECT COALESCE(column, 0) FROM table
18判断是否为空SELECT column IS NULL FROM tableSELECT column IS NULL FROM table
19日期加减操作SELECT DATE_ADD(date, INTERVAL 1 DAY) FROM tableSELECT date + INTERVAL ‘1 day’ FROM table
20创建自增主键CREATE TABLE table (id INT AUTO_INCREMENT, PRIMARY KEY (id))CREATE TABLE table (id SERIAL PRIMARY KEY)
21使用正则表达式匹配数据SELECT column REGEXP ‘pattern’ FROM tableSELECT column ~ ‘pattern’ FROM table
22计算平均值SELECT AVG(column) FROM tableSELECT AVG(column) FROM table
23计算最大值SELECT MAX(column) FROM tableSELECT MAX(column) FROM table
24计算最小值SELECT MIN(column) FROM tableSELECT MIN(column) FROM table
25计算总和SELECT SUM(column) FROM tableSELECT SUM(column) FROM table
26计算记录数SELECT COUNT(column) FROM tableSELECT COUNT(column) FROM table
27使用内置数学函数SELECT ABS(column), CEIL(column), FLOOR(column), ROUND(column) FROM tableSELECT ABS(column), CEILING(column), FLOOR(column), ROUND(column) FROM table
28使用内置字符串函数SELECT CHAR_LENGTH(column), LOWER(column), UPPER(column), REVERSE(column) FROM tableSELECT LENGTH(column), LOWER(column), UPPER(column), REVERSE(column) FROM table
29使用内置日期函数SELECT CURRENT_DATE(), CURRENT_TIME(), DATE_FORMAT(date, ‘format’) FROM tableSELECT CURRENT_DATE, CURRENT_TIME, TO_CHAR(date, ‘format’) FROM table
30使用内置转换函数SELECT CAST(column AS type) FROM tableSELECT CAST(column AS type) FROM table

在华为GaussDB PG模式迁移MySQL项目中，这个过程可能会涉及到数据、表结构、索引、触发器、存储过程和函数的迁移。以下是一些具体步骤：

准备工作：

  1. 确保MySQL和GaussDB PG版本所支持的功能是兼容的。
  2. 在GaussDB PG创建一个新的数据库来保存迁移过来的数据。
  3. 确保你的MySQL数据已经被备份。

步骤1: 数据迁移

  1. 使用mysqldump工具导出MySQL数据库的数据。例如：mysqldump -u [username] -p [password] [database_name] > [dump_file.sql]
  2. 使用pgloader工具将MySQL数据导入到GaussDB PG中。例如：pgloader mysql://[username]:[password]@localhost/[database_name] postgresql:///new_database

步骤2: 表结构迁移

  1. 使用MySQL 客户端等工具查看MySQL的表结构。
  2. 根据MySQL的表结构，在GaussDB PG中创建相应的表结构，也可以在找找其他工具是否可以批量同步生成。
  3. 请注意，MySQL和GaussDB PG中的数据类型可能是不一样的，所以在创建表结构时，需要做相应的类型转换。

步骤3: 索引、触发器、存储过程和函数的迁移

  1. 通过SHOW INDEX FROM [table_name]在MySQL中查看索引。
  2. 在GaussDB PG中创建相应的索引。
  3. 通过SHOW TRIGGERS在MySQL中查看触发器。
  4. 在GaussDB PG中创建相应的触发器。
  5. 使用SHOW PROCEDURE STATUS和SHOW FUNCTION STATUS在MySQL中查看存储过程和函数。
  6. 在GaussDB PG中创建相应的存储过程和函数。

注意：这些步骤可能需要一些SQL知识，并且在迁移过程中可能会遇到一些问题，比如数据类型不匹配、编码问题等，需要根据实际情况进行调整。

6. 高斯数据库 PG模式JDBC 使用示例验证

高斯数据库（GaussDB）。对于PG模式，可以使用PostgreSQL JDBC驱动来连接。

添加PostgreSQL JDBC驱动的Maven依赖：

<dependencies><!-- PostgreSQL JDBC driver --><dependency><groupId>org.postgresql</groupId><artifactId>postgresql</artifactId><version>42.3.1</version>  <!-- 这里的版本号根据实际情况更改 --></dependency>
</dependencies>

可以使用以下Java代码来连接到GaussDB并执行查询。如果是使用持久化框架，比如MyBatis 或者MP 或者JPA hbernate 等就不需要手动创建连接。只需要换一下配置中的jdbc连接串

import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.ResultSet;
import java.sql.Statement;public class Main {public static void main(String[] args) {try {// 加载驱动Class.forName("org.postgresql.Driver");// 连接数据库，注意URL的格式，包括服务器地址、端口、数据库名、SSL和其他参数String url = "jdbc:postgresql://your_server:your_port/your_database?ssl=true&"+ "sslfactory=org.postgresql.ssl.NonValidatingFactory";Connection conn = DriverManager.getConnection(url, "your_user", "your_password");// 创建一个Statement对象并执行SQL查询Statement stmt = conn.createStatement();ResultSet rs = stmt.executeQuery("SELECT * FROM your_table");// 处理查询结果while (rs.next()) {System.out.println(rs.getString("your_column"));}// 关闭连接rs.close();stmt.close();conn.close();} catch (Exception e) {e.printStackTrace();}}
}

6. 参考资料

  1. GaussDB官方文档：https://support.huaweicloud.com/intl/zh-cn/opengauss/index.html
  2. PostgreSQL JDBC驱动的官方文档：https://www.postgresql.org/

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/57458.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

conda 常用命令手册

conda 常用命令手册

参考conda-cheatsheet
阅读更多...
Spring Boot(Vue3+ElementPlus+Axios+MyBatisPlus+Spring Boot 前后端分离)【五】

Spring Boot(Vue3+ElementPlus+Axios+MyBatisPlus+Spring Boot 前后端分离)【五】

&#x1f600;前言 本篇博文是关于Spring Boot(Vue3ElementPlusAxiosMyBatisPlusSpring Boot 前后端分离)【五】&#xff0c;希望你能够喜欢 &#x1f3e0;个人主页&#xff1a;晨犀主页 &#x1f9d1;个人简介&#xff1a;大家好&#xff0c;我是晨犀&#xff0c;希望我的文章…
阅读更多...
Redis的数据结构与单线程架构

Redis的数据结构与单线程架构

"飞吧&#xff0c;去寻觅红色的流星" Redis中的五种数据结构和编码 Redis是一种通过键值对关系存储数据的软件&#xff0c;在前一篇中&#xff0c;我们可以使用type命令实际返回当前键所对应的数据结构类型&#xff0c;例如: String\list\hash\set等等。 但…
阅读更多...
开源项目-数据可视化分析平台

开源项目-数据可视化分析平台

哈喽，大家好，今天给大家带来一个开源项目-数据可视化分析平台。项目通过SpringBoot实现 数据可视化分析平台主要有数据源管理，项目管理，数据集管理，图表管理，看板管理等功能 登录 数据源管理 数据源管理功能可以添加MySQL，Oracle，PostgreSQL等类型的数据源信息 项目…
阅读更多...
ResNet详解：网络结构解读与PyTorch实现教程

ResNet详解：网络结构解读与PyTorch实现教程

目录 一、深度残差网络&#xff08;Deep Residual Networks&#xff09;简介深度学习与网络深度的挑战残差学习的提出为什么ResNet有效&#xff1f; 二、深度学习与梯度消失问题梯度消失问题定义为什么会出现梯度消失&#xff1f;激活函数初始化方法网络深度 如何解决梯度消失问…
阅读更多...
电脑共享文件夹-实现手机和其他电脑的文件同步更新

电脑共享文件夹-实现手机和其他电脑的文件同步更新

一、首先是电脑和手机需要处于同一个路由器下 二、创建一个文件夹&#xff0c;随便命名 三、点击属性-共享-Everyone-添加&#xff08;设置读取/写入&#xff09;-最后点击共享 四、这里要注意&#xff0c;如果电脑之前没设置过共享文件夹会有一个弹窗&#xff0c;点第一个就好…
阅读更多...
OpenAI推出ChatGPT企业版，提供更高安全和隐私保障

OpenAI推出ChatGPT企业版，提供更高安全和隐私保障

&#x1f989; AI新闻 &#x1f680; OpenAI推出ChatGPT企业版&#xff0c;提供更高安全和隐私保障 摘要&#xff1a;OpenAI发布了面向企业用户的ChatGPT企业版&#xff0c;用户可以无限制地访问强大的GPT-4模型&#xff0c;进行更深入的数据分析&#xff0c;并且拥有完全控制…
阅读更多...
AI助力智能安检，基于图像目标检测实现危险品X光智能安全检测系统

AI助力智能安检，基于图像目标检测实现危险品X光智能安全检测系统

基于AI相关的技术来对一些重复性的但是又比较重要的工作来做智能化助力是一个非常有潜力的场景&#xff0c;关于这方面的项目开发实践在我之前的文章中也有不少的实践&#xff0c;感兴趣的话可以自行移步阅读即可&#xff1a;《AI助力智能安检&#xff0c;基于目标检测模型实现…
阅读更多...
配置uniapp调试环境

配置uniapp调试环境

目录 uni-app介绍 uni-app开发工具HBuilderX 创建项目前提条件 uni-app项目结构 配置mumu模拟器 uni-app生命周期 1.应用生命周期 小程序规范 2.页面生命周期-小程序规范 3.组件生命周期 vue规范 uni-app登录按钮方法 uni-app发布安卓app uni-app介绍 uni-app 是一个…
阅读更多...
湖北咸宁农业三维扫描数字化农业3d打印制造应用-CASAIM中科广电

湖北咸宁农业三维扫描数字化农业3d打印制造应用-CASAIM中科广电

农业是人类衣食之源、生存之本&#xff0c;是一切生产的首要条件&#xff0c;CASAIM在农业三维扫描和3d打印应用上有丰富经验。 1.三维扫描技术在农业领域的应用 CASAIM三维扫描是集光学、机电和计算机技术于一体的高新无损检测技术&#xff0c;能够对实物的空间外形、结构乃…
阅读更多...
【算法与数据结构】513、LeetCode找树左下角的值

【算法与数据结构】513、LeetCode找树左下角的值

文章目录 一、题目二、解法三、完整代码 所有的LeetCode题解索引&#xff0c;可以看这篇文章——【算法和数据结构】LeetCode题解。 一、题目 二、解法 思路分析&#xff1a;这道题用层序遍历来做比较简单&#xff0c;最底层最左边节点就是层序遍历当中最底层元素容器的第一个值…
阅读更多...
Nacos基础（2）——nacos的服务器和命名空间 springBoot整合nacos 多个nacos配置的情况

Nacos基础（2）——nacos的服务器和命名空间 springBoot整合nacos 多个nacos配置的情况

目录 引出nacos服务器和命名空间Nacos服务器命名空间 springBoot整合nacosspringcloud Alibaba 版本与springcloud对应关系引包配置maincontroller 报错以及解决【报错】错误&#xff1a;缺少服务名称报错&#xff1a;9848端口未开放 启动测试引入多个nacos配置多个配置的情况没…
阅读更多...
【MCU】SD NAND芯片之国产新选择

【MCU】SD NAND芯片之国产新选择

文章目录 前言传统SD卡和可贴片SD卡传统SD卡可贴片SD卡 实际使用总结 前言 随着目前时代的快速发展&#xff0c;即使是使用MCU的项目上也经常有大数据存储的需求。可以看到经常有小伙伴这样提问&#xff1a; 大家好&#xff0c;请问有没有SD卡芯片&#xff0c;可以直接焊接到P…
阅读更多...
香港服务器怎么打开SSH

香港服务器怎么打开SSH

​　　SSH是一种远程登录协议&#xff0c;可以通过加密方式在网络上安全地传输数据。它允许用户在远程服务器上执行命令&#xff0c;管理文件和目录&#xff0c;并进行其他系统管理任务。 如何打开SSH服务? 1.确认已安装OpenSSH服务器&#xff1a; 你可以通过命令sudoapt-geti…
阅读更多...
Excel显示此值与此单元格定义的数据验证限制不匹配怎么办？

Excel显示此值与此单元格定义的数据验证限制不匹配怎么办？

总结&#xff1a;1、在编辑excel文档的时候&#xff0c;弹出此时预测单元格定义的数据验证&#xff0c;限制不匹配的提示。2、这是我们点击菜单来的数据菜单。3、然后点击数据工具栏的数据验证下拉按钮。4、在弹出的菜单中选择数据验证的菜单项。5、然后在打开的窗口中点击左下…
阅读更多...
Jmeter(二十七)：BeanShell PostProcessor跨线程全局变量使用

Jmeter(二十七)：BeanShell PostProcessor跨线程全局变量使用

在性能测试中&#xff0c;两个相关联的接口不一定都在同一个线程组&#xff0c;遇见这种情况时&#xff0c;我们要进行跨线程组传参&#xff0c;此处用登录和查询配送单两个请求举例&#xff1b; 1、登录请求中配置json提取器&#xff0c;将接口返回的token保存在变量中&#…
阅读更多...
Python爬虫异常处理实践：处理被封禁和网站升级问题

Python爬虫异常处理实践：处理被封禁和网站升级问题

在这篇文章中&#xff0c;我们将一起探讨Python爬虫异常处理实践&#xff0c;特别关注处理被封禁和网站升级问题。让我们一起来看看如何解决这些问题&#xff0c;提高我们爬虫程序的稳定性和可靠性。 　　首先&#xff0c;我们要了解为什么会遇到这些问题。网站封禁爬虫的原因主…
阅读更多...
从C语言到C++_34(C++11_下)可变参数+ lambda+function+bind+笔试题

从C语言到C++_34(C++11_下)可变参数+ lambda+function+bind+笔试题

目录 1. 可变参数模板 1.1 展开参数包 1.1.1 递归函数方式展开 1.1.2 逗号表达式展开 1.2 emplace相关接口 2. lambda表达式&#xff08;匿名函数&#xff09; 2.1 C11之前函数的缺陷 2.2 lambda表达式语法 2.3 函数对象与lambda表达式 3. 包装器 3.1 function包装器…
阅读更多...
不同子网络中的通信过程

不同子网络中的通信过程

从输入www.baidu.com经历了什么 一、DNS&#xff08;网址->IP&#xff09; 二、ARP&#xff08;IP->MAC&#xff09; A->B&#xff1a;有数据发送&#xff0c;数据封装ip之后发现没有主机B的mac地址。然后ARP在本网段广播&#xff1a;检查目标地址和源地址是否在同一…
阅读更多...
【程序猿书籍大放送：第二期】《强化学习：原理与Python实战》

【程序猿书籍大放送：第二期】《强化学习：原理与Python实战》

&#x1f339;欢迎来到爱书不爱输的程序猿的博客, 本博客致力于知识分享&#xff0c;与更多的人进行学习交流 爱书不爱输的程序猿&#xff1a;送书第二期 一、搞懂大模型的智能基因&#xff0c;RLHF系统设计关键问答1.RLHF是什么&#xff1f;2.RLHF适用于哪些任务&#xff1f;3…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023