mysql

flink写入mysql的两种方式

  • Post author:
  • Post category:mysql

方式一 通过JDBCOutputFormat 在flink中没有现成的用来写入MySQL的sink，但是flink提供了一个类，JDBCOutputFormat，通过这个类，如果你提供了jdbc的driver，则可以当做sink使用。 JDBCOutputFormat其实是flink的batch api，但也可以用来作为stream的api使用，社区也推荐通过这种方式来进行。 JDBCOutput…

继续阅读 flink写入mysql的两种方式

MySQL如何流式读取千万级大数据（数据分析）

  • Post author:
  • Post category:mysql

MySQL如何流式读取千万级大数据 我们先介绍下JDBCJDBC可以理解成一种规范JDBC的开发流程 在说流式读取之前，我们先思考下，平时我们在做在执行一个sql查询时，应用程序与数据库之间到底发生了什么?流式查询的流程代码实现普通的查询方法代码流式查询方法代码执行的测试结果与分析流式读取优势应用场景 随着系统的运作，业务数据的流入，我们系统中的信息也越来越多，在数据量达到百万甚至千万级以上时，我…

继续阅读 MySQL如何流式读取千万级大数据（数据分析）

MySQL主从不一致情形与解决方法

  • Post author:
  • Post category:mysql

一、MySQL主从不同步情况 1.1 网络的延迟1.2 主从两台机器的负载不一致1.3 max_allowed_packet设置不一致1.4 自增键不一致1.5 同步参数设置问题1.6 自身bug1.7 版本不一致1.8 主从不一致优化配置 二、解决主从不同步的方法 2.1 主从不同步场景描述2.2 解决方法一：忽略错误后，继续同步2.3 方式二：重新做主从，完全同步 三、如何监控mysql主从之…

继续阅读 MySQL主从不一致情形与解决方法

Mysql5.7 通用日志

  • Post author:
  • Post category:mysql

通用日志：是mysql中所有的操作日志，包括msyql的连接、sql、所有的操作，默认是不开启的。 开启的配置： 查看配置是否开启：  注意：当我们开启这个通用日志的时候，因为mysql会记录所有的操作，因此性能会比较低，推荐不使用。但是当我们的数据库需要查询msyql的每个操作的时候，开启还是有必要的。 版权声明：本文为u010648194原创文章，遵循 CC 4.0 BY-SA 版权协议，转载…

继续阅读 Mysql5.7 通用日志

MySQL中出现Duplicate entry ‘XXX’ for key ‘PRIMARY’解决方案

  • Post author:
  • Post category:mysql

首先我们用MySQL自带的可视化管理工具MySQL WorkBench打开数据库及表格，出现此问题的主要原因是主键已经有了名为“XXX”的那项，实际上我写的代码并没有重复也会弹出此报错，下面我们看一下我自己的解决方案。 双击红框中选项，填好相应配置， 进入后点击如图所示先创建数据库（此操作必须在MySQL已经启动情况下） 左下角SCHEMAS底下就是你的数据库名字，先双击拉出TABLE，在TABL…

继续阅读 MySQL中出现Duplicate entry ‘XXX’ for key ‘PRIMARY’解决方案

mysql数据库怎么导出导入表

  • Post author:
  • Post category:mysql

MySQL 数据库可以使用导入和导出命令来进行表的导入和导出，具体的命令如下：导出：mysqldump -u username -p databasename tablename > filename.sql 导入：mysql -u username -p databasename < filename.sql 版权声明：本文为weixin_42598278原创文章，遵循 CC 4.0…

继续阅读 mysql数据库怎么导出导入表

mysql分批备份脚本(导出某个数据库中所有表中的前1000条记录)

  • Post author:
  • Post category:mysql

备份 数据库名为test 每个表前1000行数据 mysqldump -h ip -u账号 -p密码 --databases test --where=“true limit 100”>/opt/backup1000.sql 实时查看文件大小 du -sh backup1000.sql 版权声明：本文为qq_29036169原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出…

继续阅读 mysql分批备份脚本(导出某个数据库中所有表中的前1000条记录)

mysql limit 运算符_9.mysql高级查询 select where 运算符 group having orderby limit

  • Post author:
  • Post category:mysql

一个查询语句的完整形式如下所示： 可见，select语句还是比较复杂的——其实是mysql中最复杂的语句。 1，以上中括号中的任一项都可以省略，但如果不省略，就应该按该顺序出现。 2，通常，from后的子句都需要有from子句， having子句需要有group by子句。 3，这些子句的“执行顺序”，也是按此顺序进行的。 9.2.查询结果数据及select选项 9.2.1.查询“固定数据” 9.…

继续阅读 mysql limit 运算符_9.mysql高级查询 select where 运算符 group having orderby limit

深入理解MySQL（1）：架构与存储引擎简介

  • Post author:
  • Post category:mysql

MySQL 一、MySQL架构 连接层：最上层是一些客户端和连接服务。主要完成一些类似于连接处理、授权认证、及相关的安全方案。在该层上引入了线程池的概念，为通过认证安全接入的客户端提供线程。同样在该层上可以实现基于SSL的安全链接。服务器也会为安全接入的每个客户端验证它所具有的操作权限。 服务层：第二层服务层，主要完成大部分的核心服务功能， 包括查询解析、分析、优化、缓存、以及所有的内置函数，所有…

继续阅读 深入理解MySQL（1）：架构与存储引擎简介