记录一次自己进行大表导入的操作。
需要导入 mysql 20G 的文本文件
直接总结经验如下:
- 直接创建表,不设置主键和索引
- 关闭autocommit自动提交
- 关闭Binlog
//关闭日志
//关闭autocommit自动提交模式 0是关闭 1 是开启(默认)
set sql_log_bi[......]
记录一次自己进行大表导入的操作。
需要导入 mysql 20G 的文本文件
直接总结经验如下:
//关闭日志
//关闭autocommit自动提交模式 0是关闭 1 是开启(默认)
set sql_log_bi[......]
https://www.cnblogs.com/xiaolincoding/p/12995358.html
在 Linux 系统下,TCP存在半连接和全连接的转换的方式,
正如我们所熟知的,tcp连接在通信之前会有两次的 SYN,TCP 在这个状态服务端收到了 SYN 就是我们的半连接状态。
获取当[……]
这里pick一个软件就是 getabstract 这个,简单来说就是一个做书籍浓缩的站点。起源瑞士 20 年传统
虽然对于“知识浓缩”这一点的优劣大家众说纷纭。但是我觉得这类东西来,作为自己的认知拓展很不错。作为一个更正经,更有用的纯粹的知乎。
因为我觉得读一本书,可能最终有用的就是几句话,或者作者[……]
一个存档贴来记录LEDE的ipv6 配置,没有公网IP是难受,但是有了v6 的环境的话,很多东西都成了可能。
具体过程参考下文
https://blog.csdn.net/weixin_43593122/article/details/95660085
首先这里需要在
https://dynv6.c[……]
在腾讯云上的主机来配置双网卡的时候,网卡挂载之后总是只能有一个网卡上对应的服务端口可以被访问。
初步上看没什么问题,各自访问自己的网卡,之后转发到对应的网卡就好了。
但是继续思考,后面的回包的话需要对正确的网卡来进行数据的返回,所以这里需给回包正确的路由
首先需要建立路由表,在文件中添加新的路由表。[……]
在web系统中,数据库很容易成为系统的短板,而为了满足高并发的需求,就需要存在一个缓存层,分摊数据库的压力,提高并发能力。
同样的道理,缓存在大多数分层设计中都是不可或缺的,比如:
内存作为数据落地到硬盘的缓存
CPU高速缓存作为内存的缓存
PHP[……]
群晖自带的mariadb的性能,非常的差查询万行级别的表就需要大概 3 秒的时间。所以相关的参数是需要进行优化的,这里为了存档就,直接贴一份现在的配置。来作为备份。
[mysqld]
bind-address = 0.0.0.0
socket = /run/mysqld/mysqld10.sock[......]
做一个项目需要实现mysql的数据导入到 es 中去,参考来诸多方案,之前是想着使用,ingest node 来进行 pipeline 的数据处理。但是ingest 不支持 jdbc。无法实现。考虑到数据不需要进行强同步,且数据单向的流动。
所以综上使用 Logstash 这种经典方案来进行数据的导[……]