写入速度
硬盘的速度,网卡的速度,写入行的数据量,数据在硬盘中的存放位置等等因素。
简单的数据,插入速度肯定快,复杂的插入肯定慢。
所以单纯这个问题不好回答,最好的办法是进行压力测试,最后求一个平均值。
一 测试环境:
MySQL表结构
- CREATE TABLE `user_10w` (
- `id` int(10) NOT NULL AUTO_INCREMENT,
- `name` varchar(20) DEFAULT NULL,
- `mobile` varchar(11) DEFAULT NULL,
- `add_time` int(11) DEFAULT NULL,
- `groupid` tinyint(1) DEFAULT NULL,
- `login_time` int(11) DEFAULT NULL,
- PRIMARY KEY (`id`)
- ) ENGINE=MyISAM AUTO_INCREMENT=4730016 DEFAULT CHARSET=utf8mb4
电脑配置
4核 Intel(R) Core(TM) i3-8100 CPU @ 3.60GHz
ssd 120G硬盘
二. 开始测试
说明:单机测试,不涉及网卡,网络传输的影响
测试程序php pdo
- include_once("tool.php");
- $dsn = 'mysql:dbname=demo;host=127.0.0.1';
- $user = 'root';
- $pass = 'root';
- try{
- $hand = new PDO($dsn, $user, $pass);
- }catch(PDOException $e){
- echo 'Connection failed: ' . $e->getMessage();
- }
- $query = $hand->prepare("insert into user_10w(name,mobile,add_time,groupid,last_login_time) values(?,?,?,?,?)");
- $n=0;
- $count = 1000000; //每次插入100w
- $t = time();
- echo 'start write,time is '. $t. "\n";
- while(true){
- $n++;
- $name = Tool::getRandomStr(5);
- $mobile = Tool::getRandNum(9);
- $group = Tool::getRandNum(1);
- $rs = $query->execute([$name,'13'.$mobile,time(),$group,time()]);
- if($n>$count)break;
- }
- echo 'write end, time is '. (time()-$t) . "\n";
1.无任何索引,单进程
- start write,time is 1593338798
- write end, time is 50
耗时50s, 平均2w/秒
2. 给name添加普通索引
- write end, time is 60
- root@test:/data/php# php7 pdo.php
- start write,time is 1593393695
- write end, time is 61
大概慢了10s ,所以索引会导致插入变慢,因为要更新索引
3. 多进程测试
用go写了一个简单的多进程执行程序
- package main
- import(
- "os/exec"
- "sync"
- )
- var wg sync.WaitGroup
- func testRun(wg *sync.WaitGroup){
- c := exec.Command("php7", "./pdo.php")
- c.Run()
- wg.Done()
- }
- func main(){
- var n int = 10
- wg.Add(n)
- for i:=0;i<n;i++{
- go testRun(&wg)
- }
- wg.Wait();
- }
结果:
耗时115s ,插入速度平均3.4w/s
MySQL锁表状态
10进程一起执行
耗时5‘10“ ,插入速度大概3.2w/s
MySQL锁表状态
最后:
不足之处,请各位指正。
目录 1. LabView简介 2. LabView宝典 3. 初识LabView 3.1新建项目 3.2 加法示例 ...
问题:使用window.location.href来跳转页面的时候,后端只需实现一个过滤器就可...
RedGate Software 最新发布的一份报告显示,目前已有近四分之三的组织以某种形式...
本文转载自微信公众号「三太子敖丙」,作者三太子敖丙 。转载本文请联系三太子敖...
Flash的前生与来世 1996年11月Future Splash Animator卖给了Macromedia同时改名...
随着越来越多的开发者使用SASS,我们有必要关注一下SASS的代码的个数问题。 我们...
概念 程序 一组计算机能识别和执行的指令运行于电子计算机上满足人们某种需求的...
Wine 6.0稳定版已于几天前发布,作为在Linux、Mac OS和BSD上运行Windows应用程序...
学习了之前的基础和爬虫基础之后我们要开始学习网络请求了。 文章目录 urllib的...
大家在.NET中处理XML文档的时候,经常会需要找到文档中的某个节点的数据。要找到...