分类目录归档：MySql

2017
08-22

用 Node + MySQL 处理 100G 数据

通过这个Node.js和MySQL示例项目，我们将看看如何有效地处理数十亿行占用数百GB存储空间的数据。本文的第二个目标是帮助你确定Node.js+MySQL是否适合你的需求，并为实现此类解决方案提供帮助。本文章使用的实际代码可以在GitHub上找到。为什么使用Node.js和MySQL？我们使用MySQL来存储我们的Node.js监控和调试工具用户的分布式跟踪数据Trace。我们选择了MySQL，因为在决定的时候... 继续阅读 >
2017
08-01

10个提升MySQL性能的小技巧

从工作量分析到索引的三条规则，这些专家见解肯定会让您的MySQL服务器尖叫。在所有的关系数据库中，MySQL已经被证明了完全是一头野兽，只要通知停止运行就绝对不会让你多等一秒钟，使你的应用置于困境之中，你的工作也承受极大的风险。不过事实是，普通的错误都在MySQL性能错误的射程之内。所以为了使你的MySQL服务器能够高速运转，提供稳定且持续的服务，消除这些错误是非常有必要的，但是这可能常常会被你的繁忙... 继续阅读 >
2017
03-23

MySQL与PostgreSQL相比哪个更好？

网上已经有很多拿PostgreSQL与MySQL比较的文章了，这篇文章只是对一些重要的信息进行下梳理。在开始分析前，先来看下这两张图：MySQLMySQL声称自己是最流行的开源数据库。LAMP中的M指的就是MySQL。构建在LAMP上的应用都会使用MySQL，如WordPress、Drupal等大多数php开源程序。MySQL最初是由MySQLAB开发的，然后在2008年以10亿美金的价格卖给了Sun公司，Sun公司又在2010年被Oracle收购。Oracle支持MySQL的多个... 继续阅读 >
2016
11-30

MySQL 的 20+ 条最佳实践

数据库操作是当今Web应用程序中的主要瓶颈。不仅是DBA（数据库管理员）需要为各种性能问题操心，程序员为做出准确的结构化表，优化查询性能和编写更优代码，也要费尽心思。在本文中，我列出了一些针对程序员的MySQL优化技术。在我们开始学习之前，我补充一点：你可以在EnvatoMarket上找到大量的MySQL脚本和实用程序。1.优化查询的查询缓存大部分MySQL服务器都有查询缓存功能。这是提高性能的最有效... 继续阅读 >
2016
11-08

MySQL简单主从方案暴露问题

1、概述从本篇文章开始我们将向读者介绍mysql的各种服务集群的搭建方式。大致的讨论思路是从最简的MySQL主从方案开始介绍，通过这种方案的不足延伸出更复杂的集群方案，并介绍后者是如何针对这些不足进行改进的。2、MySQL最简单主从方案及工作原理我们讲解的版本还是依据目前在生产环境上使用最多的version5.6进行，其中一些特性在Version5.7和最新的Version8.0中有所改进，但这不影响读者通过文章去理解构建MySQL集群的技... 继续阅读 >
2016
11-03

MySQL性能调优

对于全栈而言，数据库技能不可或缺，关系型数据库或者nosql，内存型数据库或者偏磁盘存储的数据库，对象存储的数据库或者图数据库……林林总总,但是第一必备技能还应该是MySQL。从LAMP的兴起，到Mariadb的出现，甚至PG的到来，熟练的MySQL技能都是大有用武之地的。MySQL数据库技术的方方面面也是很多，这里只涉及必备的性能调优，推崇从下向上的性能调优，主要包括运行环境，配置参数，SQL性能，和系统架构设计调优。运行环境调... 继续阅读 >
2016
10-20

详解MySQL数据库优化 HOT

一个成熟的数据库架构并不是一开始设计就具备高可用、高伸缩等特性的，它是随着用户量的增加，基础架构才逐渐完善。这篇博文主要谈MySQL数据库发展周期中所面临的问题及优化方案，暂且抛开前端应用不说，大致分为以下五个阶段： 1、数据库表设计项目立项后，开发部根据产品部需求开发项目，开发工程师工作其中一部分就是对表结构设计。对于数据库来说，这点很重要，如果设计不当，会直接影响访问速度和用户体验。影响的因... 继续阅读 >
2016
09-29

对mysql语句的性能分析与优化

1.使用explain，查看查询计划2.使用showprocesslist查看查询过程（处于哪个状态），完整命令如下mysql-uroot-p-e‘showprocesslist\G’|grepstate:|sort|uniq-c|sort-rn此种方法和方法3类似，应该说方法3更好用。3.使用showprofile。默认是禁止的，需要使用setprofiling=1开启。执行一些查询后，键入showprofiles可以看到前面执行语句的查询时间以很高的精度显示了出来。然后使用showprofileforqueryn... 继续阅读 >
2016
09-26

MySQL 语句大全：创建、授权、查询、修改

一、用户创建、权限、删除1、连接MySql操作连接：mysql-h主机地址-u用户名－p用户密码（注:u与root可以不用加空格，其它也一样）断开：exit（回车）打开cmd,输入mysql-h127.0.0.1-uroot-p然后输入密码。就可以连接到本地的MySql数据库了。2、创建用户:命令:CREATEUSER'username'@'host'IDENTIFIEDBY'password';说明:username-你将创建的用户名,host-指定该用户在哪个主机上可以登陆,如果是... 继续阅读 >
2016
09-07

MySQL两千万数据优化&迁移 HOT

最近有一张2000W条记录的数据表需要优化和迁移。2000W数据对于MySQL来说很尴尬，因为合理的创建索引速度还是挺快的，再怎么优化速度也得不到多大提升。不过这些数据有大量的冗余字段和错误信息，极不方便做统计和分析。所以我需要创建一张新表，把旧表中的数据一条一条取出来优化后放回新表；一.清除冗余数据，优化字段结构2000W数据中，能作为查询条件的字段我们是预知的。所以将这部分数据单独创建新的字段，对于有规则的数... 继续阅读 >
2016
08-25

MySQL 中处理 Null 时要注意两个陷阱 HOT

摘要：作为MySQL数据库管理员，我们经常要与Null做斗争。但是在这其中，你需要注意一下两大陷阱。MySQL数据库是一个基于结构化数据的开源数据库。SQL语句是MySQL数据库中核心语言。不过在MySQL数据库中执行SQL语句，需要小心两个陷阱。陷阱一：空值不一定为空空值是一个比较特殊的字段。在MySQL数据库中，在不同的情形下，空值往往代表不同的含义。这是MySQL数据库的一种特性。如在普通的字段中(字符型的数据)，空值就是表示空... 继续阅读 >
2016
08-25

MySQL避免索引列使用 OR 条件

这个亏已经吃过很多次了，在开发以前的sql代码里面，许多以or作为where条件的查询，甚至更新。这里举例来说明使用or的弊端，以及改进办法。selectf_crm_idfromd_dbname1.t_tbname1wheref_xxx_id=926067and(f_mobile='1234567891'orf_phone='1234567891')limit1从查询语句很容易看出，f_mobile和f_phone两个字段都有可能存电话号码，一般思路都是用or去一条sql解决，但表数据量一大简直是灾难：t_tbanme... 继续阅读 >
2016
08-25

理解MySQL——索引与优化

写在前面：索引对查询的速度有着至关重要的影响，理解索引也是进行数据库性能调优的起点。考虑如下情况，假设数据库中一个表有10^6条记录，DBMS的页面大小为4K，并存储100条记录。如果没有索引，查询将对整个表进行扫描，最坏的情况下，如果所有数据页都不在内存，需要读取10^4个页面，如果这10^4个页面在磁盘上随机分布，需要进行10^4次I/O，假设磁盘每次I/O时间为10ms(忽略数据传输时间)，则总共需要100s(但实际上要好很多很多)... 继续阅读 >
2016
07-08

MySQL常常被我们误会的地方

MySQL作为数据库的一大主力军，到处存在于我们各种系统中，相信大家都不陌生！但是，你知道你能用不代表你知道细节，那我们就来盘点盘点其中一些我们平时不太注意的地方，一来为了有趣，二来为了不让自己踩坑。声明：要想知道细节，那就去阅读源码，我实在没那本事，只能从片面上来说一些事！1、不区分大小写(字段名)MySQL的查询字段名不区分大小写，但是查询的内容是要区分大小写的，所以能用下划线命名的就不要用大小写来区分... 继续阅读 >
2016
06-03

21条最佳MySQL性能优化

1.为查询缓存优化你的查询大多数的MySQL服务器都开启了查询缓存。这是提高性最有效的方法之一，而且这是被MySQL的数据库引擎处理的。当有很多相同的查询被执行了多次的时候，这些查询结果会被放到一个缓存中，这样，后续的相同的查询就不用操作表而直接访问缓存结果了。这里最主要的问题是，对于程序员来说，这个事情是很容易被忽略的。因为，我们某些查询语句会让MySQL不使用缓存。请看下面的示例：//查询缓存不开启$r=mysql_... 继续阅读 >
2016
04-11

MySQL索引背后的数据结构及算法原理

摘要本文以MySQL数据库为研究对象，讨论与数据库索引相关的一些话题。特别需要说明的是，MySQL支持诸多存储引擎，而各种存储引擎对索引的支持也各不相同，因此MySQL数据库支持多种索引类型，如BTree索引，哈希索引，全文索引等等。为了避免混乱，本文将只关注于BTree索引，因为这是平常使用MySQL时主要打交道的索引，至于哈希索引和全文索引本文暂不讨论。文章主要内容分为三个部分。第一部分主要从数据结构及算法理论层面讨论... 继续阅读 >
2016
04-10

MySQL 性能优化，让数据库跑的更快

在数据库优化工作中，使数据尽可能的小，使表在硬盘上占据的空间尽可能的小，这是最常用、也是最有效的手段之一。因为缩小数据，相对来说可以提高硬盘的读写速度，并且在查询过程中小表的内容处理时所占用的系统资源比较少。同理，如果在比较小的列上设置索引的话，其索引所占用的资源也会比较少。那么数据库管理员该如何给自己的数据减肥呢?对此笔者有如下几个建议。 建议一：空值并不一定不占用空间 在这里笔者... 继续阅读 >
2015
12-09

linux下导入导出mysql数据库命令

一、导出数据库用mysqldump命令（注意mysql的安装路径，即此命令的路径）：1、导出数据和表结构：mysqldump-u用户名-p密码数据库名>数据库名.sql#/usr/local/mysql/bin/  mysqldump-uroot-pabc>abc.sql敲回车后会提示输入密码2、只导出表结构mysqldump-u用户名-p密码-d数据库名>数据库名.sql#/usr/local/mysql/bin/  mysqldump-uroot-p-dabc>abc.sql注：/usr/local/mysql/bin/&nbs... 继续阅读 >
2015
12-09

Linux启动、停止、重启Mysql数据库的方法 推荐

1、查看mysql版本方法一：status;方法二：selectversion();2、Mysql启动、停止、重启常用命令a、启动方式1、使用service启动：[[email protected]/]#servicemysqldstart(5.0版本是mysqld)[[email protected]]#servicemysqlstart(5.5.7版本是mysql)2、使用mysqld脚本启动：/etc/inint.d/mysqldstart3、使用safe_mysqld启动：safe_mysqld&b、停止1、使用service启动：servicemysqldstop2、使用mysqld脚本启动... 继续阅读 >