Mysql和Mongodb面试题

mysql面试题

1.  各个数据库存储引擎区别
mysql的存储引擎是针对表进行设置的，一个库的不同表可以设置不同的存储引擎，mysql默认支持多种存储引擎，以适用不同领域的数据库应用需要，主要的几个数据库引擎如下：
MyISAM存储引擎
5.5之前默认的存储引擎，不支持事务、不支持外键，表级锁，内存和硬盘空间占用率低，其优势是访问速度快，对事务完整性没有要求，以select、insert为主的应用基本上都可以使用这个引擎；
InnoDB存储引擎
5.5之后默认的存储引擎，提供了具有提交、回滚和奔溃恢复能力的事务安全，支持外键并提供了行级锁，其劣势在于写的处理效率相对较低，并且会占用更多的磁盘空间以保留数据和索引；

MEMORY存储引擎
使用存于内存中的内容来创建表，MEMORY类型的表数据存于内存访问非常的快，默认使用HASH索引，一旦数据库服务重启或关闭，表中的数据就会丢失；
MERGE存储引擎
MERGE存储引擎是一组MyISAM表组合，这些MyISAM表结构完全相同。MERGE表本身没有数据，对MERGE表的CRUD操作都是通过内部的MyISAM表进行的；

2. 提高sql 语句效率的技巧
大批量插入数据
    大批量数据插入空表，可将表设置成为MyISAM，并通过disable keys将唯一索引关闭；
    大批量数据插入非空Innodb表，可采取如下措施提高效率：
        1. 导入数据时按照主键顺序排列；
        2. 导入数据前使用set UNIQUE_CHECKS=0,关闭唯一性校验，导入后恢复；
        3. 如果使用了自动提交，建议在导入前执行SET AUTOCOMMIT=0，关闭自动提交，导入后恢复；
优化INSERT 语句
    尽量使用多个值表的insert语句，降低连接、关闭的消耗；
    将索引文件和数据文件分在不同的磁盘上存放；
    从一个文本文件装入一个表时，使用LOAD DATA INFLIE ,比一般的insert语句快20倍；

查询优化
     尽量减少额外的排序，通过索引直接返回有序数据；where条件和order by使用相同的索引，并且order by的顺序与索引顺序相同，并且order by的字段都是升序或者都是降序；
     尽量只选择必要的字段，提高sql性能；
     能用关联查询的不要用子查询；
     对于包含or的查询语句，如果要利用索引，则or之间的每个条件都必须用到索引，否则应该考虑增加索引；
     优化分页
     在索引上完成排序分页的操作，然后根据主键关联回原表查询所需的其他列
     把limit查询转换为某个位置的查询；

 注意不使用索引的情况
     如果MySQL估计使用索引比全表扫描更慢，则不使用索引。
     用or分隔开的条件，如果or前的条件中的列有索引，而后面的列没有索引，那么涉及到的索引都不会被用到；
     复合索引，如果索引列不是复合索引的第一部分，则不使用索引（即不符合最左前缀;
     如果like是以’%’开始的，则该列上的索引不会被使用。
     如果列为字符串，则where条件中必须将字符常量值加引号，否则即使该列上存在索引，也不会被使用;
     not in 、 not exists 、 （<> 不等于 ！=）这些操作符不走索引
     不要在 where 子句中的“=”左边进行函数、算术运算或其他表达式运算，否则系统将可能无法正确使用索引；

3. 怎么样做执行计划分析
通过explain命令获取mysql如何执行select语句的信息，包括在select语句执行过程中表如何连接和连接的顺序；explain分析后的结果解析：
select_type
    查询的类型，主要是用于区分普通查询、联合查询、子查询等复杂的查询
     SIMPLE：简单的select查询，查询中不包含子查询或者union
     PRIMARY：查询中包含任何复杂的子部分，最外层查询则被标记为primary
     SUBQUERY：在select 或 where列表中包含了子查询
     UNION：若第二个select出现在union之后，则被标记为union；若union包含在from子句的子查询中，外层select将被标记为derived

type
访问类型，sql查询优化中一个很重要的指标，结果值从好到坏依次是：system > const > eq_ref > ref > range > index > ALL一般来说，好的sql 查询至少达到range 级别，最好能达到ref ；
     system：表只有一行记录（等于系统表），这是const类型的特例，平时不会出现，可以忽略不计
     const：表示通过索引一次就找到了，const用于比较primary key 或者 unique索引。
     eq_ref：唯一性索引扫描，对于每个索引键，表中只有一条记录与之匹配（1对1）；
     ref：非唯一性索引扫描，返回匹配某个单独值的所有行。
     range：索引范围扫描；
     index：索引全扫描；
     ALL：全表扫描；

possible_keys
查询涉及到的字段上存在索引，则该索引将被列出，但不一定被查询实际使用
key
实际使用的索引，如果为NULL，则没有使用索引。
key_len
表示索引中使用的字节数，查询中使用的索引的长度（最大可能长度），并非实
际使用长度，理论上长度越短越好;
ref
显示索引的哪些列；
rows
根据表统计信息及索引选用情况，大致估算出找到所需的记录所需要读取的行数
Extra
不适合在其他字段中显示，但是十分重要的额外信息

优化目标 Tips:
1. 根据需求建立索引
2. 每个查询都要使用索引以提高查询效率,至少达到range级别，最好能达到ref；
3. 追求key_len和rows最小；

4. mysql 复制的原理
Mysql的复制原理大致如下：
1.主库在数据提交时会把数据变更作为事件记录在二进制日志文件Binlog中；可通过sync_binlog控制binlog日志刷新到磁盘的频率；
2.主库推送二进制日志文件binlog中的事件到从库的中继日志Relay Log，之后从库根据中继日志RelayLog重做数据变更操作，通过逻辑复制达到主从库的数据一致；
3.MySQL通过3个线程来完成主从库之间的数据同步，其中binlog dump线程跑在主库上，I/O线程和sql线程跑在从库上。

当从库启动复制时，首先创建I/O线程连接主库，主库随后创建binlog dump线程读取数据库事件并发送给I/O线程，I/O线程获取到事件数据后更新到从库的中继日志replay log中去，之后从库上的sql线程读取中继日志中更新的数据库事件并应用；

Mongodb

1. mongodb 与mysql 的区别？
mongodb的本质还是一个数据库产品，3.0以上版本其稳定性和健壮性有很大提升。它与mysql的区别在于它不会遵循一些约束，比如：sql标准、ACID属性，表结构等。其主要特性如下：
 面向集合文档的存储：适合存储Bson（json的扩展）形式的数据；
 格式自由，数据格式不固定，生产环境下修改结构都可以不影响程序运行；
 强大的查询语句，面向对象的查询语言，基本覆盖sql语言所有能力；
 完整的索引支持，支持查询计划；
 支持复制和自动故障转移；
 支持二进制数据及大型对象（文件）的高效存储；
 使用分片集群提升系统扩展性；
 使用内存映射存储引擎，把磁盘的IO操作转换成为内存的操作；

2. mongoDB 主要使用在什么应用场景？
 MongoDB 的应用已经渗透到各个领域，比如游戏、物流、电商、内容管理、社交、物联网、视频直播等，以下是几个实际的应用案例：
 游戏场景，使用 MongoDB 存储游戏用户信息，用户的装备、积分等直接以内嵌文档的形式存储，方便查询、更新
 物流场景，使用 MongoDB 存储订单信息，订单状态在运送过程中会不断更新，以MongoDB 内嵌数组的形式来存储，一次查询就能将订单所有的变更读取出来。
 社交场景，使用 MongoDB 存储存储用户信息，以及用户发表的朋友圈信息，通过地理位置索引实现附近的人、地点等功能
 物联网场景，使用 MongoDB 存储所有接入的智能设备信息，以及设备汇报的日志信息，并对这些信息进行多维度的分析
 视频直播，使用 MongoDB 存储用户信息、礼物信息等

3. 怎么样做mongodb 查询优化
 第一步 找出慢速查询
1. 开启内置的查询分析器,记录读写操作效率:
        db.setProfilingLevel(n,{m}),n的取值可选0,1,2；
     0是默认值表示不记录；
     1表示记录慢速操作,如果值为1,m必须赋值单位为ms,用于定义慢速查询时间的阈值；
     2表示记录所有的读写操作；
        例如:db.setProfilingLevel(1,300)
2. 查询监控结果
    监控结果保存在一个特殊的盖子集合system.profile里,这个集合分配了128kb的空间,要确保监控分析数据不会消耗太多的系统性资源；盖子集合维护了自然的插入顺序,可以使用$natural操作符进行排序,如:db.system.profile.find().sort({‘$natural’:-1}).limit(5)

 第二步 分析慢速查询
找出慢速查询的原因比较棘手,原因可能有多个:应用程序设计不合理、不正确的数据模型、硬件配置问题,缺少索引等；接下来对于缺少索引的情况进行分析:使用explain分析慢速查询
    例如:db.orders.find({‘price’:{‘$lt’:2000}}).explain(‘executionStats’)
    explain的入参可选值为:
     “queryPlanner” 是默认值,表示仅仅展示执行计划信息；
     “executionStats” 表示展示执行计划信息同时展示被选中的执行计划的执行情况信息；
      “allPlansExecution” 表示展示执行计划信息,并展示被选中的执行计划的执行情况信息,还展示备选的执行计划的执行情况信息；

 第三步 解读explain结果 
queryPlanner（执行计划描述）
    winningPlan（被选中的执行计划）
        stage（可选项:COLLSCAN 没有走索引；IXSCAN使用了索引）
    rejectedPlans(候选的执行计划)
executionStats(执行情况描述)
    nReturned （返回的文档个数）
    executionTimeMillis（执行时间ms）
    totalKeysExamined （检查的索引键值个数）
    totalDocsExamined （检查的文档个数）

备注:
1. 根据需求建立索引
2. 每个查询都要使用索引以提高查询效率, winningPlan. stage 必须为IXSCAN ；
3. 追求totalDocsExamined = nReturned

4. mongodb 的索引注意事项？
1. 索引很有用,但是它也是有成本的——它占内存,让写入变慢；
2. mongoDB通常在一次查询里使用一个索引,所以多个字段的查询或者排序需要复合索引才能更加高效；
3. 复合索引的顺序非常重要
4. 在生成环境构建索引往往开销很大,时间也不可以接受,在数据量庞大之前尽量进行查询优化和构建索引；
5. 避免昂贵的查询,使用查询分析器记录那些开销很大的查询便于问题排查；
6. 通过减少扫描文档数量来优化查询,使用explai对开销大的查询进行分析并优化；
7. 索引是用来查询小范围数据的，不适合使用索引的情况：
     每次查询都需要返回大部分数据的文档，避免使用索引
     写比读多

5. mongodb 是怎么实现高可用？