olap分析过程 《MySQL技术内幕 InnoDB存储引擎 第2版》学习笔记(2)

InnoDB是基于磁盘存储的，将其中的记录按照页的方式进行管理。缓冲池用来弥补磁盘速度相对于内存慢对性能的影响。

缓冲池中缓存的数据页：索引页、数据页、undo页、插入缓冲、自适应哈希索引、InnoDB存储的锁信息、数据字典信息等。

全局共享内存主要是 mysql instance（mysqld进程）以及底层存储引擎用来暂存各种全局运算及可共享的暂存信息，如存储查询缓存的 query cache，缓存连接线程的 thread cache，缓存表文件句柄信息的 table cache，缓存二进制日志的 binlog buffer， 缓存 myisam 存储引擎索引键的 key buffer以及存储 innodb 数据和索引的 innodb buffer pool 等等。

innodb_log_buffer_size：指定innodb用来存储日志数据的缓存大小，如果您的表操作中包含大量并发事务（或事务），并且在事务提交前要求记录日志文件，请尽量调高此项值，以提高日志效率。

索引是一种特殊的对象存储，它引用包含数据的对象存储，在更改所引用的对象存储时（也就是添加、修改或删除记录时）自动更新。

存储的单元是_yylinkedmapnode,除了key和value外,还存储了它的前后node的地址_prev,_next.整个实现基于_yylinkedmap,它是一个双向链表,除了存储了字典_dic外,还存储了头结点和尾节点.它实现的功能很简单,就是:有新数据了插入链表头部,访问过的数据结点移到头部,内存紧张时把尾部的结点移除.就这样实现了淘汰算法.因为内存访问速度很快,锁占用的时间少,所以用的速度最快的osspinlocklock。

允许有多个缓冲池实例，每个页根据哈希值分配平均分配到不同缓冲池实例中，这样做减少了内部的资源竞争，增加并发处理能力。

中的缓冲池是通过LRU算法进行管理的。InnoDB缓冲池中的页默认16KB。InnoDB对LRU进行了优化，在LRU列表中加入了midpoint位置，读取最新的页是放在该位置，默认是LRU长度的5/8处。

InnoDB首先将重做日志信息放到该缓冲，然后按照一定频率将其刷新到重做日志文件。默认8MB.

Checkpoint（检查点）技术目的是解决如下问题：缩短的恢复时间；缓冲池不够用时将脏页刷新到磁盘；重做日志不可用时刷新脏页。

插入缓冲、两次写、自适应哈希索引、异步IO、刷新邻接页。

插入菜单项非常直接，就在要插入新项的菜单项上点击，在键盘上按insert键或从menu designer快捷菜单中选择insert。

与现有技术相比，本发明的优点在于创建了多粒度多层次历史聚集树 mmha-tree (mult-granularity and mult-level historical aggregate tree)结构，用以存储历史统计数据概要结构，其考虑到网络安全事件聚集统计分析的多时间粒度等特性， 有针对性地采用了多时间粒度窗口模型并基于此模型建立了历史统计数据的概要数据结构，根据用户查询的不同具有不同的结构，从而支持快速数据流上动态变化的用户查询，不需要样本回载，因而能更好的支持实际应用。

opengl 3.1主要新特性：texture buffer objects(纹理缓冲对象)、uniform buffer objects(统一缓冲对象)、signed normalized textures(符号正常化纹理)、primitive restart(基本元素重启)、instancing(实例化)、copybuffer api(拷贝缓冲接口)……。

本文来自电脑杂谈，转载请注明本文网址：
https://www.pc-fly.com/a/jisuanjixue/article-92192-2.html