MySQL内存分配

1.MySQL内存申请公式： 1.1 per-thread buffers: 每个线程缓冲内存针对每个线程连接分配的。每个线程的connection buffer和result buffer 开始是给定net_buffer_length大小，可以动态增长到max_allowed_packet字节的大小。在使用过程 中result buffer每个语句执行完成以后会收缩到net_buffer_length字节大小。 每个连接线程的计算公式： (read_buffer_size+read_rnd_buffer_size+sort_buffer_size+thread_stack+ join_buffer_size+binlog_cache_size)*max_connections=total memory for all connections 这个内存使用叫：MySQL Thread Buffers(MTB) 1.2 global buffers: global buffer与每个线程分配的内存没有多大关系。当进程启动，预留的内存资源，直到服务器 关闭。这个内存叫MySQL Global Buffers(MGB) 1.3 总的内存申请 总的内存申请大小为： MTB+MGB=Total Memory Used by MySQL 1.4 参数说明: read_buffer_size: 每个线程每一次顺序扫描MyISAM表所申请的内存，该值默认为131072字节。该值应该为4K 整数倍，如果不为4K的整数倍会向下取值为4K的整数倍。这部分内存主要用于当需要顺序读取 数据的时候，如无法使用索引的情况下的全表扫描，全索引扫描等。在这种时候，MySQL 按照 数据的存储顺序依次读取数据块，每次读取的数据快首先会暂存在read_buffer_size中，当 buffer 空间被写满或者全部数据读取结束后，再将buffer中的数据返回给上层调用者，以提高效率. 该选项也被所有的村粗引擎使用： (1)当使用order by 排序时候会缓存临时文件中的索引。 (2)bulk insert into partitions操作。 (3)缓存内嵌或者嵌套的查询结果。 read_rnd_buffer_size： 和顺序读取相对应，当 MySQL 进行非顺序读取（随机读取）数据块的时候，会利用这个 缓冲区暂存读取的数据。如根据索引信息读取表数据，根据排序后的结果集与表进行Join等等。 总的来说，就是当数据块的读取需要满足一定的顺序的情况下，MySQL 就需要产生随机读取， 进而使用到 read_rnd_buffer_size 参数所设置的内存缓冲区。 thread_stack: 主要用来存放每一个线程自身的标识信息，如线程id，线程运行时基本信息等等， 我们可以通过 thread_stack 参数来设置为每一个线程栈分配多大的内存。 join_buffer_size: 应用程序经常会出现一些两表（或多表）Join的操作需求，MySQL在完成某些 Join 需求的时候（all/index join）， 为了减少参与Join的“被驱动表”的读取次数以提高性能，需要使用到 Join Buffer 来协助完成 Join操作。 当 Join Buffer 太小，MySQL 不会将该 Buffer 存入磁盘文件，而是先将Join Buffer中的结果集与需要 Join 的表进行 Join 操作， 然后清空 Join Buffer 中的数据，继续将剩余的结果集写入此 Buffer 中，如此往复。这势必会造成被驱动表需要被多次读取， 成倍增加 IO 访问，降低效率。 sort_buffer_size: MySQL 用此内存区域进行排序操作（filesort），完成客户端的排序请求。 当我们设置的排序区缓存大小无法满足排序实际所需内存的时候， MySQL 会将数据写入磁盘文件来完成排序。由于磁盘和内存的读写性能完全不在一个数量级， 所以sort_buffer_size参数对排序操作的性能影响绝对不可小视。经常使用索引来完成排序操作。 主库执行： SQL>select sum(a.variable_value)/1024 kb from global_variables a where a.variable_name in (‘read_buffer_size‘,‘read_rnd_buffer_size‘, ‘sort_buffer_size‘,‘thread_stack‘, ‘join_buffer_size‘,‘binlog_cache_size‘); --------------------------------------------- 38144 SQL>select * from global_variables a where a.variable_name =‘max_connections‘; --------------------------------------------- MAX_CONNECTIONS 1500 SQL>select 38144*1500/1024/1024; ----------------------------------------- 54.56542969(这是计算线程需要的内存大小)

 

MySQL内存分配

标签：