redis源码阅读之持久化优化——管道

栏目: 数据库 · 发布时间: 6年前

内容简介：redis在进行持久化（aof或者rdb，这个以后会讲到，暂时理解是两种不同的方式将内存中的数据同步到磁盘）的时候，开始都是直接fork一个子进程出来，然后让这个子进程取进行持久化工作，在这期间，父进程照样工作，对外提供服务，接收到的命令也都缓存起来，子进程执行完任务之后，通知父进程，父进程收割，将缓存的命令同步到磁盘，最后OK。但是这样会出现一个问题，就是在子进程执行任务期间，如果父进程中缓存过多的数据就会造成性能下降，redis的大佬们就想出了利用管道来进行父子进程之间通信的方式来优化，就是子进程执行期

redis在进行持久化（aof或者rdb，这个以后会讲到，暂时理解是两种不同的方式将内存中的数据同步到磁盘）的时候，开始都是直接fork一个子进程出来，然后让这个子进程取进行持久化工作，在这期间，父进程照样工作，对外提供服务，接收到的命令也都缓存起来，子进程执行完任务之后，通知父进程，父进程收割，将缓存的命令同步到磁盘，最后OK。但是这样会出现一个问题，就是在子进程执行任务期间，如果父进程中缓存过多的数据就会造成性能下降，redis的大佬们就想出了利用管道来进行父子进程之间通信的方式来优化，就是子进程执行期间，将父进程接收到的命令通过管道来写给子进程，这样能够减少父进程收割完子进程之后，写入磁盘的数据的数目。

在 redis 当中简单的管道实现如下：

1. 打开：

点击( 此处 )折叠或打开

void openChildInfoPipe ( void ) {
if ( pipe ( server . child_info_pipe ) = = - 1 ) {
/ * On error our two file descriptors should be still set to - 1 ,
* but we call anyway cloesChildInfoPipe ( ) since can ' t hurt . * /
closeChildInfoPipe ( ) ;
} else if ( anetNonBlock ( NULL , server . child_info_pipe [ 0 ] ) ! = ANET_OK ) {
closeChildInfoPipe ( ) ;
} else {
memset ( & server . child_info_data , 0 , sizeof ( server . child_info_data ) ) ;
}
}

2. 关闭：

点击( 此处 )折叠或打开

/ * Close the pipes opened with openChildInfoPipe ( ) . * /
void closeChildInfoPipe ( void ) {
if ( server . child_info_pipe [ 0 ] ! = - 1 | |
server . child_info_pipe [ 1 ] ! = - 1 )
{
close ( server . child_info_pipe [ 0 ] ) ;
close ( server . child_info_pipe [ 1 ] ) ;
server . child_info_pipe [ 0 ] = - 1 ;
server . child_info_pipe [ 1 ] = - 1 ;
}
}

3. 发送数据给parent

点击( 此处 )折叠或打开

/ * Send COW data to parent . The child should call this function after populating
* the corresponding fields it want to sent ( according to the process type ) . * /
void sendChildInfo ( int ptype ) {
if ( server . child_info_pipe [ 1 ] = = - 1 ) return ;
server . child_info_data . magic = CHILD_INFO_MAGIC ;
server . child_info_data . process_type = ptype ;
ssize_t wlen = sizeof ( server . child_info_data ) ;
if ( write ( server . child_info_pipe [ 1 ] , & server . child_info_data , wlen ) ! = wlen ) {
/ * Nothing to do on error , this will be detected by the other side . * /
}
}

4. 接收parent的数据

点击( 此处 )折叠或打开

/ * Receive COW data from parent . * /
void receiveChildInfo ( void ) {
if ( server . child_info_pipe [ 0 ] = = - 1 ) return ;
ssize_t wlen = sizeof ( server . child_info_data ) ;
if ( read ( server . child_info_pipe [ 0 ] , & server . child_info_data , wlen ) = = wlen & &
server . child_info_data . magic = = CHILD_INFO_MAGIC )
{
if ( server . child_info_data . process_type = = CHILD_INFO_TYPE_RDB ) {
server . stat_rdb_cow_bytes = server . child_info_data . cow_size ;
} else if ( server . child_info_data . process_type = = CHILD_INFO_TYPE_AOF ) {
server . stat_aof_cow_bytes = server . child_info_data . cow_size ;
}
}
}

以上所述就是小编给大家介绍的《redis源码阅读之持久化优化——管道》，希望对大家有所帮助，如果大家有任何疑问请给我留言，小编会及时回复大家的。在此也非常感谢大家对码农网的支持！

查看所有标签

猜你喜欢:

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。

码农书籍

JAVASCRIPT权威指南(第四版)

David Flanagan / 张铭泽、等 / 机械工业出版社 / 2003-1-1 / 99.00

《JavaScript权威指南》全面介绍了JavaScript语言的核心，以及Web浏览器中实现的遗留和标准的DOM。它运用了一些复杂的例子，说明如何处理验证表单数据、使用cookie、创建可移植的DHTML动画等常见任务。本书还包括详细的参考手册，涵盖了JavaScript的核心API、遗留的客户端API和W3C标准DOM API，记述了这些API中的每一个JavaScript对象、方法、性质、......一起来看看《JAVASCRIPT权威指南(第四版)》这本书的介绍吧!

码农工具

redis源码阅读之持久化优化——管道

JAVASCRIPT权威指南(第四版)

CSS 压缩/解压工具

RGB转16进制工具

HSV CMYK 转换工具