redis 学习笔记一
找了半天,发觉还是redis的源码看起来比较舒服。所以决定今年把redis的源码读一遍顺便做个读书笔记。好好记录下。话说现在越来不越不愿意用脑袋来记录东西,喜欢靠note来记。话说这样不爱用脑会不会过早的老年痴呆呢~~~
一、redis下载编译
这里没什么好说的
用的版本是redis-2.8.17
1)redis-server是可执行程序
2)mian函数在redis.c里面
3)如果要修改调试 这届在src目录下 修改后make或者make clean;make 就行
从main函数说起这里先说两个部分一个是 redis里面的回调函数 还有一个是redis里面的log日志
二、redis里的回调函数
先看下代码;这是把redis里面的回调函数拿出来修改下
/*
redis里的回调函数
*/
#include<stdio.h>
#include<stdlib.h> static void zmalloc_default_oom(size_t size)
{
printf("zmalloc_default_oom\n");
fprintf(stderr, "zmalloc: Out of memory trying to allocate %d bytes\n",size);
fflush(stderr);
} static void (*zmalloc_oom_handler)(size_t) = zmalloc_default_oom; void zmalloc_set_oom_handler(void (*oom_handler)(size_t))
{
printf("zmalloc_set_oom_handler\n");
zmalloc_oom_handler = oom_handler;
} void redisOutOfMemoryHandler(size_t allocation_size)
{
printf("redisOutOfMemoryHandler------:%d\n",allocation_size);
} int main(void)
{
//zmalloc_set_oom_handler(redisOutOfMemoryHandler);
zmalloc_oom_handler(10);
getchar();
return 0;
}
运行结果
zmalloc_default_oom
zmalloc:Out of memory trying to allocate 10 bytes
我们可以看到默认情况下,在没有注册回调函数的情况下zmalloc_oom_handler是指向 zmalloc_default_oom函数的
假如注册了回调函数的情况下,则调用的是 注册了的回调函数
int main(void)
{
zmalloc_set_oom_handler(redisOutOfMemoryHandler);
zmalloc_oom_handler(10);
getchar();
return 0;
}
运行结果
zmalloc_set_oom_handler
redisOutOfMemoryHandler----------:10
现在看看redis的代码
int main(int argc, char **argv)
{
struct timeval tv; /* We need to initialize our libraries, and the server configuration. */
#ifdef INIT_SETPROCTITLE_REPLACEMENT
//初始化参数
spt_init(argc, argv);
#endif
setlocale(LC_COLLATE,"");
/*
zmalloc_enable_thread_safeness()
开启了内存分配管理的线程安全变量,当内存分配时,
redis会统计一个总内存分配量,这是一个共享资源,
所以需要原子性操作,在redis的内存分配代码里,
当需要原子操作时,就需要打开线程安全变量。
*/
zmalloc_enable_thread_safeness();
/*
zmalloc_set_oom_handler()
是一个内存分配错误处理,
当无法得到需要的内存量时,
会调用redisOutOfMemoryHandler函数。
*/
zmalloc_set_oom_handler(redisOutOfMemoryHandler);
srand(time(NULL)^getpid());
gettimeofday(&tv,NULL);
dictSetHashFunctionSeed(tv.tv_sec^tv.tv_usec^getpid());
server.sentinel_mode = checkForSentinelMode(argc,argv);
initServerConfig();
..........
}
zmalloc_set_oom_handler注册回调函数
redisOutOfMemoryHandler主要是个log日志打印,即在内存分配失败的时候触发回调函数,打印log。
void *zmalloc(size_t size) {
void *ptr = malloc(size+PREFIX_SIZE); if (!ptr) zmalloc_oom_handler(size);
#ifdef HAVE_MALLOC_SIZE
update_zmalloc_stat_alloc(zmalloc_size(ptr));
return ptr;
#else
*((size_t*)ptr) = size;
update_zmalloc_stat_alloc(size+PREFIX_SIZE);
return (char*)ptr+PREFIX_SIZE;
#endif
}
在分配内存失败的时候,触发回调函数
三、redis的log日志
由于redis是单线程的 所以在redis.c里面的log没有做成多线程
这样的log,在单线程下 速度很快,因为无锁。但是在多线程下是不安全
简化了下 redis的log 单是大抵就是这样
#include <stdio.h>
#include <stdlib.h>
#include <stdarg.h> /* Log levels */
#define REDIS_DEBUG 0
#define REDIS_VERBOSE 1
#define REDIS_NOTICE 2
#define REDIS_WARNING 3 #define REDIS_MAX_LOGMSG_LEN 1024 /* 默认信息长度 */ void redisLogRaw(int level, const char *msg);
void redisLog(int level, const char *fmt, ...); /*
verbosity表示开启log的级别
需要写log的时候,log级别小于等于verbosity写log
否则不会写log */
struct redisServer {
int verbosity; /* 日志级别*/
char *logfile; /* Path of log file */
}; struct redisServer server; /* server global state */ void redisLog(int level, const char *fmt, ...)
{
//如果level级别大于verbosity则不打印
if (level> server.verbosity)
{
return;
}
va_list ap;
char msg[REDIS_MAX_LOGMSG_LEN]; va_start(ap, fmt);
vsnprintf(msg, sizeof(msg), fmt, ap);
va_end(ap); redisLogRaw(level,msg);
} void redisLogRaw(int level, const char *msg)
{
#if 1 FILE *fp;
char buf[64];
// int rawmode = (level & REDIS_LOG_RAW);
//int log_to_stdout = server.logfile[0] == '\0'; //level &= 0xff; /* clear flags */
//if (level < server.verbosity) return;
if(server.logfile != NULL)
{
fp=fopen(server.logfile,"a");
}
else
{
fp=stdout;
} int off;
// struct timeval tv; //gettimeofday(&tv,NULL);
//off = strftime(buf,sizeof(buf),"%d %b %H:%M:%S.",localtime(&tv.tv_sec));
//snprintf(buf+off,sizeof(buf)-off,"%03d",(int)tv.tv_usec/1000);
//fprintf(fp,"[%d] %s %c %s\n",(int)getpid(),buf,c[level],msg);
fprintf(fp," %s\n",msg);
fflush(fp); if(server.logfile != NULL)
{
fclose(fp);
} #endif
}
int main(void)
{
server.verbosity=2;
server.logfile=NULL;
redisLog(1,"11111111\n");
redisLog(2,"22222\n");
redisLog(3,"333\n");
getchar(); return 0;
}
关于log日志 怎么在不影响性能的情况下 最快最多的 写日志能,
多线程用锁的话必然会影响速度
用双队列这种方式好像挺不错,可以把log的内容的放到队列里,一个队列负责接收log,一个队列负责打印log
打印完的log队列,然后跟接收log队列互换,在继续 这种方法陈硕的 《linux多线程网络编程》介绍过
好像谷歌的glog好像性能不错,什么时候有时间把glog看完 再来讨论log日志的实现
redis 学习笔记一的更多相关文章
- redis 学习笔记(6)-cluster集群搭建
上次写redis的学习笔记还是2014年,一转眼已经快2年过去了,在段时间里,redis最大的变化之一就是cluster功能的正式发布,以前要搞redis集群,得借助一致性hash来自己搞shardi ...
- Redis学习笔记~目录
回到占占推荐博客索引 百度百科 redis是一个key-value存储系统.和Memcached类似,它支持存储的value类型相对更多,包括string(字符串).list(链表).set(集合). ...
- Redis学习笔记4-Redis配置详解
在Redis中直接启动redis-server服务时, 采用的是默认的配置文件.采用redis-server xxx.conf 这样的方式可以按照指定的配置文件来运行Redis服务.按照本Redi ...
- Redis学习笔记7--Redis管道(pipeline)
redis是一个cs模式的tcp server,使用和http类似的请求响应协议.一个client可以通过一个socket连接发起多个请求命令.每个请求命令发出后client通常会阻塞并等待redis ...
- Redis学习笔记一:数据结构与对象
1. String(SDS) Redis使用自定义的一种字符串结构SDS来作为字符串的表示. 127.0.0.1:6379> set name liushijie OK 在如上操作中,name( ...
- Redis学习笔记之ABC
Redis学习笔记之ABC Redis命令速查 官方帮助文档 中文版本1 中文版本2(反应速度比较慢) 基本操作 字符串操作 set key value get key 哈希 HMSET user:1 ...
- (转)redis 学习笔记(1)-编译、启动、停止
redis 学习笔记(1)-编译.启动.停止 一.下载.编译 redis是以源码方式发行的,先下载源码,然后在linux下编译 1.1 http://www.redis.io/download 先 ...
- Redis学习笔记(二)-key相关命令【转载】
转自 Redis学习笔记(二)-key相关命令 - 点解 - 博客园http://www.cnblogs.com/leny/p/5638764.html Redis支持的各种数据类型包括string, ...
- Redis学习笔记(三)Redis支持的5种数据类型的总结
继续Redis学习笔记(二)来说说剩余的三种数据类型. 三.列表类型(List) 1.介绍 列表类型可以存储一个有序的字符串列表,常用的操作是向列表两端添加元素,或者获得列表的一段片段.列表类型内部是 ...
- Redis学习笔记(二)Redis支持的5种数据类型的总结之String和Hash
引言 在Redis学习笔记(一)中我们已经会安装并且简单使用Redis了,接下来我们一起来学习下Redis支持的5大数据类型. 简介 Redis是REmote DIctionary Server(远程 ...
随机推荐
- SOAP 简单对象访问协议
webService三要素 SOAP.WSDL(WebServicesDescriptionLanguage).UDDI(UniversalDescriptionDiscovery andIntegr ...
- Android 基于Netty的消息推送方案之概念和工作原理(二)
上一篇文章中我讲述了关于消息推送的方案以及一个基于Netty实现的一个简单的Hello World,为了更好的理解Hello World中的代码,今天我来讲解一下关于Netty中一些概念和工作原理的内 ...
- tomcat端口号、日志、启停
cd到tomcat目录下 1.[root@rusky bin]# ./shutdown.sh 关闭tomcat 2.[root@rusky bin]# ./startup.sh ...
- php图片上面写文字,输出图片
<?php /* param $image 图象资源 param size 字体大小 param angle 字体输出角度 param showX 输出位置x坐标 param showY 输出位 ...
- vs2013+EF6+Mysql
1.首先需要在整个项目中添加一个Model类库,在类库中引用EF 我需要在该项目下添加EF的MYSQL对象实体 首先需要引入几个相关引用,我通过NuGet来添加,如下图 接下来我需要通过ADO.NET ...
- 2.RxJava详解网址http
RxJava 到底是什么 RxJava 好在哪 API 介绍和原理简析 1) Scheduler 的 API (二) 2) Scheduler 的原理(二) 3) 延伸:doOnSubscribe() ...
- Highcharts使用====一些问题记录
问题1: 图表不显示(但有些浏览器可以显示chrome,IE.火狐不显示),原因可能是前台页面js代码有些问题.highcharts兼容性是比较好的.我遇到的问题是,使用了.replace(/T/, ...
- c3p0写连接池 Demo
1.导包 2.配置文件:名称必须为:c3p0-config.xml,且必须放在src根目录下 <c3p0-config> <!-- 默认配置,有且仅可出现一次 ,如果没有指定则使用这 ...
- PL/SQL Developer主界面窗口左边窗口默认设置
中文版:在菜单 工具 -> 首选项 -> 用户界面 -> 选项 窗口中,将“自动保存桌面”勾选上就可以了. 截图如下: 英文版:在菜单 Tools -> Preferences ...
- POJ 1930 Dead Fraction
POJ 1930 Dead Rraction 此题是一个将无限循环小数转化为分数的题目 对于一个数 x=0.abcdefdef.... 假设其不循环部分的长度为m(如abc的长度为m),循环节的长度为 ...