[转]Python-memcached的基本使用
1.memcached的安装
安装省略
启动一个memcached实例:memcached -m 10 -p 12000
2.Python-memcached安装
到ftp://ftp.tummy.com/pub/python-memcached/下载最新版本的API,并解压tar包
输入python setup.py install命令进行安装
3.小例子演示
将memcached.pyc拷贝到工作目录
#!/usr/bin/env python import memcache mc = memcache.Client(['127.0.0.1:12000'],debug=0) mc.set("foo","bar") value = mc.get("foo") print value
输出得到bar
4.Python-memcached API总结
整个memcache.py只有1241行,相当精简
主要方法如下:
@set(key,val,time=0,min_compress_len=0)
无条件键值对的设置,其中的time用于设置超时,单位是秒,而min_compress_len则用于设置zlib压缩(注:zlib是提供数据压缩用的函式库)
@set_multi(mapping,time=0,key_prefix='',min_compress_len=0)
设置多个键值对,key_prefix是key的前缀,完整的键名是key_prefix+key, 使用方法如下
>>> mc.set_multi({'k1' : 1, 'k2' : 2}, key_prefix='pfx_') == []
>>> mc.get_multi(['k1', 'k2', 'nonexist'], key_prefix='pfx_') == {'k1' : 1, 'k2' : 2}
@add(key,val,time=0,min_compress_len=0)
添加一个键值对,内部调用_set()方法
@replace(key,val,time=0,min_compress_len=0)
替换value,内部调用_set()方法
@get(key)
根据key去获取value,出错返回None
@get_multi(keys,key_prefix='')
获取多个key的值,返回的是字典。keys为key的列表
@delete(key,time=0)
删除某个key。time的单位为秒,用于确保在特定时间内的set和update操作会失败。如果返回非0则代表成功
@incr(key,delta=1)
自增变量加上delta,默认加1,使用如下
>>> mc.set("counter", "20")
>>> mc.incr("counter")
21
@decr(key,delta=1)
自减变量减去delta,默认减1
5._set方法
很多方法内部都调用了_set方法,其源码如下:
def _set(self, cmd, key, val, time, min_compress_len = 0): self.check_key(key) server, key = self._get_server(key) if not server: return 0 self._statlog(cmd) store_info = self._val_to_store_info(val, min_compress_len) if not store_info: return(0) if cmd == 'cas': if key not in self.cas_ids: return self._set('set', key, val, time, min_compress_len) fullcmd = "%s %s %d %d %d %d/r/n%s" % ( cmd, key, store_info[0], time, store_info[1], self.cas_ids[key], store_info[2]) else: fullcmd = "%s %s %d %d %d/r/n%s" % ( cmd, key, store_info[0], time, store_info[1], store_info[2]) try: server.send_cmd(fullcmd) return(server.expect("STORED") == "STORED") except socket.error, msg: if isinstance(msg, tuple): msg = msg[1] server.mark_dead(msg) return 0
注: memcached 的客户端使用TCP链接与服务器通讯, 一个运行中的memcached服务器监视一些端口, 客户端连接这些端口,发送命令到服务器,读取回应,最后关闭连接。
6.python-memcached线程安全
答案是肯定的,前提你在使用Python 2.4+和python-memcached 1.36+
为什么我们需要线程安全的memcached client,因为我们的实际应用一般是多线程的模型,例如cherrypy、twisted,如果python-memcached不是线程安全的话,引起的问题不仅仅是并发修改共享变量这么简单,是外部socket链接的数据流的混乱
python-memcached怎么实现线程安全的呢?查看源代码看到
try: # Only exists in Python 2.4+ from threading import local except ImportError: # TODO: add the pure-python local implementation class local(object): pass class Client(local):
很取巧的让Client类继承threading.local,也就是Client里面的每一个属性都是跟当前线程绑定的。实现虽然不太优雅,但是很实在。但是别以为这样就可以随便在线程里面用python-memcached了,因为这种thread local的做法,你的应用必须要使用thread pool的模式,而不能不停创建销毁thread,因为每一个新线程的创建,对于就会使用一个全新的Client,也就是一个全新的socket链接,如果不停打开创建销毁thread的话,就会导致不停的创建销毁socket链接,导致性能大量下降。幸好,无论是cherrypy还是twisted,都是使用了thread pool的模式
[转]Python-memcached的基本使用相关推荐
- python加快绘图速度_python 三维画图为Python加速 - python+memcached
本来我一直不知道怎么来更好地优化网页的性能,然后最近做python和php同类网页渲染速度比较时,意外地发现一个很简单很白痴但是 我一直没发现的好方法(不得不BS我自己):直接像某些php应用比如Di ...
- 30分钟3300%性能提升—python+memcached网页优化小记
前言 本来我一直不知道怎么来更好地优化网页的性能,然后最近做python和php同类网页渲染速度比较时,意外地发现一个好方法:直接像某些php应用比如Discuz论坛那样,在生成的网页中打印出&quo ...
- Python 学习笔记 - Memcached
Memcached是一个分布式内存对象缓存系统,他把数据缓存在内存里面来减少对数据库的访问,从而提高动态网页的访问速度.他的基本结构是key/value(键值对).下面看看在Python里面如何使用. ...
- Python操作Redis和Memcached
Memcached Memcached 是一个高性能的分布式内存对象缓存系统,用于动态Web应用以减轻数据库负载.它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提高动态.数据库驱动网站的速度 ...
- Python操作 RabbitMQ、Redis、Memcache、SQLAlchemy
Memcached Memcached 是一个高性能的分布式内存对象缓存系统,用于动态Web应用以减轻数据库负载.它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提高动态.数据库驱动网站的速度 ...
- Python全栈开发:RabbitMQ/Redis/Memcache/SQLAlchemy
Memcached Memcached 是一个高性能的分布式内存对象缓存系统,用于动态Web应用以减轻数据库负载.它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提高动态.数据库驱动网站的速度 ...
- Python-使用python-memcache操作Memcached
2019独角兽企业重金招聘Python工程师标准>>> 预备 Python 2.7 Memcached 1.4.x python-memcached-1.54 安装 1.下载源码 ...
- cacti监控Memcached
cacti 监控memcached 1在cactiserver安装memcached的客户端 在ftp.tummy.com:/pub/python-memcached/ 下载memcached的客户端 ...
- 使用python进行收据搜集示例之different_format_data_processing
这里是用jupyter notebook写的关于使用python进行数据收集的基本知识,包括crawl_and_parse.different_format_data_processing.featu ...
- python清除缓存的命令_python-操作缓存
参考王智刚同学博客 操作Mmecached 1. 安装API python -m pip install python-memcached 2. 启动memcached memcached -d -u ...
最新文章
- 调试Release发布版程序的Crash错误
- 「后端小伙伴来学前端了」Vue中Props 实现组件通信TodoList案例
- 【linux】修改机器时间
- react循环setstate_[React] 8 - React 自身或工程性能优化点?
- python getopt模块_python之getopt模块使用
- gvim 安装 taglist
- java中sql语句怎么把开始和结束时间作为参数写sql查询_聊一聊MyBatis 和 SQL 注入间的恩恩怨怨
- android shell 批量打包,Android执行shell命令打包
- 五、概念数据模型(CDM生成LDM,PDM和OOM)
- vue 时间格式化函数_vue开发记录--通用时间格式函数
- 谈如何边做事,边提高
- data spring 指定时区_听说过spring-data-jdbc么?来个最佳实践
- excel求和为零的解决方法
- 购买学生服务器、备案域名、搭建博客菜鸟级教程
- 【思维导图】Excel转成思维导图
- matlab 棋盘格畸变矫正
- HTTP代理IP的三种使用方法
- 【GlobalMapper精品教程】004:生成标准经纬网图幅(1:100万)案例教程
- 鹤林全集·怡情枫林 | 第二篇——励志创造奇迹
- c 语言 如何设置串口波特率,STC89C52RC串口波特率程序
热门文章
- Can't open /dev/sdb1 exclusively. Mounted files
- R语言实战(第三版)学习笔记-第一章
- 7.对齐输出李明同学的三门课成绩
- 世界各国GDP、人均GDPl国民生产总值1960-2021
- 七牛云「云上法庭」:免去来回奔波苦,公平正义不掉线
- Flutter 中不得不会的 mixin
- Oracle连接工具PLSQL登录时提示初始化失败,无法锁定OCI.dll错误解决
- AUTOSAR工具DaVinci Configurator Pro介绍
- SLAM评测工具EVO常用功能介绍【正在刷夜的李哈哈】
- 机器学习常用概念辨析