Python 资源大全中文版
awesome-python 是 vinta 发起维护的 Python 资源列表,内容包括:Web 框架、网络爬虫、网络内容提取、模板引擎、数据库、数据可视化、图片处理、文本处理、自然语言处理、机器学习、日志、代码分析等。由「开源前哨」和「Python开发者」微信公号团队维护更新。
本项目的参与者
注:名单不分排名,不定期补充更新
资源列表
环境管理
管理 Python 版本和环境的工具
包管理
管理包和依赖的工具。
包仓库
本地 PyPI 仓库服务和代理。
分发
打包为可执行文件以便分发。
- PyInstaller:将 Python 程序转换成独立的执行文件(跨平台)。
- cx_Freeze:将python程序转换为带有一个动态链接库的可执行文件。
- dh-virtualenv:构建并将 virtualenv 虚拟环境作为一个 Debian 包来发布。
- Nuitka:将脚本、模块、包编译成可执行文件或扩展模块。
- py2app:将 Python 脚本变为独立软件包(Mac OS X)。
- py2exe:将 Python 脚本变为独立软件包(Windows)。
- pynsist:一个用来创建 Windows 安装程序的工具,可以在安装程序中打包 Python 本身。
- pyarmor:一个用于加密 python 脚本的工具,也可以将加密后的脚本绑定到固件上,或设置已加密脚本的有效期。
- shiv:一个命令行工具,可用于构建完全独立的 zip 应用(PEP 441 所描述的那种),同时包含了所有的依赖项。
构建工具
将源码编译成软件。
交互式解析器
交互式 Python 解析器。
文件
文件管理和 MIME(多用途的网际邮件扩充协议)类型检测。
日期和时间
操作日期和时间的类库。
文本处理
用于解析和操作文本的库。
特殊文本格式处理
一些用来解析和操作特殊文本格式的库。
- 通用
- Office
- Marmir:把输入的 Python 数据结构转换为电子表单。
- openpyxl:一个用来读写 Excel 2010 xlsx/xlsm/xltx/xltm 文件的库。
- pyexcel:一个提供统一 API,用来读写,操作 Excel 文件的库。
- python-docx:读取,查询以及修改 Microsoft Word 2007/2008 docx 文件。
- python-pptx:可用于创建和修改 ppt 文件的 Python 库。
- relatorio:模板化 OpenDocument 文件。
- unoconv:在 LibreOffice/OpenOffice 支持的任意文件格式之间进行转换。
- XlsxWriter:一个用于创建 Excel .xlsx 文件的 Python 模块。
- xlwings:一个使得在 Excel 中方便调用 Python 的库(反之亦然),基于 BSD 协议。
- xlwt / xlrd:读写 Excel 文件的数据和格式信息。
- docxtpl:通过 jinja2 模版编辑 docx 文档。
- PDF
- Markdown
- YAML
- CSV
- Archive
自然语言处理
用来处理人类语言的库。
文档
用以生成项目文档的库。
- Sphinx:Python 文档生成器。
- MkDocs:对 Markdown 友好的文档生成器。
- pdoc:一个可以替换 Epydoc 的库,可以自动生成 Python 库的 API 文档。
- Pycco:文学编程(literate-programming)风格的文档生成器。
- readthedocs:一个基于 Sphinx/MkDocs 的在线文档托管系统,对开源项目免费开放使用。
配置
用来保存和解析配置的库。
命令行工具
用于创建命令行程序的库。
- 命令行程序开发
- 终端呈现方式
- 生产力工具
- 高级 CLI
- httpie:一个命令行 HTTP 客户端,cURL 的替代品,易用性更好。
- iredis:支持自动补全和高亮显示的 redis 命令行工具。
- kube-shell:K8S 命令行集成的 shell 工具。
- litecli:支持自动补全和语法高亮的 SQLite 命令行工具。
- mycli:支持自动补全和语法高亮的 MySQL 命令行客户端
- pgcli:支持自动补全和语法高亮的 Postgres 命令行工具。
- SAWS:一个加强版的 AWS 命令行。
- Shell
- xonsh:一种基于 python 的跨平台,面向 unix 的 shell 语言和命令提示符。
下载器
用来进行下载的库.
- s3cmd:一个用来管理 Amazon S3 和 CloudFront 的命令行工具。
- s4cmd:超级 S3 命令行工具,性能更加强劲。
- you-get:一个 YouTube/Youku/Niconico 视频下载器,使用 Python 3 编写。
- youtube-dl:一个小巧的命令行程序,用来下载 YouTube 视频。
- akshare:为方便人使用而创建的金融数据接口库。
图像处理
用来操作图像的库.
OCR
光学字符识别库。
音频
用来操作音频的库
Video
用来操作视频和 GIF 的库。
地理位置
地理编码地址以及用来处理经纬度的库。
HTTP
使用 HTTP 的库。
- aiohttp:基于 asyncio 的异步 HTTP 网络库。
- requests:人性化的 HTTP 请求库。
- grequests:requests 库 + gevent ,用于异步 HTTP 请求。
- httplib2:全面的 HTTP 客户端库。
- treq:类似 requests 的 Python API 构建于 Twisted HTTP 客户端之上。
- urllib3:一个具有线程安全连接池,支持文件 post,清晰友好的 HTTP 库。
- httpx:下一代 Python HTTP 客户端。
数据库
Python 实现的数据库。
数据库驱动
用来连接和操作数据库的库。
- MySQL:awesome-mysql 系列
- PostgreSQL
- 其他关系型数据库
- apsw:另一个 Python SQLite 封装。
- dataset:在数据库中存储 Python 字典
- pymssql:一个简单的 Microsoft SQL Server 数据库接口。
- NoSQL 数据库
- 异步客户端
- motor:支持 MongoDB 的异步 Python 驱动程序。
ORM
实现对象关系映射或数据映射技术的库。
Web 框架
全栈 Web 框架。
WebSocket
Web socket 相关库。
权限
允许或拒绝用户访问数据或功能的库。
CMS
内容管理系统。
- odoo-cms:一个开源的,企业级 CMS,基于 odoo。
- django-cms:一个开源的,企业级 CMS,基于 Django。
- djedi-cms:一个轻量级但却非常强大的 Django CMS ,考虑到了插件,内联编辑以及性能。
- FeinCMS:基于 Django 构建的最先进的内容管理系统之一。
- Kotti:一个高级的,Python 范的 web 应用框架,基于 Pyramid 构建。
- Mezzanine:一个强大的,持续的,灵活的内容管理平台。
- Opps:一个为杂志,报纸网站以及大流量门户网站设计的 CMS 平台,基于 Django。
- Plone:一个构建于开源应用服务器 Zope 之上的 CMS。
- Quokka:灵活,可扩展的小型 CMS,基于 Flask 和 MongoDB。
- Wagtail:一个 Django 内容管理系统。
- Widgy:最新的 CMS 框架,基于 Django。
- indico:一个功能丰富的事件管理系统,由 @CERN 开发。
电子商务
用于电子商务以及支付的框架和库。
RESTful API
用来开发 RESTful APIs 的库
- Django
- Flask
- Pyramid
- 与框架无关的
- falcon:一个用来建立云 API 和 web app 后端的高性能框架。
- sandman:为现存的数据库驱动系统自动创建 REST APIs 。
- restless:框架无关的 REST 框架 ,基于从 Tastypie 学到的知识。
- ripozo:快速创建 REST/HATEOAS/Hypermedia APIs。
- apistar:专为Python 3设计的智能 Web API 框架。
- fastapi:一个现代,快速,基于标准 Python 类型注解的的 web框架,可使用 Python3.6+ 版本构建 API。
- hug:一个为纯净公开的 API 打造的 Python 3 框架。
- sandman2:为数据库驱动的系统自动生成 REST API。
- vibora:快速高效且支持异步的 Web 框架,灵感来源于 Flask。
验证
实现验证方案的库。
模板引擎
模板生成和词法解析的库和工具。
- Jinja2:一个现代的,对设计师友好的模板引擎。
- Chameleon:一个 HTML/XML 模板引擎。 模仿了 ZPT(Zope Page Templates), 进行了速度上的优化。
- Genshi:Python 模板工具,用以生成 web 感知的结果。
- Mako:Python 平台的超高速轻量级模板。
队列
处理事件以及任务队列的库。
- celery:一个异步任务队列/作业队列,基于分布式消息传递
- daramatiq:适用于Python 3的快速可靠的后台任务处理库。
- huey:小型多线程任务队列。
- mrq:一个 Python 的分布式 worker 任务队列, 使用 Redis 和 gevent。
- rq:简单的 Python 作业队列。
- simpleq:一个简单的,可无限扩张的,基于亚马逊 SQS 的队列。
搜索
对数据进行索引和执行搜索查询的库和软件。
动态消息
用来创建用户活动的库。
Web 资源管理
管理、压缩、缩小网站资源的工具。
缓存
缓存数据的库。
电子邮件
用来发送和解析电子邮件的库。
国际化
用来进行国际化的库。
URL 处理
解析 URLs 的库
- furl:一个让处理 URL 更简单小型 Python 库。
- purl:一个简单的,不可变的 URL 类,具有简洁的 API 来进行询问和处理。
- pyshorteners:一个纯 Python URL 缩短库。
- shorturl:生成短小 URL 和类似 bit.ly 短链的 Python 实现。
- webargs:一个解析 HTTP 请求参数的库,内置对流行 web 框架的支持,包括 Flask, Django, Bottle, Tornado 和 Pyramid。
HTML 处理
处理 HTML 和 XML 的库。
爬取网络站点的库
网页内容提取
用于进行网页内容提取的库。
表单
进行表单操作的库。
数据验证
数据验证库。多用于表单验证。
序列化
复杂数据类型序列化相关库。
反垃圾技术
帮助你和电子垃圾进行战斗的库。
标记
用来进行标记的库。
管理面板
管理界面库。
Serverless 框架
使用 Python 开发 Serverless 模型相关的库。
- python-lambda :在 AWS Lambda 开发和部署 Python 代码的工具包。
- Zappa:在 AWS Lambda 和 API Gateway 部署 WSGI 应用的工具。
静态站点生成器
静态站点生成器是一个软件,它把文本和模板作为输入,然后输出 HTML 文件。
- Pelican:使用 Markdown 或 ReST 来处理内容, Jinja 2 来制作主题。支持 DVCS, Disqus.。AGPL 许可。
- Cactus:为设计师设计的静态站点生成器。
- Hyde:基于 Jinja2 的静态站点生成器。
- Nikola:一个静态网站和博客生成器。
- Tinkerer:Tinkerer 是一个博客引擎/静态站点生成器,由 Sphinx 驱动。
- Lektor:一个简单易用的静态 CMS 和博客引擎。
- makesite:简单轻量的站点/博客生成器(小于 130 行代码)。
进程
操作系统进程启动及通信库。
并发和并行
用以进行并发和并行操作的库。
网络
用于网络编程的库。
- asyncio:(Python 标准库) 异步 I/O,事件循环,协程以及任务。
- trio:异步并发和 I/O 友好的库。
- Twisted:一个事件驱动的网络引擎。
- pulsar:事件驱动的并发框架。
- diesel:基于 Greenlet 的事件 I/O 框架。
- pyzmq:一个 ZeroMQ 消息库的 Python 封装。
- Toapi:一个轻巧,简单,快速的 Flask 库,致力于为所有网站提供 API 服务。
- txZMQ:基于 Twisted 的 ZeroMQ 消息库的 Python 封装。
WebSocket
帮助使用 WebSocket 的库。
WSGI 服务器
兼容 WSGI 的 web 服务器
ASGI 服务器
兼容 ASGI 的 web 服务器。
- daphne:用于 ASGI 和 ASGI-HTTP 的,支持 HTTP,HTTP2 和 WebSocket 协议的服务器。
- uvicorn:使用 uvloop 和 httptools 实现的闪电般快速的 ASGI 服务器。
RPC 服务器
兼容 RPC 的服务器。
密码学
图形用户界面
用来创建图形用户界面程序的库。
- curses:内建的 ncurses 封装,用来创建终端图形用户界面。
- enaml:使用类似 QML 的 Declaratic 语法来创建美观的用户界面。
- kivy:一个用来创建自然用户交互(NUI)应用程序的库,可以运行在 Windows, Linux, Mac OS X, Android 以及 iOS 平台上。
- pyglet:一个 Python 的跨平台窗口及多媒体库。
- PyQt:跨平台用户界面框架 Qt 的 Python 绑定 ,支持 Qt v4 和 Qt v5。
- PySide:跨平台用户界面框架 Qt 的 Python 绑定 ,支持 Qt v4。
- Tkinter:Tkinter 是 Python GUI 的一个事实标准库。
- Toga:一个 Python 原生的,操作系统原生的 GUI 工具包。
- urwid:一个用来创建终端 GUI 应用的库,支持组件,事件和丰富的色彩等。
- wxPython:wxPython 是 wxWidgets C++ 类库和 Python 语言混合的产物。
- PyGObject:GLib/GObject/GIO/GTK+ (GTK+3) 的 Python 绑定。
- Flexx:Flexx 是一个纯 Python 语言编写的用来创建 GUI 程序的工具集,它使用 web 技术进行界面的展示。
- Eel:用于制作简单离线 HTML/JS GUI 应用的库。
- PySimpleGUI:tkinter,Qt,WxPython 和 Remi 的封装。
- pywebview:围绕网页视图组件的轻量级跨平台的原生包装。
- DearPyGui:一个简单的可使用 GPU 加速的 Python GUI 框架。
游戏开发
超赞的游戏开发库。
- Cocos2d:cocos2d 是一个用来开发 2D 游戏, 示例和其他图形/交互应用的框架。基于 pyglet。
- Panda3D:由迪士尼开发的 3D 游戏引擎,并由卡内基梅陇娱乐技术中心负责维护。使用 C++ 编写, 针对 Python 进行了完全的封装。
- Pygame:Pygame 是一组 Python 模块,用来编写游戏。
- PyOgre:Ogre 3D 渲染引擎的 Python 绑定,可以用来开发游戏和仿真程序等任何 3D 应用。
- PyOpenGL:OpenGL 的 Python 绑定及其相关 APIs。
- PySDL2:SDL2 库的封装,基于 ctypes。
- RenPy:一个视觉小说(visual novel)引擎。
- Arcade:一个现代 Python 框架,用于制作具有引人入胜的图形与声音的游戏。
- Harfang3D:支持3D,VR 与游戏开发的 Python 框架。
日志
用来生成和操作日志的库。
测试
进行代码库测试和生成测试数据的库。
- 测试框架
- GUI / Web 测试
- Mock 测试
- mock:(Python 标准库) 一个用于伪造测试的库。
- doublex:Python 的一个功能强大的 doubles 测试框架。
- freezegun:通过伪造日期模块来生成不同的时间。
- httmock:针对 Python 2.6+ 和 3.2+ 生成 伪造请求的库。
- httpretty:Python 的 HTTP 请求 mock 工具。
- responses:伪造 Python 中的 requests 库的一个通用库。
- VCR.py:在你的测试中记录和重放 HTTP 交互。
- mocket:gevent/asyncio/SSL 支持的 socket mock 框架。
- 对象工厂
- factoryboy:一个 Python 用的测试固件 (test fixtures) 替代库。
- mixer:另外一个测试固件 (test fixtures) 替代库,支持 Django, Flask, SQLAlchemy, Peewee 等。
- modelmommy:为 Django 测试创建随机固件。
- 代码覆盖率
- 伪数据
- 错误处理
渗透测试
渗透测试相关框架和工具。
代码分析和 Lint 工具
进行代码分析、解析和操作代码库的库和工具。
调试工具
用来进行代码调试的库。
- 调试器
- ipdb:IPython 启用的 pdb。
- pudb:全屏,基于控制台的 Python 调试器。
- pdb++:另一种 pdb 的替代。
- pyringe:可以在 Python 进程中附加和注入代码的调试器。
- wdb:一个奇异的 web 调试器,通过 WebSockets 工作。
- winpdb:一个具有图形用户界面的 Python 调试器,可以进行远程调试,基于 rpdb2。
追踪器
性能分析器
其他
科学计算和数据分析
用来进行科学计算和数据分析的库。
数据可视化
进行数据可视化的库。 参见:awesome-javascript。
计算机视觉
计算机视觉相关库。
深度学习
神经网络和深度学习相关框架。 也可以参考 awesome-deep-learning。
机器学习
机器学习相关库,也可以参考 awesome-machine-learning。
推荐系统
用于构建推荐系统的相关库。
分布式计算
分布式计算相关的框架和库。
函数式编程
使用 Python 进行函数式编程。
第三方 API
用来访问第三方 API 的库。 参见: List of Python API Wrappers and Libraries。
DevOps 工具
用于 DevOps 的软件和库。
任务调度
任务调度库。
外来函数接口
使用外来函数接口的库。
- cffi:用来调用 C 代码的外来函数接口。
- ctypes:(Python 标准库) 用来调用 C 代码的外来函数接口。
- PyCUDA:Nvidia CUDA API 的封装。
- SWIG:简化的封装和接口生成器。
重构
Python 重构相关库和工具。
高性能
让 Python 更快的库。
- Cython:优化的 Python 静态编译器。使用类型混合使 Python 编译成 C 或 C++ 模块来获得性能的极大提升。
- CLPython:用 Common Lisp 编写的 Python 编程语言的实现。
- Grumpy:编译器比解释器更强大的 cpython2.7 替代品(alpha)。
- IronPython:用 C# 编写的 Python 编程语言的实现。
- Jython:为 JVM 用 Java 编写的 Python 编程语言的实现。
- MicroPython:精简高效的 Python 编程语言实现。
- Pyjion:基于 CoreCLR 的 Python JIT。
- Numba:Python JIT (just in time) 编译器,针对科学用的 Python ,由 Cython 和 NumPy 的开发者开发。
- PeachPy:嵌入 Python 的 x86-64 汇编器。可以被用作 Python 内联的汇编器或者是独立的汇编器,用于 Windows,Linux,OS X,Native Client 或者 Go 。
- PyPy:使用 Python 实现的 Python。解释器使用黑魔法加快 Python 运行速度且不需要加入额外的类型信息。
- Pyston:使用 LLVM 和现代 JIT 技术构建的 Python 实现,目标是为了获得很好的性能。
- Stackless Python:一个强化版的 Python。
微软的 Windows 平台
在 Windows 平台上进行 Python 编程。
网络可视化和 SDN
用来进行网络可视化和 SDN(软件定义网络)的工具和库。
- Mininet:一款流行的网络模拟器以及用 Python 编写的 API。
- POX:一个针对基于 Python 的软件定义网络应用(例如 OpenFlow SDN 控制器)的开源开发平台。
- Pyretic:火热的 SDN 编程语言中的一员,为网络交换机和模拟器提供强大的抽象能力。
- SDX Platform:基于 SDN 的 IXP 实现,影响了 Mininet, POX 和 Pyretic。
- NRU:一个基于组件的软件定义网络框架。
- napalm:可跨供应商 API 来操纵网络设备。
硬件
用来对硬件进行编程的库。
- ino:操作 Arduino 的命令行工具。
- Pyro:Python 机器人编程库。
- PyUserInput:跨平台的,控制鼠标和键盘的模块。
- scapy:一个非常棒的操作数据包的库。
- wifi:一个 Python 库和命令行工具用来在 Linux 平台上操作 WiFi。
- Pingo:Pingo 为类似 Raspberry Pi,pcDuino, Intel Galileo 等设备提供统一的 API 用以编程。
- keyboard:在 Windows 和 Linux 上挂钩并模拟全局键盘事件。
- mouse:在 Windows 和 Linux 上挂钩并模拟全局鼠标事件。
兼容性
帮助从 Python 2 向 Python 3 迁移的库。
算法和设计模式
数据结构、算法和设计模式的 Python 实现。也可以参考 awesome-algorithms 。
内置类的增强版实现
一些 Python 内置类的增强版实现库。
- attrs:一个在类定义时可替换
__init__
, __eq__
, __repr__
等方法的样板。
- bidict:高效的 Pythonic 的双向映射数据结构和相关功能。
- Box:具有高级点符号访问权限的 Python 字典。
- dataclasses:(Python 标准库) 数据类。
- DottedDict:提供一种使用点路径符号访问列表和字典的方法的库。
机器人
机器人相关库。
聊天工具
聊天机器人开发相关的库。
- errbot:实现 ChatOps 的最简单最受欢迎的聊天机器人。
编辑器插件和 IDE
- Emacs
- Sublime Text
- anaconda:Anaconda 可将功能齐全的 Python 开发 IDE 转换为 Sublime Text 3。
- SublimeJEDI:一个很棒的自动补全库 Jedi 的Sublime Text 插件。
- Vim
- Visual Studio
- PTVS:Visual Studio Python 工具。
- Visual Studio Code
- Python:对 Python 有丰富支持的官方 VSCode 扩展。
- IDE
- PyCharm:JetBrains 提供的商业 Python IDE,也有免费的社区版。
- spyder: 开源 Python IDE。
企业级应用集成
企业级环境中用于集成的平台与工具。
- Zato:ESB, SOA, REST, APIs 以及云的 Python 整合。
GraphQL
GraphQL 相关库。
股票金融
- QUANTAXIS:支持任务调度,分布式部署的股票/期货/期权/港股/虚拟货币的数据/回测/模拟/交易/可视化/多账户纯本地量化解决方案
- abu: 基于python的开源量化交易,量化投资架构
- Hikyuu Quant:基于C++/Python的开源量化交易研究框架,用于策略分析及回测(仅受限于数据,如有数据也可用于期货等)
- vnpy:基于Python的开源量化交易系统开发框架,整合了多种交易接口,并针对具体策略算法和功能开发提供了简洁易用的API,用于快速构建交易员所需的量化交易应用
杂项
不属于上面任何一个类别,但是非常有用的库。