Resource collection
pip install requests selenium beautifulsoup4 pyquery pymysql pymongo redis flask django jupyter
一个非常著名的HTTP库,用来替代python的标准库urllib
requests相关文档: http://docs.python-requests.org/zh_CN/latest/user/quickstart.html
用来模拟用户在浏览器中的一些交互行为,以默认浏览器为chrome浏览器为例,需要配套安装chromedriver插件
selenium相关文档:https://selenium-python.readthedocs.io/
Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式.
beautifulsoup相关文档:https://www.crummy.com/software/BeautifulSoup/bs4/doc/index.zh.html pyquery相当于jQuery的python实现,可以用于解析HTML网页等。它的语法与jQuery几乎完全相同,对于使用过jQuery的人来说很熟悉,也很好上手。
pyquery相关文档:https://pythonhosted.org/pyquery/
一个比较方便的连接mysql使用的python库
pymysql相关文档:https://pymysql.readthedocs.io/en/latest/user/examples.html
一个比较方便的连接mongoDB使用的python库
pymongo相关文档:http://api.mongodb.com/python/current/tutorial.html
一个比较方便的连接redis使用的python库
redis相关文档:https://pypi.python.org/pypi/redis
Flask是一个使用Python编写的轻量级Web应用框架。基于Werkzeug WSGI(PythonWeb服务器网关接口(Python Web Server Gateway Interface,缩写为WSGI)是Python应用程序或框架和Web服务器之间的一种接口,已经被广泛接受, 它已基本达成它的可移植性方面的目标)工具箱和Jinja2 模板引擎。 Flask使用BSD授权。 Flask也被称为“microframework”,因为它使用简单的核心,用extension增加其他功能。Flask没有默认使用的数据库、窗体验证工具。然而,Flask保留了扩增的弹性,可以用Flask-extension加入这些功能:ORM、窗体验证工具、文件上传、各种开放式身份验证技术。
flask相关文档:http://docs.jinkan.org/docs/flask/
Django是一个高级Python Web框架, 鼓励快速,简洁, 以程序设计的**进行开发. 通过使用这个框架, 可以减少很多开发麻烦, 使你更专注于编写自己的app, 而不需要重复造轮子. Django免费并且开源. django相关文档:http://usyiyi.cn/translate/django_182/index.html
提供了网页编辑器,可以在网页中运行你写的python程序
jupyter相关文档:http://codingpy.com/article/getting-started-with-jupyter-notebook-part-1/