分类
摘要:
Scrapy,Python开发的一个快速,高层次的屏幕抓取和web抓取框架,用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛,可以用于数据挖掘、监测和自动化测试。
Scrapy吸引人的地方在于它是一个框架,任何人都可以根据需求方便的修改。它也提供了多种类型爬虫的基类,如BaseSpider、site... 阅读原文
2017-11-12 21:15:04 阅读(811) 评论(0)
摘要:
cookie:
1. `cookie`出现的原因:在网站中,http请求是无状态的。也就是说即使第一次和服务器连接后并且登录成功后,第二次请求服务器依然不能知道当前请求是哪个用户。cookie的出现就是为了解决这个问题,第一次登录后服务器返回一些数据(cookie)给浏览器,然后浏览器保存在本地,当该用户发送第二次请... 阅读原文
2017-11-12 19:41:03 阅读(802) 评论(0)
摘要:
安装flask-sqlalchemy、pymysql模块
pip install flask-sqlalchemy pymysql
### Flask-SQLAlchemy的介绍
1. ORM:Object Relationship Mapping(模型关系映射)。2. flask-sqlalchemy是一套... 阅读原文
2017-11-12 19:02:03 阅读(792) 评论(0)
摘要:
AlphaGo,每个实验1000个节点,每个节点4个GPU,4000 GPU。Siri,每个实验2个节点,8个GPU。AI研究,依赖海量数据计算,离性能计算资源。更大集群运行模型,把周级训练时间缩短到天级小时级。Kubernetes,应用最广泛容器集群管理工具,分布式TensorFlow监控、调度生命周期管理。容器集... 阅读原文
2017-11-12 17:39:01 阅读(771) 评论(0)
摘要:
1. 什么是进程?
进程(Process)是计算机中的程序关于某数据集合上的一次运行活动,是系统进行资源分配和调度的基本单位,是操作系统结构的基础。在早期面向进程设计的计算机结构中,进程是程序的基本执行实体;在当代面向线程设计的计算机结构中,进程是线程的容器。
一个进程至少包含一个线程。
2. 在python中有... 阅读原文
2017-11-12 16:56:03 阅读(816) 评论(0)
摘要:
浅拷贝 shallow copy 和深拷贝 deep copy
list.copy() 浅拷贝:复制此列表(只复制一层,不会复制深层对象) 等同于 L[:]
举例:
浅拷贝:
a = [1.1, 2.2] # a = [1.1, 2.2] b = [1, 2, a] # b = [1, 2, [1.1,... 阅读原文
2017-11-12 15:16:03 阅读(862) 评论(0)
摘要:
1》Socket相关:
1>Socket Families(地址簇):
socket.AF_UNIX 本机进程间通信
socket.AF_INET IPV4
socket.AF_INET6 IPV6
2&... 阅读原文
2017-11-12 06:00:05 阅读(787) 评论(0)
摘要:
下面是转发博客内容,挺有用的
大家好哈,现在呢静觅博客已经两年多啦,可能大家过来更多看到的是爬虫方面的博文,首先非常感谢大家的支持,希望我的博文对大家有帮助!
之前我写了一些Python爬虫方面的文章,Python爬虫学习系列教程,涉及到了基础和进阶的一些内容,当时更多用到的是Urllib还有正则,后来又陆续增加了一... 阅读原文
2017-11-11 23:40:01 阅读(813) 评论(0)
摘要:
1.创建project
django-admin.py startproject myblog
2.创建app
python manage.py startapp blog
3. 创建数据库表 或 更改数据库表或字段
Python manage.py makemigrations blog
Python manage... 阅读原文
2017-11-11 21:01:02 阅读(817) 评论(0)
摘要:
在Python set是基本数据类型的一种集合类型,它有可变集合(set())和不可变集合(frozenset)两种。创建集合set、集合set添加、集合删除、交集、并集、差集的操作都是非常实用的方法。
python的set和其他语言类似, 是一个无序不重复元素集, 基本功能包括关系测试和消除重复元素. 集合对... 阅读原文
2017-11-11 18:42:05 阅读(778) 评论(0)