摘要: Scrapy,Python开发的一个快速,高层次的屏幕抓取和web抓取框架,用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛,可以用于数据挖掘、监测和自动化测试。 Scrapy吸引人的地方在于它是一个框架,任何人都可以根据需求方便的修改。它也提供了多种类型爬虫的基类,如BaseSpider、site... 阅读原文
2017-11-12 21:15:04 阅读(811) 评论(0)
摘要: cookie: 1. `cookie`出现的原因:在网站中,http请求是无状态的。也就是说即使第一次和服务器连接后并且登录成功后,第二次请求服务器依然不能知道当前请求是哪个用户。cookie的出现就是为了解决这个问题,第一次登录后服务器返回一些数据(cookie)给浏览器,然后浏览器保存在本地,当该用户发送第二次请... 阅读原文
2017-11-12 19:41:03 阅读(802) 评论(0)
摘要: 安装flask-sqlalchemy、pymysql模块 pip install flask-sqlalchemy pymysql  ### Flask-SQLAlchemy的介绍 1. ORM:Object Relationship Mapping(模型关系映射)。2. flask-sqlalchemy是一套... 阅读原文
2017-11-12 19:02:03 阅读(792) 评论(0)
摘要: AlphaGo,每个实验1000个节点,每个节点4个GPU,4000 GPU。Siri,每个实验2个节点,8个GPU。AI研究,依赖海量数据计算,离性能计算资源。更大集群运行模型,把周级训练时间缩短到天级小时级。Kubernetes,应用最广泛容器集群管理工具,分布式TensorFlow监控、调度生命周期管理。容器集... 阅读原文
2017-11-12 17:39:01 阅读(771) 评论(0)
摘要: 1. 什么是进程?   进程(Process)是计算机中的程序关于某数据集合上的一次运行活动,是系统进行资源分配和调度的基本单位,是操作系统结构的基础。在早期面向进程设计的计算机结构中,进程是程序的基本执行实体;在当代面向线程设计的计算机结构中,进程是线程的容器。 一个进程至少包含一个线程。 2. 在python中有... 阅读原文
2017-11-12 16:56:03 阅读(816) 评论(0)
摘要: 浅拷贝 shallow copy 和深拷贝 deep copy list.copy() 浅拷贝:复制此列表(只复制一层,不会复制深层对象) 等同于 L[:] 举例: 浅拷贝:   a = [1.1, 2.2]   # a = [1.1, 2.2]  b = [1, 2, a]   # b = [1, 2, [1.1,... 阅读原文
2017-11-12 15:16:03 阅读(862) 评论(0)
摘要: 1》Socket相关:       1>Socket   Families(地址簇):           socket.AF_UNIX     本机进程间通信           socket.AF_INET   IPV4            socket.AF_INET6   IPV6        2&... 阅读原文
2017-11-12 06:00:05 阅读(787) 评论(0)
摘要: 下面是转发博客内容,挺有用的 大家好哈,现在呢静觅博客已经两年多啦,可能大家过来更多看到的是爬虫方面的博文,首先非常感谢大家的支持,希望我的博文对大家有帮助! 之前我写了一些Python爬虫方面的文章,Python爬虫学习系列教程,涉及到了基础和进阶的一些内容,当时更多用到的是Urllib还有正则,后来又陆续增加了一... 阅读原文
2017-11-11 23:40:01 阅读(814) 评论(0)
摘要: 1.创建project django-admin.py startproject myblog 2.创建app python manage.py startapp blog 3. 创建数据库表 或 更改数据库表或字段 Python manage.py makemigrations blog Python manage... 阅读原文
2017-11-11 21:01:02 阅读(817) 评论(0)
摘要:   在Python set是基本数据类型的一种集合类型,它有可变集合(set())和不可变集合(frozenset)两种。创建集合set、集合set添加、集合删除、交集、并集、差集的操作都是非常实用的方法。 python的set和其他语言类似, 是一个无序不重复元素集, 基本功能包括关系测试和消除重复元素. 集合对... 阅读原文
2017-11-11 18:42:05 阅读(778) 评论(0)