分类
摘要:
python 为什么不能利用多核CPUGIL:
(1)其实是因为在python中有一个GIL(Global Interpreter Lock),中文为:全局解释器锁。
1、是最开始python为了数据安全设计了这个GIL。
2、每个CPU在同一时间只能执行一个线程:
(在单核CPU下的多线程其实都只是并发,不是并行,... 阅读原文
2018-05-31 08:28:01 阅读(995) 评论(0)
摘要:
ChromeDriver设置headless参数就会出现未知错误,,非得设置参数--no-sandbox;原因待查,找了好久,供参考.
cited from stackoverflow
I was having the same problem on centos7.1 because I was the... 阅读原文
2018-05-31 07:48:01 阅读(1010) 评论(0)
摘要:
需要学习的朋友可以通过网盘下载pdf版 http://tadown.com/fs/3yi6be0ns6hude671/djano介绍Django 是从真实世界的应用中成长起来的,它是由 堪萨斯(Kansas)州 Lawrence 城中的一个 网络开发小组编写的。 它诞生于 2003 年秋天,那时 Lawrence ... 阅读原文
2018-05-31 07:42:01 阅读(963) 评论(0)
摘要:
一、time模块
time() 返回时间戳 相对于1970.1.1 00:00:00 是唯一的
ctime() 将时间戳转化为字符串
二、sys
用于对解释器的访问以及维护
sys.argv 传参,argv[0]表示脚本名称
sys.path 模... 阅读原文
2018-05-31 06:06:02 阅读(911) 评论(0)
摘要:
“Don’t think of the overwhelming majority of the impossible.”
“不要去想不可能之事”
“Grew up your bliss and the world.”
“努力赢得自己的幸福和世界”
“what we would end create, creates... 阅读原文
2018-05-31 06:00:16 阅读(1600) 评论(0)
摘要:
深入探讨 Python 的 for 循环来看看它们在底层如何工作,以及为什么它们会按照它们的方式工作。
Python 的 for 循环不会像其他语言中的 for 循环那样工作。在这篇文章中,我们将深入探讨 Python 的 for 循环来看看它们在底层如何工作,以及为什么它们会按照它们的方式工作。
循环的问题
我... 阅读原文
2018-05-31 00:54:02 阅读(893) 评论(0)
摘要:
1.xlrd读取excel
请参考上篇博客https://www.cnblogs.com/shapeL/p/9075843.html
2.xlwt生成excel
安装下载:pip install xlwt
导入:import xlwt
参考:
生成excel文件test1.xls
file_name = '../d... 阅读原文
2018-05-30 22:59:02 阅读(1027) 评论(0)
摘要:
其实,新浪微博用户图片爬虫是我学习python以来写的第一个爬虫,只不过当时懒,后来爬完Lofter后觉得有必要总结一下,所以就有了第一篇爬虫博客。现在暂时闲下来了,准备把新浪的这个也补上。
言归正传,既然选择爬新浪微博,那当然是有需求的,这也是学习的主要动力之一,没错,就是美图。sina用户多数微博都是包含图片的,... 阅读原文
2018-05-30 21:03:08 阅读(947) 评论(0)
摘要:
scrapy作为一款强大的爬虫框架,当然要好好学习一番,本文便是本人学习和使用scrapy过后的一个总结,内容比较基础,算是入门笔记吧,主要讲述scrapy的基本概念和使用方法。
需要说明的是,项目管道( Item Pipeline )主要完成数据清洗,验证,持久化存储等工作;下载器中间件( Down... 阅读原文
2018-05-30 20:59:03 阅读(997) 评论(0)
摘要:
一、python 环境搭建
本章节我们将向大家介绍如何在本地搭建Python开发环境。Python可应用于多平台包括 Linux 和 Mac OS X。你可以通过终端窗口输入 "python" 命令来查看本地是否已经安装Python以及Python的安装版本。
二、python 下载
... 阅读原文
2018-05-30 20:05:08 阅读(938) 评论(0)