摘要: python 为什么不能利用多核CPUGIL: (1)其实是因为在python中有一个GIL(Global Interpreter Lock),中文为:全局解释器锁。 1、是最开始python为了数据安全设计了这个GIL。 2、每个CPU在同一时间只能执行一个线程: (在单核CPU下的多线程其实都只是并发,不是并行,... 阅读原文
2018-05-31 08:28:01 阅读(995) 评论(0)
摘要: ChromeDriver设置headless参数就会出现未知错误,,非得设置参数--no-sandbox;原因待查,找了好久,供参考.   cited from stackoverflow I was having the same problem on centos7.1 because I was the... 阅读原文
2018-05-31 07:48:01 阅读(1010) 评论(0)
摘要: 需要学习的朋友可以通过网盘下载pdf版 http://tadown.com/fs/3yi6be0ns6hude671/djano介绍Django 是从真实世界的应用中成长起来的,它是由 堪萨斯(Kansas)州 Lawrence 城中的一个 网络开发小组编写的。 它诞生于 2003 年秋天,那时 Lawrence ... 阅读原文
2018-05-31 07:42:01 阅读(963) 评论(0)
摘要: 一、time模块           time()    返回时间戳 相对于1970.1.1 00:00:00 是唯一的   ctime()  将时间戳转化为字符串         二、sys   用于对解释器的访问以及维护     sys.argv  传参,argv[0]表示脚本名称     sys.path  模... 阅读原文
2018-05-31 06:06:02 阅读(911) 评论(0)
摘要: “Don’t think of the overwhelming majority of the impossible.” “不要去想不可能之事” “Grew up your bliss and the world.” “努力赢得自己的幸福和世界” “what we would end create, creates... 阅读原文
2018-05-31 06:00:16 阅读(1600) 评论(0)
摘要: 深入探讨 Python 的 for 循环来看看它们在底层如何工作,以及为什么它们会按照它们的方式工作。 Python 的 for 循环不会像其他语言中的 for 循环那样工作。在这篇文章中,我们将深入探讨 Python 的 for 循环来看看它们在底层如何工作,以及为什么它们会按照它们的方式工作。 循环的问题 我... 阅读原文
2018-05-31 00:54:02 阅读(893) 评论(0)
摘要: 1.xlrd读取excel 请参考上篇博客https://www.cnblogs.com/shapeL/p/9075843.html 2.xlwt生成excel 安装下载:pip install xlwt 导入:import xlwt 参考: 生成excel文件test1.xls file_name = '../d... 阅读原文
2018-05-30 22:59:02 阅读(1027) 评论(0)
摘要: 其实,新浪微博用户图片爬虫是我学习python以来写的第一个爬虫,只不过当时懒,后来爬完Lofter后觉得有必要总结一下,所以就有了第一篇爬虫博客。现在暂时闲下来了,准备把新浪的这个也补上。 言归正传,既然选择爬新浪微博,那当然是有需求的,这也是学习的主要动力之一,没错,就是美图。sina用户多数微博都是包含图片的,... 阅读原文
2018-05-30 21:03:08 阅读(947) 评论(0)
摘要: scrapy作为一款强大的爬虫框架,当然要好好学习一番,本文便是本人学习和使用scrapy过后的一个总结,内容比较基础,算是入门笔记吧,主要讲述scrapy的基本概念和使用方法。     需要说明的是,项目管道( Item Pipeline )主要完成数据清洗,验证,持久化存储等工作;下载器中间件( Down... 阅读原文
2018-05-30 20:59:03 阅读(997) 评论(0)
摘要:  一、python 环境搭建        本章节我们将向大家介绍如何在本地搭建Python开发环境。Python可应用于多平台包括 Linux 和 Mac OS X。你可以通过终端窗口输入 "python" 命令来查看本地是否已经安装Python以及Python的安装版本。 二、python 下载         ... 阅读原文
2018-05-30 20:05:08 阅读(938) 评论(0)