分类
摘要:
落笔无事,在网络上的个人博客、论坛逛了大半个月,总结了一些Python库分享(置文末)。
Python网络爬虫
本人前面一篇博文已经说到,如果你想学习Python,那么请先选择网络爬虫,不仅简单实用,还非常有趣,当然最重要的就是挡不住它的资源丰富。
主要分为三大的版块:抓取,分析,存储
查找域名相对应的IP地... 阅读原文
2018-05-13 10:40:05 阅读(761) 评论(0)
摘要:
我们在学习人工智能的时候,会经常用到matplotlib,在学习的时候有一些例子写了代码运行:
import matplotlib.pyplot as plt
import numpy as np
x = np.arange(20)
y = [x_i + np.random.rand(1) for x_i in x... 阅读原文
2018-05-13 09:23:03 阅读(753) 评论(0)
摘要:
---恢复内容开始---
背景
一、前沿
1.1 爬虫是什么?
网络爬虫(又被称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动的抓取万维网信息的程序或者脚本。
1.2 为什么是Python?
简单易学:简单到没有学习过任何编程语言的人稍微看下资料就能编写... 阅读原文
2018-05-13 08:40:10 阅读(977) 评论(0)
摘要:
前言
完善的django项目上线,有很多种上线的方法,比如apache, uwsgi, nginx等。这里只介绍2种,一种是django自带的,另外一种则是nginx + uwsgi完成介绍。这里的系统环境采用的是ubantu系统, python环境采用的是python3, django环境采用1.11
一、自带的... 阅读原文
2018-05-13 07:25:01 阅读(741) 评论(0)
摘要:
论述:
对于我们学习Python的人来说,想要获取到一些自己想要的信息,并没有什么难度。
比如说:哪位老师、同学的电话号码,同学们的考试结果(分数)等联系方式。我们获取到的这些信息,自己知道就算了,千万不能进行曝光,或者用来盈利。甚至有些Pythoner的做法像黑客一样的行为,让人很不齿,爬取考试答案进行曝光盈利... 阅读原文
2018-05-13 06:42:05 阅读(772) 评论(0)
摘要:
那么这个模型和爬虫有什么关系呢?其实,爬虫可以认为是一个生产者,它不断从网站爬取数据,爬取到的数据就是食物;而所得数据需要消费者进行数据清洗,把有用的数据吸收掉,把无用的数据丢弃。
以上便是对生产者消费者模型的简单介绍了,下面针对本次爬取任务予以详细说明。
分析站点
http://www.cfachina.... 阅读原文
2018-05-13 06:14:07 阅读(777) 评论(0)
摘要:
flask快速入门
1.1.三种框架比较
Django: 重武器,内部包含了非常多组件:ORM、Form、ModelForm、缓存、Session、中间件、信号等
Flask:短小精悍,内部没有太多组件,第三方组件非常丰富。路由比较特殊,是基于装饰器来实现,但是本质还是通过add_url_rule来实现的
T... 阅读原文
2018-05-13 06:00:08 阅读(848) 评论(0)
摘要:
一、字典的概念
字典跟列表很像,特别是表达方式通过花括号代替方括号。当然,字典的元素通过左边部分为键右边部分为值通过冒号来分割。
二、字典的创建
dict1 = {'jack': 4098, 'sape': 4139,'yellow':8466} #直接创建dict2 = dict([(... 阅读原文
2018-05-12 23:49:02 阅读(752) 评论(0)
摘要:
DTL
变量 {{ 变量 }},变量里面可以包含 .
标签{% 代码块 %}
过滤器 { { 变量|过滤器 }}
注释{# 代码块或者html都可以被注册 #}
变量
如果变量中含有点:则解析顺序如下
如{{book.id}}:
1. 当做一个字典处理
2. 属性或者方法查询(方法不用带小括号)
3. 当做列表或者... 阅读原文
2018-05-12 23:36:02 阅读(737) 评论(0)
摘要:
Esc:命令行模式
i:插入命令
a:附加命令
o:打开命令
c:修改命令
r:取代命令
s:替换命令
以上进入文本输入模式
: 进入末行模式
末行模式:
w:保存
q:退出,没保存则无法退出
wq:保存并且退出
x:保存退出
q!:强制退出
输入模式时:
i: 插入光标前一个字符
I: 插入行首
a... 阅读原文
2018-05-12 21:52:02 阅读(833) 评论(0)