分类
摘要：
用scrapy只创建一个项目，创建多个spider，每个spider指定items,pipelines.启动爬虫时只写一个启动脚本就可以全部同时启动。
本文代码已上传至github,链接在文未。
一，创建多个spider的scrapy项目
scrapy startproject mymultispider
... 阅读原文
2020-02-27 15:41:05 阅读(2408) 评论(0)
摘要：
成功例子如下图：
1、前言
在做 django 开发需求时，多多少少都会遇到需要定时任务的功能，比如定时执行任务，检查订单之类的。可能是一段时间，比如每隔 10分钟执行一次，也可能是定点时间，比如 14:00 执行，也可能是长时间，比如每周几，每个月的哪一天等。查看了一下相关资料， django ... 阅读原文
2020-02-27 14:28:02 阅读(2388) 评论(0)
摘要：
在python中使用最多的除了 print函数 就是 for循环 了，那么这里就不得不介绍一下python内置函数range函数！
一.range函数简介
python range函数可创建一个整数列表，一般用在 for 循环中，语法如下：
range(start, stop, st... 阅读原文
2020-02-27 14:05:06 阅读(2380) 评论(0)
摘要：
Sublime，一般说的是Sublime Text, 最新的是Sublime Text 3，
是一个轻量、简洁、高效、跨平台的文本编辑器。
Sublime对Python支持非常好，如果只是简单的编写批处理脚本编写，
或者小范围修改复杂代码等，首选用Sublime。
优势
跨平台通用，Windows/Ubun... 阅读原文
2020-02-27 13:46:05 阅读(2616) 评论(0)
摘要：
TCP协议与UDP协议
TCP（transport control protocol，传输控制协议）是面向连接的，面向流的，提供高可靠性服务。收发两端（客户端和服务器端）都要有一一成对的socket，因此，发送端为了将多个发往接收端的包，更有效的发到对方，使用了优化方法（Nagle算法），将多次间隔较小且... 阅读原文
2020-02-27 12:52:02 阅读(2616) 评论(0)
摘要：
在python当中很多时候会用到这三个函数，这也是考试当中十分常见的考点，这里做一些记录：
1.len():用于测量变量当中的字符串/元组等的长度
举个例子：
>>> stt="great"
>>> len(stt)
5
>>> er=[1,2,3,4,... 阅读原文
2020-02-27 12:41:05 阅读(2377) 评论(0)
摘要：
之前一段时间学习了线性回归，逻辑回归，支持向量机和朴素贝叶斯几个机器学习的算法，并用kaggle的泰坦尼克号问题做了实操。
我很早就想学习机器学习了，因为是非专业人士，一直畏难没有开始学习。拜疫情“所赐”，终于开始动手了。几个算法学下来，感觉并没有我想象那么难，当然那些数学推导我很多都没有看懂，但关键是知道每... 阅读原文
2020-02-27 11:01:06 阅读(2407) 评论(0)
摘要：
目录
WatchAD介绍
安装环境
WatchAD安装（日志分析端服务）
基础环境配置
安装WatchAD
运行WatchAD
WatchAD-web安装（Web监控端... 阅读原文
2020-02-27 09:40:03 阅读(2369) 评论(0)
摘要：
Python性能优化方案
从编码方面入手，代码算法优化，如多重条件判断有限判断先决条件(可看 《改进python的91个建议》)
使用Cython (核心算法, 对性能要求较大的建议使用Cython编写) 是python & c++的结合, 性能有数量级的提升
使用ast抽象语法树 根据python... 阅读原文
2020-02-27 08:36:04 阅读(2463) 评论(0)
摘要：
参考:https://blog.csdn.net/qian99/article/details/77916806
数据载入和清洗跟前面文章一样的。
进行朴素贝叶斯模型建模
features = ['Pclass', 'Sex', 'Age', 'Family', 'Embarked', 'Cabin']
mo... 阅读原文
2020-02-27 06:00:26 阅读(2218) 评论(0)