发表于 | 更新于 | 分类于 | 评论数：

这里记录一些必要的 HTTP 知识。不过似乎从上句话开始就离题了。 HTTP 协议简介HTTP 是超文本传输协议（HyperText Transfer Protocol）的缩写。它是基于 TCP 的连接方式。 HTTP url 在下面记录。HTTP 请求由三部分组成：请求行，请求报头，请求正文。 ...

阅读全文 »

发表于 | 更新于 | 分类于 | 评论数：

从写出的第一个网络爬虫到现在，已有半年。 使用过 urllib，学过 requests，速成过 aiohttp，到现在入门的 scrapy。从必备的 get，到使用 post，理解了 query string parameters，知道了 form data，涉猎了 csrf，亦看过各种 respo ...

阅读全文 »

发表于 | 更新于 | 分类于 | 评论数：

二月中旬以来一直在看 Python 协程方面的东东（或者说是使用 aiohttp 这个异步库写个爬虫）。上周末，终于写出了一个差强人意的版本。就在这里写一写自己的心得。 async / await这在 Python 的协程中无足轻重。而我在二月份写的几篇博文却是专为这做的前序。一个月前我还对他们一窍 ...

阅读全文 »

发表于 | 更新于 | 分类于 | 评论数：

yield是 Python 关键字之一，用于创建一个生成器（Generator）。生成器是迭代器（Iterator）的一种。这里将会记录一些关于生成器与迭代器的东西。 迭代器迭代器是访问集合内元素的一种方式。迭代器对象从集合的第一个元素开始访问，直到所有的元素都被访问一遍后结束。 迭代器不能回退，只 ...

阅读全文 »

发表于 | 更新于 | 分类于 | 评论数：

Python 函数那些事的后续之一：这里记录一些关于 Python 作用域和命名空间、闭包、装饰器的东西。 Python作用域和命名空间命名空间是从命名到对象的集合。Python 使用它来记录变量的轨迹。当前命名空间主要是通过 Python 字典实现的。关于命名空间需要了解的一件很重要的事情就是不同 ...

阅读全文 »

发表于 | 更新于 | 分类于 | 评论数：

Python 中使用def语句定义的函数，除了非常简单之外，灵活度还非常大。在这里记录一些关于 Python 函数的东东。 函数的参数函数的参数有这么几种：位置参数、默认参数、可变参数、关键字参数、命名关键字参数。 先看看位置参数。 # 一个计算x平方的函数def power(x): retu ...

阅读全文 »

发表于 | 更新于 | 分类于 | 评论数：

这里总(抄）结（袭）一些关于单线程、多线程与多进程，阻塞、非阻塞，同步、异步，协程的东西。 线程与进程现代操作系统都是支持“多任务”的操作系统。什么是多任务呢？打个比方：一边在用浏览器上网，一边在听MP3，一边在用Word赶作业，这就是多任务。过去CPU即使是单核，也可以执行多任务：操作系统让各个任 ...

阅读全文 »