在硬件更新发展的年代，为了利用多核，Python开始支持多线程。而解决多线程之间数据完整性和状态同步的最简单方法自然就是加锁，由此出现了GIL这把大锁，但是这把锁又反而有着很多不好的方面，是什么呢，我们来探讨下。
本文源自RQ作者的一篇博文，原文是Iterables vs. Iterators vs. Generators。在了解Python的数据结构时，容器(container)、可迭代对象(iterable)、迭代器(iterator)、生成器(generator)、列表/集合/字典推导式(list,set,dict comprehension)众多概念参杂在一起，难免让初学者一头雾水，我将用一篇...
原文出处： MichaelDiBernardo 译文出处：你逗比 这篇文章是对 500 Lines or Less 一书中高效爬虫一章的部分翻译，原文在此 -> How Python Generators Work。建议结合《流畅的 Python》食用。
scrapy中的item其实设计上使用的是面向对象的模式，将爬取的数据字段组合封装，进一步交由管道处理存储，这里对其机制做相关讲解。
python的dict和set设计上是很巧妙的，底层是用c语言编写，哈希表实现，这样确保了高效的数据处理。