第6章 打字机（1/2）

陈一然並没有听话的去睡午觉，他有种感觉睡下去再睁眼就得第二天了。

从冰箱里拿出个冰可乐直接放到额头上，颇有点热血的在脑中说：“来，继续，扬名立万就靠你了。”

【好吧，打开 textwrangler。新建文件，保存为 scraper.py。】

陈一然照做了。

【把手放在键盘上。】

他深呼吸了一下，把手放上去。

然后他的手指开始动了。

脑中一行行的文字，陈一然把自己变成了打字机器。

手指在键盘上飞快地跳动，一行行代码出现在屏幕上。

from urllib2 import urlopen from beautifulsoup import beautifulsoup import re import json import threading import queue import time import sys

def init(self, url, depth=1): self.url = url self.depth = depth self.results = [] self.visited = set()

陈一然的好状態只持续了一会，就开始手酸，还好每次打错茉莉都能及时提醒。

就这样磨磨唧唧了 3 个小时，陈一然感觉头都快炸了，茉莉终於发话了。

大约两个小时后，茉莉说：【停。看一下屏幕。】

陈一然把手从键盘上拿开，甩了甩手腕。

屏幕上大概是三百行代码。

“我完全看不懂。”

本书首发 读小说选 101 看书网，101??????.??????超省心 ,提供给你无错章节，无乱序章节的阅读体验

【运行一下。打开终端，输入 python scraper.py ，然后回车。】

陈一然打开终端，照著打了，回车。

屏幕上开始输出文字，一行一行，很快。

url: title: example domain links found: 1 headings: h1 - example domain text content: this domain is for use in illustrative examples...

过了大约十秒，输出停了。

done. scraped 1 page(s) in 8.3 seconds.

茉莉：【能跑。继续加功能。】

接下来的 3 个小时，陈一然又变成了一台打字机。

茉莉把代码通过他的手指一行行输出。

中间陈一然饿的不行，又点了个棒约翰，这家是陈一然最爱的披萨店。

宜家也把家具送了过来，其实为了可以不装家具，陈一然买的都是简单的。

半个小时装家具，陈一然都觉得算是休息了，比双手闷头打字舒服。

就这样磨磨唧唧到晚上九点的时候，scraper.py 已经从三百行变成了將近六百行。茉莉加了並发抓取、错误处理、自动跟隨连结、数据导出功能，还写了一个命令行界面。

【再测试一次 python scraper.py 。这次写一个真实网站。】

陈一然在终端里输入了 cnn 官网的地址，回车。

屏幕上飞速滚动著输出。url、標题、正文摘要、发布时间、图片连结…… 各种信息被自动提取出来，排列得整整齐齐。

done. scraped 47 page(s) in 2 minutes 14 seconds.

陈一然盯著那行字。

47 个页面，2 分 14 秒。

【工具完成。】

陈一然的后脑勺比早上更热了。

茉莉：【大脑在高负荷运转时產热增加，你的体温调节系统正在工作，不是生病。】

“你这得確定吗，还好后天才上课，明天上课我肯定顶不住。”

【放心，你上辈子看了足够多的医学纪录片，我是专业的。】

陈一然去冰箱拿了瓶水，一口气喝了半瓶。

茉莉：【我想把这个工具放到网上，github 你应该记得吧。】