如何使用 Flupy 构建数据处理管道

谢乾坤|青南 at 
如何使用 Flupy 构建数据处理管道的配图
经常使用 Linux 的同学,肯定对|这个符号不陌生,这个符号是 Linux 的管道符号,可以把左边的数据传递给右边。例如我有一个 spider.log 文件,我想查看里面包含”ERROR”关键词,同时时间为 2019-11-23 的数据,那么我可以这样写命令:1cat spider.log | grep ERROR | grep "2019-11-23"但是,如果你想执行更复杂的操作,例如提取关键词 fail on: https://xxx.com 后面的这个网址,然后对所有获得的网址进行去重,那么虽然 shell 命令也能办到,但写起来却稍显麻烦。这个时候,你就可以使用 Flupy 来实现……