查看原文
其他

抓取币圈一手信息的两个利器

森淼 风巢 2020-01-07


昨晚在三胖(那个在金拱门域名上1小时赚1万的骚年)群里偶然看到这张截屏,里面这句话“真正区分人与人智识层级的,是我们能够获得的信息的质量。在信息质量的差异面前,解读信息的能力几乎不值一提”,不能更赞同。

之前李笑来“区块链生存指南”群(注:此群现已无法加入)的那些个群友,和身边人并没多大差距。也许就因为群里一次分享中了解到的信息,和身边人拉开几十年差距。其实也不过是掌握信息质量不同而已。

信息质量最重要的一点就是时效性,想想那些高频交易者,同一策略,快 1 毫秒 winner 赚走 100% 收益,loser 什么都没有。

这里给大家分享两个时效信息抓取工具:谷歌快讯Distill


一、谷歌快讯(Google Alerts)

我们经常会关注某一特定领域最新信息,因为发布时间未知,检索常常徒劳无功,有没有简单方案呢,谷歌快讯就是解决这一问题的利器。网址:

https://www.google.com/alerts

拿生成以太坊相关最新信息报表举例:

设置步骤如上图,每个步骤页面下方快讯预览均会给出反馈:

1、输入搜索内容,点击「显示选项」进行设置。

2、频率:分为有新动态、每天一次、每周一次 3 种,默认「有新动态时」。

3、来源:分为以下 8 种,功能顾名思义,根据需要选择,默认「自动」。

4、语言 及 国家/地区 均根据需要选择。

5、数量:建议选择「仅限最佳结果」,否则按上面频率设定通知邮件会塞满你邮箱。

6、发送到:两种选择,此账号绑定的 Gmail 邮箱 或 RSS 订阅,如果想发送到别的邮箱,在 Gmail 里建个过滤器(Filter)即可。

自此,每当抓取到最新信息,会自动发送新闻简报,如下图:


   二、Distill

有时候我们关注某网页,希望当页面 内容发生改变/出现我们需要的信息/满足某特定条件 后立刻得到通知。Distill 就是为此而生。

Distill 是一个网页监控工具,分为网页版(收费)及插件版。官网地址:

https://distill.io

此处只讲述插件版(安装方法)使用方法,此处以为简书专题「区块链研习社」设定收录文章数量改变通知为例,网址:

https://www.jianshu.com/c/b17f09dc2831

流程如上图:

1、在官网 注册账户安装插件 后转到抓取页面。

2、点击图标,点选「选择页面的某些部分」。

3、从页面中选择需监测部分,注意此时右下角会显示出监测文本。

4、我们只关心文章数,不希望关注人数变化产生的通知,此时在下方 Text filter 空格处填入正则表达式收录了[0-9]+篇文章”,按 Tab 切换输入框后监测文本缩短为我们需要监控的部分。

正则表达式是个有趣的问题,随后课程会讲到。

5、点击 「Save selections」 进入如下设置界面:

调整下红框内监测间隔,为规避网站反爬虫机制,我设置的是 5~30 秒内随机抓取。

6、确认后你就可以做自己的事了,Distill 会在后台自动运行,一旦抓取到网页改变,会弹出浏览器及系统通知(见下图)并伴有提示音。


三、学习交流

今天分享的两个工具各有所长,谷歌快讯用于嗅探全网全站信息,Distill 用于网页更新监控。可根据实际需要作出选择。


【福利】

1、爬虫技能微信群  ,回复 社群 了解加入方式,一起切磋,互开脑洞。

2、爬虫学习材料,在线文档,欢迎关注。网址:

https://shimo.im/docs/qc5HJYODsNQJcL6k/ 

3、三胖 一起赚钱 知识星球二维码,通过我的邀请入群你可获得 47.88 元折扣。


您可能对以下文章也感兴趣:


1、时间与概率的游戏——如何设计常胜不输的投资架构

2、不会抓数据还敢来炒币,iost微博热搜抓取实战

3、我的投资原则,以及对于区块链投资的思考


    您可能也对以下帖子感兴趣

    文章有问题?点此查看未经处理的缓存