–原创，转载请注明来源—
特别喜欢搜集信息，成为我的日常。经过十几年的信息搜集体会，发现信息其实分不同等级，刚开始我在最下面两个信息层次，慢慢的我获取的信息更高效更直接更一手，才发现信息其实是有层次。这些层次也导致了大家的信息差，但是一旦入门其实没有特别难的事情。
不为人知的信息的金字塔结构
大概分成这样的信息金字塔，大部分人其实连塔基都算不上，因为很多人的信息源不全，知道的信息都是落后的二手的。对工作更有用的是倒数第二部分，这些数据和报告可以用来帮助工作。上面的层次的信息更专业和渠道很特殊，但是也可以努力加入到对应的微信群和人脉里。加入就不是问题，有时候有创业者问如何找到投资，我可以给你投资list，但是不如我告诉你，你认识我就可以了（比如）。你认识一个投资人，大概率就 认识了这个圈子，那么推荐合适的项目就不是问题。
对这些信息源的每一层次的解读
举例了下，每个层次的信息如何获得，其中大部分我在知乎都回答过，下面我给每个层次的获取方法一些链接，能帮助到大家。
8，大家都看得到的新闻：
- 除了常规新闻，关注的维度要多元，比如新闻网站，微信增加到6000个联系人（上限），这样刷朋友圈你可以更快的获得很多消息；比如关注知乎2000个大v，可以获得更多 的知识信息来源。
7，需要来源能知道的报告
- 我总结了大概十个找到对应报告的有效的可靠的信息源。
- 如何高效的使用搜索引擎，也是非常有用的来源。怎么找到关键词，怎么满足更广泛的需求，是可以锻炼的能力。
6，数据来源可以调研的报告信息
- 找咨询公司合作，或者自己出预算，可以通过线上和线下实际调研，还原商业原貌，这里可以参考瑞幸的做空报告。
5，爬虫可以得到的数据
通过爬虫可以获得很多网站和你想要了解的商业的数据，从而获得认知和信息。
4，高端专家访谈
在行大概五年多了，很多人咨询企业和行业问题，专家自己首先有很多的总结，其次会把过去十年对内容的观察，对行业的生态的观察在1-2个小时内和人沟通清楚和给到建议，所以这些都是更高效的获取的方式。
另外有一些专家咨询平台，通过电话付费方式，可以快速联系到一些你想要了解行业的专家，进行访谈，知无不言。这样不管是投资进入一个领域，要创业进入一个领域，要职业转型进入一个领域都可以很快的有个了解。
除了一些平台之外，如果自己积累一些人脉，也可以快速找人问下，这样能更高效的帮助你理解和学习信息。
3，知情人群内幕
很多事情你知道就是知道，不知道就是不知道。如果你进入一些圈子，你可以很快的获得一些行业内的信息和更快的和信息进行连接。这里鼓励大家都加入一些自己垂直类的优质的活跃的社群，然后通过线上和线下建立私域流量信息。很多就可以获得更一线的内幕和更确切的消息。
再比如，不知道大家看没看过长安十二时辰，这个电视剧里给我印象最深刻的就是大家安插在不同团队中的暗桩。可以在公司内部安插自己的暗桩获得更一线的信息，也可以在其他公司安插，这样获得信息更动态和直接。这个也是门操作方法。
2，福尔摩斯
有这样一群人，比如一些财经记者，或者做媒体的一些分析师，比如自媒体那个账号：latest晚点等等。首先他们在信息源上基本到了层次3也就是在不同公司有暗桩，他们获取的信息，都是很顶级的，不是一般员工可以提供的，另外他们有分析和判断的能力，可以综合前后的很多线索从而推敲出答案。
1，某些人
在获取信息和获取道路上进阶的过程中，在寻找不管是信息还是创业者，亦或是寻找投资人的过程中，我发现最有效的方式，还是能找到一个关键人，这个关键人他知道所有的信息，一手的，直接的，内幕的，全面的，然后还能提供分析，这样你找到他，也就获得了顶级的信息，然后辅佐以自己找到的信息，你更高效一些。
用python或者Go写爬虫抓取网络数据，利用正则表达式等技术手段将脏数据清洗并结构化放入到数据库，然后作分析以及长期监控。
所谓爬虫当然不是下图的虫子
而是这样的虫子，其实就是一套自动读取网页和解析网页的程序而已。
网络上的数据越来越多，越来越能代表生活中的真实现象。通过爬虫加正则这种自动化的工具，能够耗很少的人工就可以将数据和信息采集并结构化，后续通过更多的分析工具完成许多有商业价值的分析并获取所谓的insight（将信息转化为知识和洞察）。
我曾经看到一个知名对冲基金的研究员，一页一页得手工翻看搜房的网站，并用Ctrl C+Ctrl V记录搜房所有自有经纪人的信息到Excel，并统计他们当前的成交量。然后每周做一次，查看每个经纪人的成交量增量。通过这样的数据分析来判断搜房转型到自由经纪人业务之后，模式是否成功。因为工作量实在巨大，后来只好请了一票实习生来做。
然而其实这就是一个程序员用Python做好爬虫以及结构化数据最后分析的简单事情，于是出手相助有了如下的分析。轻松将搜房在各个城市的经纪人数量及单产搞清楚并按时监督，计算搜房在自有经纪人业务线的产出不是问题。
http://xueqiu.com/3917381252/45640644
另外，还有基金在投资挂号网之前，让着帮忙做些数据统计和调研，于是有了下面的回答：
。下面的图表结合了从挂号网抓取的数据以及宏观数据。
当然，给基金干活，数据的可视化很重要，于是用了一下这个服务
，将图表画得很炫，逼格顿时提高。一些炫目图标的效果如下，原文在世界各国的智商分布（
http://wentu.io/publish#fd5da46583e2c60f
），
以及
：
还可做许多比较酷的事情，获取许多人不知道的知识（其实别人离得到这些知识也就差一层窗户纸），帮助自己观察生活及背后的现象
- 看看咖啡的推广到底如何：为什么麦当劳和肯德基都开始注重现磨咖啡的推广，其优势与星巴克等传统咖啡行业相比在哪里？ – 何明科的回答
- 帮助自己买车：一年当中买车的最佳时间为何时？ – 何明科的回答
- 看看最近是否适合换工作：互联网行业哪个职位比较有前途？ – 数据冰山 – 知乎专栏
- 看看最近的房价和走势：下半年深圳房价将如何发展 – 数据冰山 – 知乎专栏,深圳的房价是在三个月内暴涨起来的吗？ – 数据冰山 – 知乎专栏, 学区房到底闹哪样？ – 数据冰山 – 知乎专栏
- 满足吃货的好奇心：重庆小面如何风靡全国的 – 数据冰山 – 知乎专栏
- 最后的大杂烩：能利用爬虫技术做到哪些很酷很有趣很有用的事情？ – 何明科的回答
技术方面，Python写爬虫非常方便，调试正则这个网站很不错
Online regex tester and debugger: JavaScript, Python, PHP, and PCRE
。
最后补充一个额外的获取信息和知识的方式，不过这个比较个案，就不多说。
—————————————————————————————————————
更多文章及分享请关注我的专栏，数据冰山：
http://zhuanlan.zhihu.com/hemingke
