大數據從哪裏來

爬蟲和數據

一 爲什麼要做爬蟲？

首先請問：都說現在是"大數據時代"，那數據從何而來？

1. 企業產生的用戶數據:

   百度指數：http://index.baidu.com/
   阿里指數：https://alizs.taobao.com/
   TBI騰訊瀏覽指數：http://tbi.tencent.com/
   新浪微博指數：http://data.weibo.com/index

2. 數據平臺購買數據：

   數據堂：http://www.datatang.com/about/about-us.html
   國雲數據市場：http://www.moojnn.com/data-market/
   貴陽大數據交易所：http://trade.gbdex.com/trade.web/index.jsp

3. 政府/機構公開的數據：

   中華人民共和國國家統計局數據：http://data.stats.gov.cn/index.htm
   世界銀行公開數據：http://data.worldbank.org.cn/
   聯合國數據：http://data.un.org/
   納斯達克：http://www.nasdaq.com/zh

4. 數據管理諮詢公司：

   麥肯錫：http://www.mckinsey.com.cn/
   埃森哲：https://www.accenture.com/cn-zh/
   艾瑞諮詢：http://www.iresearch.com.cn/