首页 首页 大数据 查看内容

分享:20个公开的大数据资源

木马童年 2019-8-14 09:25 149 0

我总是在证明这样一个论点,即数据无处不在——并且很多都是免费的。在开始大数据分析之前,公司不一定要建立自己的大规模数据仓库。企业和政府将大量信息投入到公共领域的举措,使得每个人都能够获得海量数据。 迄 ...

分享:20个公开的大数据资源

我总是在证明这样一个论点,即数据无处不在——并且很多都是免费的。在开始大数据分析之前,公司不一定要建立自己的大规模数据仓库。企业和政府将大量信息投入到公共领域的举措,使得每个人都能够获得海量数据。

迄今为止,从大蓝筹企业到极小型创业公司,都可以使用比以往更多的数据。我的很多客户都在向我寻求他们在向大数据方面努力时可以使用的顶尖数据源,下面描述的就是如今可以获得的,一些好用同时免费的大数据来源

1. Data.gov

美国政府去年承诺使所有政府数据都能在网上免费获得。这个网站是第一阶段,作为一个门户网站,囊括了从气候到犯罪的一切惊人的信息。

2. 美国人口普查局

一个关于美国公民生活的丰富信息,包括人口数据,地域数据以及教育。

3. 欧洲联盟开放数据门户

如上所述,但它是基于欧洲联盟机构的数据。

4. Data.gov.uk

来自英国政府的数据,包括《英国国家书目》——自1950以来所有的英国书籍以及出版物的元数据。

5. 中情局世界概况

267个国家历史、人口、经济、政府、基础设施以及军事信息。

6. Healthdata.gov

125年来美国的医疗保健数据,包括索赔型医保数据,流行病学和人口统计。

7. NHS 健康和社会保健信息中心

来自英国国民健康服务的健康状况数据集。

8. Amazon网络服务公共数据集

巨型公共数据源,包括1000个基因组工程,试图建立最全面的人类遗传信息数据库和美国宇航局的卫星图像数据库。

9. Facebook Graph

虽然Facebook用户个人资料中的很多信息是私有的,但很多也不是——Facebook提供Graph API作为查询大量信息的一种方式,它的用户很乐意与世界分享(或者说是不能隐藏,因为他们还没有制定如何设置隐私功能)。

10. Gapminder

世界卫生组织和世界银行的数据集合,包括世界各地的经济、医疗以及社会统计数据。

11. Google Trends

自2004年以来,对所有关键字的搜索量(作为总搜索的比例)的数据统计。

12. Google财经

40年的股票市场数据,并实时更新。

13. Google Books Ngrams

搜索和分析数以百万计的数字图书全文,作为Google图书项目的一部分。

14. 国家气候数据中心

从美国国家气候数据中心收集的环境、气象以及气候数据集。全球最大的天气数据存档。

15. DBPedia

维基百科包含数以百万计的数据,生活中每个事物的结构化和非结构化信息。DBpedia的是一个用来分类的大型工程,并创建了一个公共的,免费发布的并允许任何人来分析这些数据的数据库。

16. Topsy

免费而全面的社交媒体数据是很难得到的——毕竟这些数据是为那些大玩家(Facebook,Twitter等)产生利润的,所以他们不想轻易送人。然而Topsy提供了一个可搜索回溯至2006年公共微博的数据库,和现在一些用来分析会话的工具。

17. Likebutton

在全球范围内,从你自己的网络中挖掘Facebook的公共数据,来了解在某个时刻人们“喜欢”什么。

18. New York Times《纽约时报》

可搜索的新闻文章的索引档案,可以追溯到1851年。

19. Freebase

一个关于人,地点和事物的结构化数据的社区数据库,记录数超过45万个。

20. 百万歌曲数据集

超过一百万首歌曲和音乐作品的元数据。部分属于亚马逊网络服务。

在不久的将来,多智时代一定会彻底走入我们的生活,有兴趣入行未来前沿产业的朋友,可以收藏多智时代,及时获取人工智能、大数据、云计算和物联网的前沿资讯和基础知识,让我们一起携手,引领人工智能的未来!

大数据分析 数据仓库 海量数据 创业公司 大数据 数据源
0
为您推荐
大数据技术改变城市的运作方式,智慧城市呼之欲出

大数据技术改变城市的运作方式,智慧城市呼

纽奥良虽像大多数城市一样有火灾侦测器安装计划,但直到最近还是要由市民主动申装。纽…...

大数据分析面临生死边缘,未来之路怎么走?

大数据分析面临生死边缘,未来之路怎么走?

大数据分析开始朝着营销落地,尤其像数果智能这类服务于企业的大数据分析供应商,不仅…...

什么是工业大数据,要通过3B和3C来理解?

什么是工业大数据,要通过3B和3C来理解?

核心提示:工业视角的转变如果说前三次工业革命分别从机械化、规模化、标准化、和自动…...

大数据普及为什么说肥了芯片厂商?

大数据普及为什么说肥了芯片厂商?

科技界默默无闻的存在,芯片行业年规模增长到了3520亿美元。半导体给无人驾驶汽车带来…...

大数据技术有哪些,为什么说云计算能力是大数据的根本!

大数据技术有哪些,为什么说云计算能力是大

历史规律告诉我们,任何一次大型技术革命,早期人们总是高估它的影响,会有一轮一轮的…...

个人征信牌照推迟落地,大数据 重新定义个人信用!!

个人征信牌照推迟落地,大数据 重新定义个

为金融学的基础正日益坚实。通过互联网大数据精准记录海量个人行为,进而形成分析结论…...