哪里可以找到很多数据

1. 如何在网站找数据

1、服务器日志

随着网站应用的不断扩张，网站日志不再局限于点击流的日志数据，如果你的网站提供上传下载、视频音乐、网页游戏等服务，那么很明显，你的网站服务器产生的绝不仅有用户浏览点击网页的日志，也不只有标准的apache日志格式日志，更多的W3C、JSON或自定义格式的输出日志也给网站分析提供了新的方向。

网站分析不再局限于网页浏览的PV、UV，转化流失等，基于事件(Events)的分析将会越来越普遍，将会更多的关注用户在接受网站服务的整个流程的情况：上传下载是否完成，速度如何;用户是否观看的整部视频，视频的加载情况;及用户在玩网页游戏时的操作和体验分析等。

2、网站分析工具

当然，通过网站分析工具获得数据是一个最为简便快捷的方式，从原先的基于网站日志的AWStats、webalizer，到目前非常流行的基于JS Tags的Google Analytics、99click的SiteFlow，及JS和网站日志通吃的WebTrends。通过网站分析工具获得的数据一般都已经经过特殊计算，较为规范，如PV、UV、Exit Rate、Bounce Rate等，再配上一些趋势图或比例图，通过细分、排序等方法让结果更为直观。

但通过网站分析工具得到数据也不远只这些，上面的这些数据也一样可以通过统计网站日志获得，但网站分析工具的优势在于其能通过一些嵌入页面的JS代码获得一些有趣的结果。

3、数据库数据

对于一般的网站来说，存放于数据库中的数据可以大致分为3个部分：

1、网站用户信息，一般提供注册服务的网站都会将用户的注册账号和填写的基本信息存放在数据库里面;

2、网站应用或产品数据，就像电子商务的商品详细信息或者博客的文章信息，如商品信息会包含商品名称、库存数量、价格、特征描述等;

2. 从哪里能找到北京市多年气象数据，需要气温、湿度、风、日照之类的

可以的，有很多气象数据平台可以查询

1、ncc.cma.gov.cn/cn/国家气候中心拆茄

2、www.xihe-energy.com羲和能源大数据平台

3、www.cdc.noaa.gov/public.data中国气象局

4、www.e.cn中国教育科研计算机网

5、weather.com.cn/中国天气网

步骤一：在羲和平台首页进行地理位置选择。既可以选择单点数据也可以选择区域平均数据

3. 如何获取大数据信息

一、公开数据库
常用数据公开网站：

UCI：经典的机器学习、数据挖掘数据集，包含分类、聚类、回归等问题下的多个数据集。很经典也比较古老，但依然活跃在科研学者的视线中。

国家数据：数据来源中华人民共和国国家统计局，包含了我国经济民生等多个方面的数据，并且在月度、季度、年度都有覆盖，全面又权威。

亚马逊：来自亚马逊的跨科学云数据平台，包含化学、生物、经济等多个领域的数据集。

figshare：研究成果共享平台，在这里可以找到来自世界的大牛们的研究成果分享，获取其中的研究数据。

github：一个非常全面的数据获取渠道，包含各个细分领域的数据库资源，自然科学和社会科学的覆盖都很全面，适合做研究和数据分析的人员。

二、利用爬虫可以获得有价值数据
这里给出了一些网站平台，我们可以使用爬虫爬取网站上的数据，某些网站上也给出获取数据的API接口，但需要付费。

1.财经数据，2.网贷数据；3.公司年报；4.创投数据；5.社交平台；6.就业招聘；7.餐饮食品；8.交通旅游；9.电商平台；10.影音数据；11.房屋信息；12.购车租车；13.新媒体数据；14.分类信息。

三、数据交易平台
由于现在数据的需求很大，也催生了很多做数据交易的平台，当然，出去付费购买的数据，在这些平台，也有很多免费的数据可以获取。

优易数据：由国家信息中心发起，拥有国家级信息资源的数据平台，国内领先的数据交易平台。平台有B2B、B2C两种交易模式，包含政务、社会、社交、教育、消费、交通、能源、金融、健康等多个领域的数据资源。

数据堂：专注于互联网综合数据交易，提供数据交易、处理和数据API服务，包含语音识别、医疗健康、交通地理、电子商务、社交网络、图像识别等方面的数据。



四、网络指数
网络指数：指数查询平台，可以根据指数的变化查看某个主题在各个时间段受关注的情况，进行趋势分析、舆情预测有很好的指导作用。除了关注趋势之外，还有需求分析、人群画像等精准分析的工具，对于市场调研来说具有很好的参考意义。同样的另外两个搜索引擎搜狗、360也有类似的产品，都可以作为参考。

阿里指数：国内权威的商品交易分析工具，可以按地域、按行业查看商品搜索和交易数据，基于淘宝、天猫和1688平台的交易数据基本能够看出国内商品交易的概况，对于趋势分析、行业观察意义不小。

友盟指数：友盟在移动互联网应用数据统计和分析具有较为全面的统计和分析，对于研究移动端产品、做市场调研、用户行为分析很有帮助。除了友盟指数，友盟的互联网报告同样是了解互联网趋势的优秀读物。

五、网络采集器
网络采集器是通过软件的形式实现简单快捷地采集网络上分散的内容，具有很好的内容收集作用，而且不需要技术成本，被很多用户作为初级的采集工具。

造数：新一代智能云爬虫。爬虫工具中最快的，比其他同类产品快9倍。拥有千万IP，可以轻松发起无数请求，数据保存在云端，安全方便、简单快捷。

火车采集器：一款专业的互联网数据抓取、处理、分析，挖掘软件，可以灵活迅速地抓取网页上散乱分布的数据信息。

八爪鱼：简单实用的采集器，功能齐全，操作简单，不用写规则。特有的云采集，关机也可以在云服务器上运行采集任务。