1. 基于hadoop的数据仓库技术 2. 目录Hadoop简介 HDFS (Hadoop Distributed File System) MapReduce Hive本文的内容主要来自三篇hadoop领域的核心论文

 基于Hadoop的研究及性能分析 摘要 在大数据到来的今天，本文首先介绍了Hadoop及其核心技术MapReduce的工作原理。详细讨论了Hadoop推测执行算法和SALS推测执行算法并对它们的性

com/cn/news/2015/03/apache-kafka-stream-data 近来，有许多关于“流处理”和“事件数据”的讨论，它们往往都与像 Kafka 、 Storm 或 Samza 这样的技术相关。但并不是每个

ta-advice 在 《流数据平台构建实战指南》第一部分 中，Confluent联合创始人Jay Kreps介绍了如何构建一个公司范围的实时流数据中心。InfoQ前期对此进行过报道。本文是根据

1. 基于Spark/hbase的数据分析平台及 SparkSQl使用经验分享黄涧石@PayPal (@huangjianshi) 2014/12/13 Beijing Spark Meetup 2.

在使用Pandas之前，大多数数据分析师已经掌握了Excel和SQL，并且在刚上手Pandas时会经常习惯性想到“老办法”。"如果谁能把常用的数据查询语法做个对比就好了 "，我也曾不止一次地想享受前人

eBay 开源的实时大数据分析平台。 作为全球性的商务平台和支付行业领先者，拥有海量的用户行为数据。 基于现有的hadoop大数据处理，已经不能够满足业务上对实时性的需求。基于过去的大数据处理的经验和对最

大数据平台框架选型分析 一、 需求 城市大数据平台，首先是作为一个数据管理平台，核心需求是数据的存和取，然后因为海量数据、多数据类型的信息需要有丰富的数据接入能力和数据标准化处理能力，有了技术能力就

Cube 是一个开源的基于 MongoDB 的数据分析工具 Cube 的收集器接收事件并将这些事件保持在 MongoDB 中。你可通过 UDP、HTTP POST 或者 WebSockets 来发送事件。同时

ElasticSearch是有名的开源搜索引擎，现在很多公司使用ELK技术栈做日志分析，比如新浪使用ELK处理每天32亿条记录，详细的介绍可以查看 这里 我们的数据量没有新浪那么大，一天正常水平在 6千万 条左右，多的时候有

在JDK 6.0中基于StAX分析XML数据 　　J2EE/XML开发者通常都是使用文档对象模型(DOM)API或简单的API for XML(SAX) API来分析XML文档。然而，这些API都有其缺点。其中，DOM

大数据下的数据分析平台架构 随着互联网、移动互联网和物联网的发展，谁也无法否认，我们已经切实地迎来了一个海量数据的时代，数据调查公司IDC预计2011年的数据总量将达到1.8万亿GB，对这些海量数据的分析已经成为一个非常重要且紧迫的需求。

这是一个能够根据源数据（比如说用csv格式表示的矩阵，或者中文文档）使用多种多样的算法去得到结果的一个平台。 算法能够通过xml配置文件去一个一个的运行，比如在开始的时候，我们可以先运行一下主成分分析算法去做

得。 平台概览 2014年下半年左右，去哪儿完成了有关构建私有云服务的技术调研，并最终拍定了Docker/Mesos这一方案。下图1展示了去哪儿数据平台的整体架构： 图1：去哪儿数据平台的整体架构

1. 大数据应用——数据安全和数据分析周鑫英特尔中国研究院 2. 工作方向2关注实体行业 数据分析带动应用 数据将走上开放、共享和交易之路 关注沉淀的数据和实体来源的数据 3. 案例分享乘法效应

随着“互联网+”时代的到来，越来越多人的衣食住行都开始依赖于互联网。 火车、汽车作为普通民众出行主要选择的两大交通方式，其购票方式也在不断发生改变，从传统的人工售票窗口排队购票到互联网购票和自动售票机购票。

信业内直言：互联网公司此举和政府可能提供的补贴有关。 接受本报采访的互联网公司拒绝置评，但他们的手机制造计划已经在路上。 5月 17 日晚，网易内部人士向本报确认，这家曾经的互联网老牌门户正在

1. 以hadoop入门大数据之hadoop阶段www.toocruel.net 2. 以Hadoop入门大数据一目标及计划目标：从Hadoop开始，走进大数据领域；计划：分三个阶段(Hadoop、Sp

SkySQL 开发的一个数据库智能代理服务，允许根据数据库 SQL 语句将请求转向目标一个到多个服务器，可设定各种复杂成都的转向规则。 MaxScale 设计用于透明的提供数据库的负载均衡和高可用性

 基于Android平台的桥梁监测终端的开发 孙弋a，刘俊贤a，刘涵君b （a 西安科技大学 通信学院，陕西 西安 710054） （b 西安电子科技大学 微电子学院，陕西 西安 710071） 摘