数据应用?你先搞定数据获取再说 经验

数据不再像过去几年一样,受限于工具缺乏的问题。那时候搞大数据意味着团队里必须有数据科学家,还会被R和Hadoop之类的开源工具搞得心烦意乱。现在许多公司在大数据分析中最头疼的问题,其实是如何获取数据

xuanlingzi 2016-04-13   24519   0

0x0F 大数据职位,数据场技能(下) 经验

com/p/5b0b881ae46d 摘要:成为数据极客,建立自己的数据场需要哪些技能呢?遇到普通的数据,通过SQL做分析。如果数据量比较大,可以使用Hadoop等大数据框架处理。在深入挖掘上,可用Python或者R语言进行编程。

ersm3365 2016-01-29   41293   0

Hadoop和数据数据迁移工具 Apache Sqoop 1.4.2 发布 资讯

Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导入到Hadoop的HDFS中,也可以将HDFS的数据导入到关系型数据库中。

openkk 2012-08-24   12308   0
Hadoop  

帮助你使用数据库方式访问JSON数据的javascript类库-TaffyDB 资讯

是不是有过这样的想法,如果能够像处理数据库方法一样来处理JSON对象数据的话,是不是会非常方便?今天我们介绍一款超棒的 javascript 类库- TaffyDB ,它能够帮助你实现处理数据库一样的方式来处理JSON对象。

jjfat 2012-09-25   14360   0

数据库老兵:大数据时代 NoSQL 不是颠覆性技术 资讯

数年前,当人们谈论起新兴的NoSQL数据库技术时,相当一部分观点认为NoSQL在大数据市场取代传统关系型数据库只是个时间问题。如今,这一预 言并未兑现,Mitchell Kertzman的总经理Hummer

jopen 2013-11-11   13891   0
NOSQL  

FoundationDB SQL层:在NoSQL数据库中存储SQL数据 资讯

成为一个关系型数据库,其后台是一个可扩展的、具有容错能力的、无共享的分布式 NoSQL 存储,而且 支持跨多个数据元素的 ACID 事务 。 FoundationDB 的做法是将数据模型与存储分离

jopen 2014-09-18   8090   0

Hadoop和大数据:60款顶级大数据开源工具 资讯

http://www.thebigdata.cn/Hadoop/15548.html 说到处理大数据的工具,普通的开源解决方案(尤其是Apache Hadoop)堪称中流砥柱。弗雷斯特调研公司的分析师Mike

jopen 2015-10-23   46305   0
Hadoop  

极光推送CTO黄鑫:大数据时代,数据与信息安全如何完美平衡? 资讯

随着互联网技术及其应用的发展,以大数据为代表的数据密集型技术将成为新时代技术变革的基础。但与此同时,数据的进一步集中和数据量的增加,使海量数据的安全防护面临巨大挑战,大数据在搜集、存储、使用等环节中仍面临

jopen 2015-10-21   11716   0

数据教父Micheal Stonebraker告诉你大数据的秘密 资讯

今天,我要跟大家谈谈大数据。大数据这个词其实是一些做营销的人发明的,大概是几年前的事情。然后我也非常高兴,我终于知道过去四十年自己到底在做什么,我原来是在做大数据。所以我想跟大家谈谈大数据对于我来说意味着什么,以及我认为的大数据中什么是重要的。

jopen 2016-01-04   35285   0
大数据   SQL  

解读2015之大数据篇:大数据的黄金时代 资讯

行。 本文是大数据解读篇,在这篇文章里我们将回顾2015展望2016,看看过去的一年里广受关注的技术有哪些进展,了解下数据科学家这个职业的火热。 在关键技术进展部分我们在大数据生态圈众多技术中选取

jopen 2016-01-08   53926   0

数据到底是啥重要玩意儿?另:超多数据资源分享 资讯

rocess 数据-由事实信息的集合体(数字,词语,度量衡,观察等等)转化而成的计算机能够处理的信息。 无论你从事于哪个行业,又或者你的兴趣何在,你将几乎肯定面临遇到一个情况:“数据”是如何改变我

jopen 2016-03-01   19197   0
P9

  数据中心数据搜索引擎设计 文档

数据中心数据搜索引擎设计 一、 技术路线 为了建立有自主版权的数据搜索引擎产品,数据中心数据搜索引擎采用lucene与POI相结合的方式实现。 Lucene是开源的搜索引擎产品,提供了全文索引建立和

xuesheng32 2013-02-18   3847   0
P42

  Oracle数据库系统数据迁移实施报告 文档

~专业好文档为您搜集整理~谢谢使用~ XXXX局资源库系统 数据库迁移项目实施报告 2010-11-27 ~专业好文档为您搜集整理~谢谢使用~ ~专业好文档为您搜集整理~谢谢使用~ 目 录 1. 概述

faith87 2012-08-04   8030   0

Android异步请求网络上的图片,返回数据数据 代码段

private class ErweimaAsyncTask extends AsyncTask<String, Integer, String>{ @Override protected String doInBackground(String... paramArray) { URL picUrl; try { picUrl = new URL(Constant.ERWEIMA_URL + "

dy223 2015-03-26   1338   0
Android  

百度HDFS集群的数据压缩实现大数据的储存 博客

速增长,到 2020年,全球每年产生的数字信息将达到35ZB。面对海量数据处理的需求,“大数据”这一新的概念应运而生。关于大数据的定义,目前还没有标准的说 法。 Hadoop Distributed

openkk 2012-08-12   2093   0
P24

  g8开放数据宪章-国外开放政府数据新进展 文档

——国外开放政府数据新进展工业和信息化部电子科学技术情报研究所所长 洪京一G8开放数据宪章 2. G8开放数据宪章提纲国外开放政府数据概况美英开放政府数据新进展开放政府数据的几点启示 3. G8开放数据宪章 2

loyoho 2016-12-14   1472   0
报告   培训  

容器化的数据科学与工程——第二部分:容器化的数据科学 经验

(这是有关容器化世界里的数据科学与工程系列博客文章的第二部分,点 此 看第一部分)。 首先要承认,数据科学家正在设计一些非常有意思(而且或许很有价值的)的模型、优化以及虚拟化等。不幸的是,由于很多

lisongp11 2016-05-29   15082   0
Docker  

python 数据清洗之数据合并、转换、过滤、排序 经验

前面我们用pandas做了一些基本的操作,接下来进一步了解数据的操作, 数据清洗一直是数据分析中极为重要的一个环节。 数据合并 在pandas中可以通过merge对数据进行合并操作。 importnumpyas

CarBarkly 2017-02-12   16043   0

从LinkedIn的数据处理机制学习数据架构 资讯

是当今最流行的专业社交网站之一,本文描述了 LinkedIn 是如何管理数据的。如你对文中的观点有异议亦或文中有遗漏的部分请随时告诉我。 LinkedIn.com 数据用例 下面是一些数据用例,可能我们在浏览 LinkedIn

jopen 2014-06-05   9673   0

eBay开源新数据库技术Kylin,支持TB到PB级数据 资讯

开源了一种名为 Kylin 的数据库技术,eBay 在周三的一篇博客上分享了 Kylin 的诸多细节,基于 Hadoop 提供 SQL 接口和 OLAP 接口,支持 TB 到 PB 级别的数据量,Kylin 旨在减少

jopen 2014-10-23   11724   0
Kylin  
1 2 3 4 5 6 7 8 9 10