SparkR:数据科学家的新利器 经验

作为增强Spark对数据科学家群体吸引力 的最新举措,最近发布的Spark 1.4版本在现有的Scala/Java/Python API之外增加了R API(SparkR)。SparkR 使得熟悉R的

jopen 2015-10-24   49850   0
SparkR  

Tumblr:150亿月浏览量背后的架构挑战(上) 经验

Tumblr 最开始是非常典型的 LAMP 应用。目前正在向分布式服务模型演进,该模型基于 Scala 、 HBase 、 Redis (著名开源K-V存储方案)、 Kafka (Apache 项目,出自

fmms 2012-02-17   89104   0

Java Web框架 Play Framework 发布 2.0 预览版 资讯

根据透露, 从2.0开始,Play框架核心将完全使用Scala重写 。Play的构建与部署将迁移至Simple Build Tool,模板则决定使用Scala代替Groovy来编写。 Play项目的首席开发人员Guillaume

openkk 2011-09-07   11860   2
Java  

Apache Spark 1.4.1 发布,开源集群计算系统 资讯

。 Spark 是在 Scala 语言中实现的,它将 Scala 用作其应用程序框架。与 Hadoop 不同,Spark 和 Scala 能够紧密集成,其中的 Scala 可以像操作本地集合对象一样轻松地操作分布式数据集。

jopen 2015-07-18   20371   0

Lightbend公司加入Eclipse基金会以支持Jakarta EE 资讯

Lightbend 是 Scala 语言背后的支持公司,同时也是响应式编程的先行者,它支持着 Reactive 平台 的开发。日前该公司宣布已正式加入 Eclipse 基金会,因为 Lightbend

jopen 2018-04-14   9690   0

Apache Spark 1.6 正式发布,性能大幅度提升 资讯

。 Spark 是在 Scala 语言中实现的,它将 Scala 用作其应用程序框架。与 Hadoop 不同,Spark 和 Scala 能够紧密集成,其中的 Scala 可以像操作本地集合对象一样轻松地操作分布式数据集。

jopen 2016-01-04   18184   0

简单封装Spring的SimpleJdbcTemplate 代码段

Scala应用于项目存在一定的风险。使用Scala更多的是辅助Java,做一些独立性相对较高的模块。例如将某个模块以jar的形式提供服务等等。而Sprin g是项目中用得最多的开源框架。在Java代

MicSever 2016-01-19   5161   0
Spring  

spark用程序提交任务到yarn 经验

${SPARK_HOME}下面执行: SPARK_JAR=./assembly/target/scala-2.10.4/spark-assembly-0.9.0-incubating-hadoop2.2

jopen 2014-04-11   186436   0

关于Python的几点思考 经验

后端,超过88个课程系统通过机器学习的不断优化后提供给用户使用。 Duolingo 原来的系统是用 Python 编写的,后来用 Scala 重写了一遍。虽然重构系统耗费了大量的人力、物力(工程师们不得不中断新的研发计划转而用几个月的时

Err7427 2017-02-15   11349   0

免费英文编程电子书集合 经验

Examples, Java Edition - Seth D. Bergmann Compiling Scala for the Java Virtual Machine - Michel Schinz Compiling

pjp 2015-05-11   119910   0

函数式编程一年体会 资讯

一开始:Scala 很高效的Java,因为它用一半的代码实现同样的功能 深入:Haskell 在社区遇到一个笑话:Scala是Haskell的入门诱饵。别人拿Haskell当笑话,但我发现Haskell确实强大。

jopen 2014-06-12   12094   0

Apache Spark 1.4 发布,开源集群计算系统 资讯

。 Spark 是在 Scala 语言中实现的,它将 Scala 用作其应用程序框架。与 Hadoop 不同,Spark 和 Scala 能够紧密集成,其中的 Scala 可以像操作本地集合对象一样轻松地操作分布式数据集。

jopen 2015-06-11   16817   0

让老板开心的程序员不是好程序员 资讯

个群体也是利益相关者。每个利益相关者对项目都有着自己的要求:1)Jeff,开发人员,希望可以学习Scala,同时可以每两个星期拿一次薪水; 2)Sally,产品负责人,想要参加巴黎博览会,当然薪资也是不能少的;

jopen 2015-01-29   19023   0

Spark 常见问题小结 经验

setJars(Seq(System.getProperty("user.dir") + "/target/scala-2.10/sparktest.jar")) This should fix the vast

jopen 2015-12-31   51499   0
P6

  Tumblr:150亿月浏览量背后的架构挑战 文档

  Tumblr 最开始是非常典型的 LAMP 应用。目前正在向分布式服务模型演进,该模型基于Scala、HBase、Redis(著名开源K-V存储方案)、Kafka(Apache 项目,出自 LinkedIn

gmmxx 2015-12-21   2924   0

Tumblr 架构设计 经验

Tumblr最开始是非常典型的LAMP应用。目前正在向分布式服务模型演进,该模型基于 Scala 、 HBase 、 Redis 、 Kafka 、 Finagle ,此外还有一个有趣的基于Cell的架构,用于支持Dashboard 

jopen 2013-05-26   78089   0

你需要学习的九种最前沿编程语言 资讯

Javascript。 Scala:JVM上的函数式编程 假如你想要让你的代码有面向对象的清晰层次结构又喜欢函数型编程模式,那你有很多选择。假如你熟悉 Java,Scala 会是你的一个选择。 Scala 运行在

jopen 2015-01-22   33214   0

Apache Spark 1.6.1 发布,集群计算环境 资讯

。 Spark 是在 Scala 语言中实现的,它将 Scala 用作其应用程序框架。与 Hadoop 不同,Spark 和 Scala 能够紧密集成,其中的 Scala 可以像操作本地集合对象一样轻松地操作分布式数据集。

jopen 2016-03-11   27731   0

在 CentOS 7 / RHEL 7 上怎样安装 Eclipse Luna IDE 经验

JavaScript、Lasso、Natural、Perl、 PHP、 Prolog、 Python、Ruby、Scala、Clojure、 Groovy、Scheme 和 Erlang。它也可以用来开发Mathematica软件包。

jopen 2015-01-10   36462   0

大数据分析引擎Apache Flink升级成为Apache顶级项目 资讯

MapReduce一类平台的高效性、灵活性和扩展性以及并行数据库查询优化方案,它支持批量和基于流的数据分析,且提供了基于Java和Scala的API。从Apache官方博客中 得知 ,Flink已于近日升级成为Apache基金会的顶级项目。Flink项目的副总裁对此评论到:

jopen 2015-01-16   16983   0
1 2 3 4 5 6 7 8 9 10