163java
About 6 results
  1. 【Spark七十六】Spark计算结果存到MySQL

    http://bit1129.iteye.com/blog/2186405
    2015年02月21日 - package spark.examples.db import java.sql.{PreparedStatement, Connection, DriverManager} import com.mysql.jdbc.Driver import org.apache.spark.{SparkConte
  2. Spark在submitStage后如何通过clustermanager调度执行task到Driver接收计算结果的代码解析

    http://humingminghz.iteye.com/blog/2314619
    2016年08月01日 - 前文: http://humingminghz.iteye.com/blog/2314269 前面先看到了从action入口到如何切分stage, 随后submit stage的过程, 那么既然stage被submit了, 接下来就应该是cluster manager去分配各个任务到prefer location的ex
  3. Spark Streaming实时计算框架介绍

    http://m635674608.iteye.com/blog/2248366
    2015年10月11日 - 随着大数据的发展,人们对大数据的处理要求也越来越高,原有的批处理框架MapReduce适合离线计算,却无法满足实时性要求较高的业务,如实时推荐、用户行为分析等。 Spark Streaming是建立在Spark上的实时计算框架,通过它提供的丰富的API、基于内存的高速执行引擎,用户可以结合流式、批处理和交互试查询应用。
  4. java中的精确商务计算

    http://zhangym.iteye.com/blog/245490
    2008年09月22日 -       由于计算机在计算过程中的舍入关系,普通的计算和工程计算可能会出现计算不足够精确的情况,这种情况在这两种计算中也许是可以忍受的,但是在商务运算中就不可接受了,财务计算。 //import org.zym.arithutil.Arith; public class FloatCalculation { /
  5. 让spark运行在mesos上 -- 分布式计算系统spark学习(五)

    http://www.cnblogs.com/zhangqingping/p/4939264.html
    2015年11月05日 - mesos集群部署参见上篇。   运行在mesos上面和 spark standalone模式的区别是: 1)stand alone 需要自己启动spark master 需要自己启动spark slaver(即工作的worker) 2)运行在mesos 启动mesos master 启动mesos slaver 启动
  6. 提交任务到spark master -- 分布式计算系统spark学习(四)

    http://www.cnblogs.com/zhangqingping/p/4366472.html
    2015年03月25日 - 部署暂时先用默认配置,我们来看看如何提交计算程序到spark上面。   拿官方的Python的测试程序搞一下。 qpzhang@qpzhangdeMac-mini:~/project/spark-1.3.0-bin-hadoop2.4 $cat examples/SimpleApp.py """SimpleApp.