一个神奇的 spark 报错

写 spark 跑的时候遇到一个神奇的错误,报错如下 18/11/20 16:44:44 ERROR TransportRequestHandler: Error while invoking RpcHandler#receive() for one-way message. org.apache.spark.SparkException: Could not find CoarseGrainedScheduler. at org.apache.spark.rpc.netty.Dispatcher.postMessage(Dispatche……

阅读全文

分割文件行数

可以将一个大文件分割成小文件,每个指定行数 package com.example; import java.io.BufferedReader; import java.io.FileReader; import java.io.FileWriter; import java.io.IOException; public class SplitFile20180522 { public static void main(String[] args) throws IOException { ……

阅读全文

Java 线程池试用

参考 http://www.importnew.com/19011… 照猫画虎试用了 java 的线程池 package me.zrj.test.test20170607; import java.util.Date; import java.util.concurrent.ArrayBlockingQueue; import java.util.concurrent.ThreadPoolExecutor; import java.util.concurrent.TimeUnit; class MyTask implements……

阅读全文

自行编译 saiku 的一些填坑记录

起因是说 jackson 的代码存在一个远程任意代码执行漏洞, http://bobao.360.cn/news/detai… ,而 saiku 又用到了 jackson,用的是 2.5.1 因此我们需要自行编译一个 saiku 的 pentaho 插件,把 jackson 的版本升上去 在此之前,我们用的是从 saiku 的官方下载回来的预编译好的 saiku-pentaho 插件,版本是 saiku-p……

阅读全文

netty 初窥

先说结论,总体感觉很好,比 cpp 上的 nio 框架好。 缘起是一个同学来问 java web 的问题,帮他调了一下,两年没怎么碰过 java web 的东西了,各种生疏,而且在调试的过程中,也再次感觉到 java 这个东西实在不适合做 web,一个是重,ssh 框架一上来就给人压得喘不过气的感觉,新增一个功能,要 spring struts 里面 xml ……

阅读全文

JVM虚拟内存调整

这次真的是为了调一个环境花费两三天的时间,太纠结了,现在每天都要去听实习那个没什么意思的课程,只能每天中午午休的时候和晚上放学回来抓紧时间写一点,每次都是稍稍有点状态思路刚活跃时间就到了,又要走人 这次异常调到后来,感觉弯路走了很多,于是开始有意识的用记事本记录下来,最开始的时候放在 MyEclispe 自带……

阅读全文

Tomcat配置多域名虚拟主机

国内的 Java 社区资料确实丰富,可惜大都是抄来抄去,质量也是良莠不齐,比如这个简单的 tomcat 配置多余名虚拟主机问题吧,google 了一下,出来很多文章,前面的点进去看了看,发现解决不了问题,话都没有说清楚,于是关掉,点后面,结果坑爹的发现其实是抄前面的几篇,连错别字都不带改的,于是只能自己狂看好多篇然后……

阅读全文