背景:
线上kudu 集群版本为1.11.0版本, spark 使用 kudu-spark2_2.11-1.7.0.jar,
为了使用新版本中的
val wo = new KuduWriteOptions(ignoreNull = true)
特性,升级至 kudu-spark2_2.11-1.11.0.jar 版本,但是报错。
kudu-spark KuduContext java.io.InvalidClassException 解决
phoenix-client-4.14.1-HBase-1.4.jar jar包冲突解决
项目用到phoenix,使用了这个jar包phoenix-client-4.14.1-HBase-1.4.jar,这个jar包导致的jar包冲突很多,一番摸索,解决了,解决如下。
spark 读取 hive date 分区表 奇怪的报错
Apache Kudu 写入数据定期出问题
spark yarn cluster模式下log4j日志的配置
五十个电子书搜索网
阿里Druid连接池连接不释放、连接泄漏排查
spring cloud java反向代理访问阿里云OSS私有资源
最近用到阿里云oss,有阿里云服务器,通过代理内网访问可以实现免除OSS流量费,查到很多nginx反向代理的教程,但是纯java实现没有找到,感觉可以试一试。