栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Java

杂记

Java 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

杂记

1、<> 不能和NULL 比较,返回 NULL
2、flink 一任务要从版本 1.12 升级 到 1.13,报错 :Caused by: java.lang.NoSuchMethodError: org.apache.flink.table.factories.DynamicTableFactory$Context.getCatalogTable()Lorg/apache/flink/table/catalog/CatalogTable;
参考链接,可看到 Flink计算引擎为VVR 4.0及以上版本的Hologres Flink Connector支持非主键的维表JOIN,而VVR 4.0以下版本的Hologres Flink Connector仅支持主键的维表JOIN。

flink 1.13 对应的就是 VVR 4.0 以上,所以可以不用之前 flink 1.12 使用的调整过的 JDBC(把jdbc connector和postgres jdbc的jar包封装在一起,因为hologres兼容postgres,通过postgres jdbc查询,对关联键没有必须是主键的要求)

因此,表参数由

 WITH (
    'connector' = 'jdbc', -- 该自定义connector仅仅是jdbc connector结合postgres jdbc的打包
    'url' = '...',
    'driver'='org.postgresql.Driver',
    'table-name' = '...',
    'username' = '...',
    'password' = '...'
 );

更新为了

CREATE TABLE hologres_dim(
  id INT,
  len INT,
  content VARCHAR
) with (
  'connector'='hologres',
  'dbname'='',
  'tablename'='',
  'username'='',
  'password'='',
  'endpoint'=''
);

3、“java8约等于JDK8,而Java8和Java1.8同样是一种东西
4、Hive同步到holo报错:Caused by: org.apache.spark.SparkException: Job aborted due to stage failure: Task 0 in stage 1.0 failed 4 times, most recent failure: Lost task 0.3 in stage 1.0 (TID 4, emr-worker-16.cluster-111290, executor 4): java.lang.NullPointerException
查找之前的笔记发现记录过,字段名不一致的情况会报这种错误,检查字段发现是这个问题。

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/939655.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号