StarRocks-生产环境问题集锦

Posted 2022-03-23 天青色等烟雨...

项目场景：

实时平台设计方案将最终目的数据库更换为StarRocks,使用后的感受简直就是更快更高更强，但在开发使用过程中也遇到了一些小问题(以下问题均出现在Flink写入StarRocks架构中).

---

问题描述及解决方案

1.flink实时写入到StarRocks,依赖引入出错

问题场景：最开始在pom.xml文件中引入的是DorisDB相关的依赖，任务能正常提交到yarn，但报的是写入doris失败的错误，看来StarRocks和前身DorisDB还真不是一回事，错误如下：

问题解决：

引入StarRocks相关的依赖，并将flink-connector-starrocks所带的部分依赖去掉，否则任务提交失败(我的是这样，视情况而定)，报yarn相关的错误，截图如下：

说明：本人在使用时引入版本1.1.1_flink-1.13引入失败，引入1.1.1_flink-1.11版本没问题

---

2.日志报错too many filtered rows

由于插入的数据中某个字段值为null，而插入表中不能为null，报错如下：

问题解决：

---

记得点赞收藏奥，关注不迷路~