UDFRowSequence 不起作用

Posted 2023-04-13

【中文标题】UDFRowSequence 不起作用

【英文标题】：UDFRowSequence not working

【发布时间】：2013-04-09 05:48:07

【问题描述】：

我正在尝试使用自动增量 UDF (http://svn.apache.org/repos/asf/hive/trunk/contrib/src/java/org/apache/hadoop/hive/contrib/udf/UDFRowSequence.java)

我在使用这个 UDF 时遇到了错误。

错误：

在 Hive 控制台上 -

Exception in Thread 60 - Java nullpointer exception

On Hadoop Web Ui - Error in configuring Object .....caused by java,reflect.Invocation..

有人用过这个UDF吗？ 我想知道这个 UDF 是否在 Map Phase 中运行，那么它将如何为每一行提供唯一的数字？

【参考方案1】：

对我来说效果很好。你是怎么执行的？

我可以看到它启动了一个映射器进程，这就是为什么它可以为每一行提供唯一的数字。

【讨论】：

但我没有得到每一行的唯一数字。在特定值之后，值会重复。你如何设置一个映射器？对我来说，它启动了多个映射器，比如大约 100 个。