大网数据广告活动
流处理与数据平台

Apache Flink 中文参考:OpenAI

· 52CE 我爱测

`sql CREATE TEMPORARY VIEW movie_comment(id, movie_name, user_comment, actual_label) AS VALUES (1, '好东西', '最爱小孩子猜声音那段,算得上看过的电影里相当浪漫的叙事了。很温和也很有爱。', 'positive');

OpenAI

OpenAI模型函数允许Flink SQL调用OpenAI API执行推理任务。

概述

该函数支持通过Flink SQL调用远程的OpenAI模型服务进行预测/推理任务。目前支持以下任务类型:

  • Chat Completions:根据包含对话消息列表生成模型响应。
  • Embeddings:获取给定输入的向量表示,方便在后续流程中由机器学习模型和算法消费。

使用示例

以下示例创建了一个聊天补全模型,并使用它对电影评论进行情感标签预测。

首先,使用如下SQL语句创建聊天补全模型:

CREATE MODEL ai_analyze_sentiment
INPUT (`input` STRING)
OUTPUT (`content` STRING)
WITH (
    'provider'='openai',
    'endpoint'='https://api.openai.com/v1/chat/completions',
    'api-key' = '<YOUR KEY>',
    'model'='gpt-3.5-turbo',
    'system-prompt' = 'Classify the text below into one of the following labels: [positive, negative, neutral, mixed]. Output only the label.'
);

假设如下数据存储在名为 movie_comment 的表中,预测结果需要存储到名为 print_sink 的表中:

CREATE TEMPORARY VIEW movie_comment(id, movie_name,  user_comment, actual_label)
AS VALUES
  (1, '好东西', '最爱小孩子猜声音那段,算得上看过的电影里相当浪漫的叙事了。很温和也很有爱。', 'positive');

CREATE TEMPORARY TABLE print_sink(
  id BIGINT,
  movie_name VARCHAR,
  predicit_label VARCHAR,
  actual_label VARCHAR
) WITH (
  'connector' = 'print'
);

然后就可以使用如下SQL语句对电影评论进行情感标签预测。

INSERT INTO print_sink
SELECT id, movie_name, content as predicit_label, actual_label
FROM ML_PREDICT(
  TABLE movie_comment,
  MODEL ai_analyze_sentiment,
  DESCRIPTOR(user_comment));

模型选项

公共选项

Chat Completions

Embeddings

Schema要求

任务类型 输入类型 输出类型
Chat Completions STRING STRING
Embeddings STRING ARRAY<FLOAT>

可用元数据

当配置 error-handling-strategy 为 ignore 时,您可以选择额外指定以下元数据列,将故障信息展示到您的输出流中。

  • error-string(STRING):与错误相关的消息
  • http-status-code(INT):HTTP状态码
  • http-headers-map(MAP<STRING, ARRAY>):响应返回的头部信息

如果您在Output Schema中定义了这些元数据列,但调用未失败,则这些列将填充为null值。

本文来自 Apache Flink 文档贡献者,按 Apache 2.0 整理版式与相对链接,保留正文与代码。图示请参阅原文。作者与贡献记录。

资料来源与适用范围

资料来源
Apache Flink 文档贡献者
适用范围
master 文档快照(2026-11-16)
内容语言
中文;命令、路径和错误标识保留技术原文
本地收录日期
2026-11-16
授权说明
Apache 2.0

正文与所需资源由本站本地存储。查看来源及更新记录 ↗

请按适用版本和实际日志确认原因;本站没有对每一种系统或设备逐项执行文中的操作。