此版本仍在开发中,尚未被视为稳定版。为了获取最新的快照版本,请使用Spring AI 1.1.3spring-doc.cadn.net.cn

审核

简介

Spring AI支持OpenAI的 Moderation模型,该模型可帮助您检测文本中的潜在有害或敏感内容。 请参阅此指南以获取有关OpenAI审核模型的更多信息。spring-doc.cadn.net.cn

前提条件

  1. 创建一个OpenAI账户并获取API密钥。您可以在OpenAI注册页面上注册,并在API密钥页面上生成API密钥。spring-doc.cadn.net.cn

  2. spring-ai-openai 依赖项添加到项目的构建文件中。更多信息,请参阅依赖管理部分。spring-doc.cadn.net.cn

自动配置

There has been a significant change in the Spring AI auto-configuration, starter modules' artifact names. Please refer to the 升级说明以获取更多信息。spring-doc.cadn.net.cn

Spring AI 为 OpenAI Moderation Model 提供了 Spring Boot 自动配置功能。 要启用它,请在项目的 Maven pom.xml 文件中添加以下依赖:spring-doc.cadn.net.cn

<dependency>
    <groupId>org.springframework.ai</groupId>
    <artifactId>spring-ai-starter-model-openai</artifactId>
</dependency>

或者添加到你的 Gradle build.gradle 构建文件中:spring-doc.cadn.net.cn

dependencies {
    implementation 'org.springframework.ai:spring-ai-starter-model-openai'
}
参考以下依赖管理部分,添加Spring AI BOM到你的构建文件中。

审核属性

连接属性

用于连接到OpenAI的属性前缀为spring.ai.openai。spring-doc.cadn.net.cn

属性spring-doc.cadn.net.cn

描述spring-doc.cadn.net.cn

默认spring-doc.cadn.net.cn

spring.ai.openai.base-urlspring-doc.cadn.net.cn

要连接的URLspring-doc.cadn.net.cn

api.openai.comspring-doc.cadn.net.cn

spring.ai.openai.api-keyspring-doc.cadn.net.cn

API 密钥spring-doc.cadn.net.cn

-spring-doc.cadn.net.cn

spring.ai.openai.organization-idspring-doc.cadn.net.cn

您可以选择性地指定用于API请求的组织。spring-doc.cadn.net.cn

-spring-doc.cadn.net.cn

spring.ai.openai.project-idspring-doc.cadn.net.cn

您可以选择性地指定用于API请求的项目。spring-doc.cadn.net.cn

-spring-doc.cadn.net.cn

对于属于多个组织(或通过其旧版用户API密钥访问项目)的用户,可选地,您可以指定用于API请求的组织和项目。 来自这些API请求的使用将计为指定组织和项目的使用量。

配置属性

启用和禁用嵌入式自动配置现在通过带有前缀 spring.ai.model.moderation 的顶级属性进行配置。spring-doc.cadn.net.cn

要启用,请设置 spring.ai.model.moderation=openai (默认情况下已启用)spring-doc.cadn.net.cn

要禁用,请设置 spring.ai.model.moderation=none(或任何不匹配openai的值)。spring-doc.cadn.net.cn

这种修改是为了允许配置多个模型。spring-doc.cadn.net.cn

spring.ai.openai.moderation 前缀用于配置 OpenAI 内容审核模型的属性前缀。spring-doc.cadn.net.cn

属性spring-doc.cadn.net.cn

描述spring-doc.cadn.net.cn

默认spring-doc.cadn.net.cn

spring.ai.model.moderationspring-doc.cadn.net.cn

启用审核模型spring-doc.cadn.net.cn

开源人工智能spring-doc.cadn.net.cn

spring.ai.openai.moderation.base-urlspring-doc.cadn.net.cn

要连接的URLspring-doc.cadn.net.cn

api.openai.comspring-doc.cadn.net.cn

spring.ai.openai.moderation.api-keyspring-doc.cadn.net.cn

API 密钥spring-doc.cadn.net.cn

-spring-doc.cadn.net.cn

spring.ai.openai.moderation.organization-idspring-doc.cadn.net.cn

您可以选择性地指定用于API请求的组织。spring-doc.cadn.net.cn

-spring-doc.cadn.net.cn

spring.ai.openai.moderation.project-idspring-doc.cadn.net.cn

您可以选择性地指定用于API请求的项目。spring-doc.cadn.net.cn

-spring-doc.cadn.net.cn

spring.ai.openai.moderation.moderation-pathspring-doc.cadn.net.cn

用于审核请求的API端点路径。对于具有不同端点结构的OpenAI兼容API非常有用。spring-doc.cadn.net.cn

/v1/moderationsspring-doc.cadn.net.cn

spring.ai.openai.moderation.options.modelspring-doc.cadn.net.cn

用于审核的模型ID。spring-doc.cadn.net.cn

omni-moderation-latestspring-doc.cadn.net.cn

您可以覆盖常用的 spring.ai.openai.base-url, spring.ai.openai.api-key, spring.ai.openai.organization-idspring.ai.openai.project-id 属性。 如果设置了 spring.ai.openai.moderation.base-url, spring.ai.openai.moderation.api-key, spring.ai.openai.moderation.organization-idspring.ai.openai.moderation.project-id 属性,它们将优先于常用属性。 这对于希望为不同模型和不同模型端点使用不同的OpenAI账户非常有用。
所有以spring.ai.openai.moderation.options为前缀的属性都可以在运行时覆盖。

自定义API路径

对于使用不同端点路径的与OpenAI兼容的API(例如LocalAI、自定义代理或其他与OpenAI兼容的服务),您可以配置审核路径:spring-doc.cadn.net.cn

spring.ai.openai.moderation.moderation-path=/custom/path/to/moderations

这在以下情况特别有用:spring-doc.cadn.net.cn

运行时选项

OpenAiModerationOptions类提供了进行内容审核请求时使用的选项。 在启动时,将使用spring.ai.openai.moderation指定的选项,但您可以在运行时覆盖这些选项。spring-doc.cadn.net.cn

OpenAiModerationOptions moderationOptions = OpenAiModerationOptions.builder()
    .model("omni-moderation-latest")
    .build();

ModerationPrompt moderationPrompt = new ModerationPrompt("Text to be moderated", this.moderationOptions);
ModerationResponse response = openAiModerationModel.call(this.moderationPrompt);

// Access the moderation results
Moderation moderation = moderationResponse.getResult().getOutput();

// Print general information
System.out.println("Moderation ID: " + moderation.getId());
System.out.println("Model used: " + moderation.getModel());

// Access the moderation results (there's usually only one, but it's a list)
for (ModerationResult result : moderation.getResults()) {
    System.out.println("\nModeration Result:");
    System.out.println("Flagged: " + result.isFlagged());

    // Access categories
    Categories categories = this.result.getCategories();
    System.out.println("\nCategories:");
    System.out.println("Sexual: " + categories.isSexual());
    System.out.println("Hate: " + categories.isHate());
    System.out.println("Harassment: " + categories.isHarassment());
    System.out.println("Self-Harm: " + categories.isSelfHarm());
    System.out.println("Sexual/Minors: " + categories.isSexualMinors());
    System.out.println("Hate/Threatening: " + categories.isHateThreatening());
    System.out.println("Violence/Graphic: " + categories.isViolenceGraphic());
    System.out.println("Self-Harm/Intent: " + categories.isSelfHarmIntent());
    System.out.println("Self-Harm/Instructions: " + categories.isSelfHarmInstructions());
    System.out.println("Harassment/Threatening: " + categories.isHarassmentThreatening());
    System.out.println("Violence: " + categories.isViolence());

    // Access category scores
    CategoryScores scores = this.result.getCategoryScores();
    System.out.println("\nCategory Scores:");
    System.out.println("Sexual: " + scores.getSexual());
    System.out.println("Hate: " + scores.getHate());
    System.out.println("Harassment: " + scores.getHarassment());
    System.out.println("Self-Harm: " + scores.getSelfHarm());
    System.out.println("Sexual/Minors: " + scores.getSexualMinors());
    System.out.println("Hate/Threatening: " + scores.getHateThreatening());
    System.out.println("Violence/Graphic: " + scores.getViolenceGraphic());
    System.out.println("Self-Harm/Intent: " + scores.getSelfHarmIntent());
    System.out.println("Self-Harm/Instructions: " + scores.getSelfHarmInstructions());
    System.out.println("Harassment/Threatening: " + scores.getHarassmentThreatening());
    System.out.println("Violence: " + scores.getViolence());
}

手动配置

spring-ai-openai 依赖添加到您项目的 Maven pom.xml 文件中:spring-doc.cadn.net.cn

<dependency>
    <groupId>org.springframework.ai</groupId>
    <artifactId>spring-ai-openai</artifactId>
</dependency>

或者添加到你的 Gradle build.gradle 构建文件中:spring-doc.cadn.net.cn

dependencies {
    implementation 'org.springframework.ai:spring-ai-openai'
}
参考以下依赖管理部分,添加Spring AI BOM到你的构建文件中。

接下来,创建一个OpenAiModerationModel:spring-doc.cadn.net.cn

OpenAiModerationApi openAiModerationApi = new OpenAiModerationApi(System.getenv("OPENAI_API_KEY"));

OpenAiModerationModel openAiModerationModel = new OpenAiModerationModel(this.openAiModerationApi);

OpenAiModerationOptions moderationOptions = OpenAiModerationOptions.builder()
    .model("omni-moderation-latest")
    .build();

ModerationPrompt moderationPrompt = new ModerationPrompt("Text to be moderated", this.moderationOptions);
ModerationResponse response = this.openAiModerationModel.call(this.moderationPrompt);

示例代码

OpenAiModerationModelIT 测试提供了一些关于如何使用该库的通用示例。您可以参考此测试以获取更详细的使用示例。spring-doc.cadn.net.cn