个人简介:
> 📦个人主页:赵四司机
> 🏆学习方向:JAVA后端开发
> 📣种一棵树最好的时间是十年前,其次是现在!
> ⏰往期文章:SpringBoot项目整合微信支付
> 🧡喜欢的话麻烦点点关注喔,你们的支持是我的最大动力。
前言:
1.前面基于Springboot的单体项目介绍已经完结了,至于项目中的其他功能实现我这里就不打算介绍了,因为涉及的知识点不难,而且都是简单的CRUD操作,假如有兴趣的话可以私信我我再看看要不要写几篇文章做个介绍。
2.完成上一阶段的学习,我就投入到了微服务的学习当中,所用教程为B站上面黑马的微服务教程。由于我的记性不是很好,所以对于新事物的学习我比较喜欢做笔记以加强理解,在这里我会将笔记的重点内容做个总结发布到“微服务学习”笔记栏目中。我是赵四,一名有追求的程序员,希望大家能多多支持,能给我点个关注就更好了。
目录
由于我最近在做的是新闻体裁的项目,由于互联网的发展,网络上面经常充斥着很多不可控的风险因素,如色情暴力、垃圾广告等,因此发布文章需要进行审核才能发布到App端。如果全部都要人工审核的话会很耗时间,这时候就可以借助第三方提供的服务来对内容进行审核。市面上提供的内容安全审核服务有很多,如腾讯云、阿里云、网易易盾等,不过都是收费的,我是学生党,没必要为了一个项目而去购买这些服务(这些服务还不便宜),不过好在这些服务都会免费送一个月给新用户使用,这样就还有的玩。
什么是文本内容安全,主要指的是检测文本中是否包含色情暴力、广告内容等违规内容,并对检测出违规的文章进行屏蔽。而腾讯文本内容安全(Text Moderation System,TMS)是一款文本内容智能识别服务,对用户上传的文本进行内容安全识别,能够做到识别准确率高、召回率高,多维度覆盖对内容识别的要求,并实时更新识别服务的识别标准和能力。其具有以下特点:
什么是图片内容安全,图片内容安全(Image Moderation System,IMS)是一款图片内容智能识别服务。能够对图片文件进行多样化场景检测,精准识别图片中出现可能令人反感、不安全或不适宜内容;帮助我们有效降低内容违规风险与有害信息过滤成本。 IMS也能对色情、广告等进行检测,还能自定义检测内容,当然文本内容安全也支持自定义检测内容。
要使用腾讯云的内容安全服务,首先需要注册一个腾讯与账号,并且开通相应的服务(文本内容安全&图片内容安全),然后可以在内容安全控制台创建自己的策略,具体配置教程见官方文档。
我使用的是Java语言进行开发,所以选择接入Java SDK进行接入,导入以下坐标
- <dependency>
- <groupId>com.tencentcloudapigroupId>
- <artifactId>tencentcloud-sdk-java-cvmartifactId>
- <version>3.1.528version>
- dependency>
- <dependency>
- <groupId>com.tencentcloudapigroupId>
- <artifactId>tencentcloud-sdk-java-tmsartifactId>
- <version>3.1.528version>
- dependency>
- <dependency>
- <groupId>com.tencentcloudapigroupId>
- <artifactId>tencentcloud-sdk-java-imsartifactId>
- <version>3.1.528version>
- dependency>
这两个服务都需要用到腾讯云API的访问密钥,因此使用在接入服务之前需要先申请自己的秘钥,申请地址点击这里。获取密钥之后,便可以将其配置到相应的微服务中,由于我使用了Nacos进行注册管理,这里我就将密钥信息放入Nacos配置中心中(密钥已部分删除,不能直接使用):
- tencentcloud:
- secretId: AKIDjLjtq1rSe5JJ3
- secretKey: bxDFH66IH1glxeASULOJ
- package com.my.common.tencentcloud;
-
-
- import com.alibaba.fastjson.JSON;
- import com.alibaba.fastjson.JSONObject;
- import com.tencentcloudapi.common.Credential;
- import com.tencentcloudapi.common.profile.ClientProfile;
- import com.tencentcloudapi.common.profile.HttpProfile;
- import com.tencentcloudapi.common.exception.TencentCloudSDKException;
- import com.tencentcloudapi.tms.v20201229.TmsClient;
- import com.tencentcloudapi.tms.v20201229.models.*;
- import lombok.Getter;
- import lombok.Setter;
- import org.springframework.boot.context.properties.ConfigurationProperties;
- import org.springframework.stereotype.Component;
-
- import java.nio.charset.StandardCharsets;
- import java.util.Base64;
-
- @Getter
- @Setter
- @Component
- @ConfigurationProperties(prefix = "tencentcloud")
- public class TextDetection {
- private String secretId;
- private String secretKey;
- public JSONObject greenTextDetection(String text) throws TencentCloudSDKException {
- // 实例化一个认证对象,入参需要传入腾讯云账户secretId,secretKey,此处还需注意密钥对的保密
- Credential cred = new Credential(secretId, secretKey);
-
- // 实例化一个http选项,可选的,没有特殊需求可以跳过
- HttpProfile httpProfile = new HttpProfile();
- httpProfile.setEndpoint("tms.tencentcloudapi.com");
-
- // 实例化一个client选项,可选的,没有特殊需求可以跳过
- ClientProfile clientProfile = new ClientProfile();
- clientProfile.setHttpProfile(httpProfile);
-
- // 实例化要请求产品的client对象,clientProfile是可选的
- TmsClient client = new TmsClient(cred, "ap-guangzhou", clientProfile);
- // 实例化一个请求对象,每个接口都会对应一个request对象
- TextModerationRequest req = new TextModerationRequest();
-
- //Base64加密
- String encryptionText = Base64.getEncoder().encodeToString(text.getBytes(StandardCharsets.UTF_8));
- //设置内容参数
- req.setContent(encryptionText);
-
- // 返回的resp是一个TextModerationResponse的实例,与请求对象对应
- TextModerationResponse resp = client.TextModeration(req);
-
- // 输出json格式的字符串回包
- String result = TextModerationResponse.toJsonString(resp);
- return JSON.parseObject(result);
- }
- }
- package com.my.common.tencentcloud;
-
- import com.alibaba.fastjson.JSON;
- import com.alibaba.fastjson.JSONObject;
- import com.tencentcloudapi.common.exception.TencentCloudSDKException;
- import lombok.Getter;
- import lombok.Setter;
- import org.springframework.boot.context.properties.ConfigurationProperties;
- import org.springframework.stereotype.Component;
- import com.tencentcloudapi.common.Credential;
- import com.tencentcloudapi.common.profile.ClientProfile;
- import com.tencentcloudapi.common.profile.HttpProfile;
- import com.tencentcloudapi.ims.v20201229.ImsClient;
- import com.tencentcloudapi.ims.v20201229.models.*;
-
- @Getter
- @Setter
- @Component
- @ConfigurationProperties(prefix = "tencentcloud")
- public class ImageDetection {
- private String secretId;
- private String secretKey;
-
- public JSONObject greenImageDetection(String imageUrl) throws TencentCloudSDKException {
- // 实例化一个认证对象,入参需要传入腾讯云账户secretId,secretKey,此处还需注意密钥对的保密
- Credential cred = new Credential(secretId, secretKey);
-
- // 实例化一个http选项,可选的,没有特殊需求可以跳过
- HttpProfile httpProfile = new HttpProfile();
- httpProfile.setEndpoint("ims.tencentcloudapi.com");
-
- // 实例化一个client选项,可选的,没有特殊需求可以跳过
- ClientProfile clientProfile = new ClientProfile();
- clientProfile.setHttpProfile(httpProfile);
-
- // 实例化要请求产品的client对象,clientProfile是可选的
- ImsClient client = new ImsClient(cred, "ap-guangzhou", clientProfile);
-
- // 实例化一个请求对象,每个接口都会对应一个request对象
- ImageModerationRequest req = new ImageModerationRequest();
- //设置图片url地址
- req.setFileUrl(imageUrl);
-
- // 返回的resp是一个ImageModerationResponse的实例,与请求对象对应
- ImageModerationResponse resp = client.ImageModeration(req);
-
- // 输出json格式的字符串回包
- String result = ImageModerationResponse.toJsonString(resp);
-
- return JSON.parseObject(result);
- }
- }
两个服务返回的参数基本相同,见下表:
我这里主要用到的参数是SubLabel参数,其包含Block(建议屏蔽)、Review(建议人工复审)、Pass(通过)三种类型。
- @Autowired
- private TextDetection textDetection;
- @Autowired
- private ImageDetection imageDetection;
-
- @Test
- public void textTest() throws TencentCloudSDKException {
- JSONObject result_json = textDetection.greenTextDetection("冰毒");
- String result = (String) result_json.get("Suggestion");
-
- System.out.println(result);
- }
可以看到建议屏蔽。
检测图片:是一个冰毒图片,由于放上来会造成图片违规,这里就不放上来了,需要说明的是好像IMS对于纯图片识别效果不是很好,要是上面包含某些违规文字能够检测出来,应该是使用了OCR技术。
- @Test
- public void imageTest() throws TencentCloudSDKException {
- JSONObject result_json = imageDetection.greenImageDetection("http://49.234.52.192:9000/headlines/2022/07/21/e3428ce741f04602b6984196af18c4d4.png");
- String result = (String) result_json.get("Suggestion");
- System.out.println(result);
- }
可以看到建议屏蔽。
腾讯云T-Sec 天御的内容安全检测结果还是挺靠谱的,还能自定义检测内容,大大提高了检测的精准度,而且调用起来十分方便,用来做项目练手很不错。