鸿蒙HarmonyOS开发实战—AI功能开发（分词）

id="article_content" class="article_content clearfix"> id="content_views" class="htmledit_views">

分词概述

随着信息技术的发展，网络中的信息量成几何级增长逐步成为当今社会的主要特征。准确提取文本关键信息，是搜索引擎等领域的技术基础，而分词作为文本信息提取的第一步则尤为重要。

分词作为自然语言处理领域的基础研究，衍生出各类不同的文本处理相关应用。

基本概念

分词模块提供了文本自动分词的接口，对于一段输入文本，可以自动进行分词，同时提供不同的分词粒度。开发者可以根据需要自定义分词粒度。

约束与限制
  • 当前只支持中文语境。
  • 分词文本限制在500个字符以内，超过字符数限制将返回参数错误。文本需要为UTF-8格式，格式错误不会报错，但分析结果会不准确。
  • Engine支持多用户同时接入，但是不支持同一用户并发调用同一特性。若同一个特性被同一进程同一时间多次调用，则返回系统忙错误；不同进程调用同一特性，则同一时间只能处理一个进程业务，其他进程进入队列排队。

分词开发

场景介绍
  • 分词相关接口可以应用于搜索引擎开发。对于搜索引擎而言，最重要的是如何把全网搜索的结果进行筛选，并按相关程度进行排序。分词的准确与否，常常直接影响到搜索结果的相关度排序。
  • 分词相关接口可以应用于用户选择文本的场景。原始文本只能按字选择，如果使用分词，用户选中文本的时候可以按词选择。
接口说明

分词API的主要功能是将一个汉字序列切分成一个一个单独的词，可自定义分词的粒度。

主要接口

class="table-box">

接口名

功能描述

ResponseResult getWordSegment(String requestData, int requestType)

分词，同步接口

ResponseResult getWordSegment(final String requestData, final int requestType, final OnResultListener listener)

分词，异步接口

init(Context context, OnResultListener listener, boolean isLoadModel)

初始化NLU服务。在调用NLU等功能接口前需要先调用此接口，在OnResultListener的onResult(T)方法中获取到回调结果后，再调用NLU功能接口。开发者传入listener参数作为回调，用于等待NLU功能接口的调用过程和结果。

void destroy(Context context)

取消所有NLU任务，销毁NLU引擎服务。调用此方法后，无法再使用NLU服务。如果需要重新使用NLU服务，需要重新调用init(Context, OnResultListener, boolean)}来初始化NLU服务。

接口输入值说明

requestType表示请求类型，通过NluRequestType类定义如下：

class="table-box">

类型

说明

static int

REQUEST_TYPE_LOCAL = 0，本地请求。

requestData表示输入的文本信息，为JSON格式，如下：

class="table-box">

参数名

是否必选

值类型

说明

text

是

String

待分析的文本，utf-8，文本长度不超过500个字符。

type

否

long

分词的粒度，默认为0。取值包括： 0：基本词，粒度较小。如“我要看速度与激情”，分成“我/要/看/速度/与/激情”。1：在基本词的基础上，做实体合并。例如：“我要去江宁万达广场看速度与激情”，分成“我/要/去/江宁万达广场/看/速度/与/激情”。 对于没有可合并实体的文本信息，其分词效果与type为0的分词效果相同。例如：“明天下午3点一起看电影”，分成“明天/下午/3点/一起/看/电影”。 9223372036854775807（2的63次方减1）：在type为1的基础上，把实体时间、地点等整体结构合并，出现符号隔开不合并，并把一些常用短语合并。如“形容词+的”，“单字动词+单字名词”等，简化句子成分。 例如“明天下午三点到五点我在江宁瑞都金逸影城看电影”，分成“明天下午三点/到/五点/我/在/江宁瑞都金逸影城/看/电影”。

callPkg

否

String

调用者名称。

callType

否

int

调用者类型： 0：普通应用（默认）1：快应用

callVersion

否

String

调用者版本号。

callState

否

int

调用者状态： -1：未知（默认）0：前台1：后台

  • 0：基本词，粒度较小。如“我要看速度与激情”，分成“我/要/看/速度/与/激情”。
  • 1：在基本词的基础上，做实体合并。例如：“我要去江宁万达广场看速度与激情”，分成“我/要/去/江宁万达广场/看/速度/与/激情”。 对于没有可合并实体的文本信息，其分词效果与type为0的分词效果相同。例如：“明天下午3点一起看电影”，分成“明天/下午/3点/一起/看/电影”。
  • 9223372036854775807（2的63次方减1）：在type为1的基础上，把实体时间、地点等整体结构合并，出现符号隔开不合并，并把一些常用短语合并。如“形容词+的”，“单字动词+单字名词”等，简化句子成分。 例如“明天下午三点到五点我在江宁瑞都金逸影城看电影”，分成“明天下午三点/到/五点/我/在/江宁瑞都金逸影城/看/电影”。

callPkg 否 String 调用者名称。 callType 否 int 调用者类型：

  • 0：普通应用（默认）
  • 1：快应用

callVersion 否 String 调用者版本号。 callState 否 int 调用者状态：

  • -1：未知（默认）
  • 0：前台
  • 1：后台

目前NLU支持的实体类别：

class="table-box">

实体类别

备注

电影

依赖字典，要求真实用例，勿做修改。

电视剧

依赖字典，要求真实用例，勿做修改。

综艺

依赖字典，要求真实用例，勿做修改。

动漫

依赖字典，要求真实用例，勿做修改。

火车车次

要求真实用例，勿做修改。

航班号

要求真实用例，勿做修改。

球队

依赖字典，支持NBA、CBA、英超、西甲、德甲、意甲、法甲、中超的球队识别，要求真实用例，勿做修改。

人名

要求真实用例，勿做修改。

快递单号

要求真实用例，勿做修改。

电话号码

要求真实用例，勿做修改。

url

要求真实用例，勿做修改。

邮箱

要求真实用例，勿做修改。

联赛

NBA、CBA、英超、西甲、德甲、意甲、法甲、中超，要求真实用例，勿做修改。

时间

要求真实用例，勿做修改。

地点

包含酒店、餐馆、景点、学校、道路、省、市、县、区、镇等，部分依赖字典。

验证码

用例真实，勿做修改。

接口返回值说明

返回值ResponseResult中responseResult为JSON字符串，体现分词的结果：

class="table-box">

参数名

是否必选

值类型

说明

code

是

int

结果码。取值包括： 0：成功1：系统正在初始化2：参数错误3：系统忙4：系统异常5：任务超时6：其它错误

message

是

String

错误信息

words

否

JSONArray

切分出的词数组，数组里每一项的类型均为JSONObject。

message 是 String 错误信息 words 否 JSONArray 切分出的词数组，数组里每一项的类型均为JSONObject。

开发步骤

1. 在使用分词API时，将实现分词的相关类添加至工程

  1.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="1">
class="hljs-ln-code"> class="hljs-ln-line">import ohos.ai.nlu.NluRequestType;
  • class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="2"> class="hljs-ln-code"> class="hljs-ln-line">import ohos.ai.nlu.NluClient;
  • class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="3"> class="hljs-ln-code"> class="hljs-ln-line">import ohos.ai.nlu.OnResultListener;
  • class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="4"> class="hljs-ln-code"> class="hljs-ln-line">import ohos.ai.nlu.ResponseResult;
    •  class="hljs-button signin active" data-title="登录复制" data-report-click="{"spm":"1001.2101.3001.4334"}" onclick="hljs.signin(event)">

    复制

    2. 使用NluClient静态类进行初始化，通过异步方式获取服务的连接。

    1.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="1"> class="hljs-ln-code"> class="hljs-ln-line">NluClient.getInstance().init(context, new OnResultListener<Integer>(){
    2.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="2"> class="hljs-ln-code"> class="hljs-ln-line">        @Override
    3.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="3"> class="hljs-ln-code"> class="hljs-ln-line">        public void onResult(Integer result){
    4.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="4"> class="hljs-ln-code"> class="hljs-ln-line">         // 初始化成功回调，在服务初始化成功调用该函数
    5.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="5"> class="hljs-ln-code"> class="hljs-ln-line">        }
    6.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="6"> class="hljs-ln-code"> class="hljs-ln-line">}, true);
     class="hljs-button signin active" data-title="登录复制" data-report-click="{"spm":"1001.2101.3001.4334"}" onclick="hljs.signin(event)">

    复制

    3. 调用分词方法得到分析结果，接口提供同步和异步两个方法，开发者可根据自己需要选择。

    1.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="1"> class="hljs-ln-code"> class="hljs-ln-line">String requestData = "{\"text\":\"今天天气不错，我们一起看电影吧\\n\",\"type\":0}";
    2.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="2"> class="hljs-ln-code"> class="hljs-ln-line">ResponseResult responseResult = NluClient.getInstance().getWordSegment(requestData, NluRequestType.REQUEST_TYPE_LOCAL);
     class="hljs-button signin active" data-title="登录复制" data-report-click="{"spm":"1001.2101.3001.4334"}" onclick="hljs.signin(event)">

    复制

    1.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="1"> class="hljs-ln-code"> class="hljs-ln-line">NluClient.getInstance().getWordSegment(requestData,
    2.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="2"> class="hljs-ln-code"> class="hljs-ln-line">            NluRequestType.REQUEST_TYPE_LOCAL, new OnResultListener<ResponseResult>() {
    3.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="3"> class="hljs-ln-code"> class="hljs-ln-line">                @Override
    4.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="4"> class="hljs-ln-code"> class="hljs-ln-line">                public void onResult(ResponseResult result) {
    5.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="5"> class="hljs-ln-code"> class="hljs-ln-line">                   // onResult deal
    6.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="6"> class="hljs-ln-code"> class="hljs-ln-line">                }
    7.  class="hljs-ln-numbers"> class="hljs-ln-line hljs-ln-n" data-line-number="7"> class="hljs-ln-code"> class="hljs-ln-line">            });
     class="hljs-button signin active" data-title="登录复制" data-report-click="{"spm":"1001.2101.3001.4334"}" onclick="hljs.signin(event)">

    复制

    4. 解绑服务。

    NluClient.getInstance().destroy(context); class="hljs-button signin active" data-title="登录复制" data-report-click="{"spm":"1001.2101.3001.4334"}" onclick="hljs.signin(event)">

    最后，为了能让大家更好的去学习提升鸿蒙 (Harmony OS) 开发技术，小编连夜整理了一份30个G纯血版学习资料（含视频、电子书、学习文档等）以及一份在Github上持续爆火霸榜的《纯血版华为鸿蒙 (Harmony OS)开发手册》（共计890页），希望对大家有所帮助。

    纯血版鸿蒙 HarmonyOS 4.0 视频学习资料

     需要以上视频学习资料小伙伴

    请点击→纯血版全套鸿蒙HarmonyOS学习资料

    《纯血版华为鸿蒙 (Harmony OS)开发手册》

    这份手册涵盖了当前鸿蒙 (Harmony OS) 开发技术必掌握的核心知识点

    纯血版鸿蒙 (Harmony OS)开发手册部分精彩内容

    HarmonyOS 概念：

    如何快速入门？


    开发基础知识： 

    基于ArkTS 开发：

    获取以上文中提到的这份纯血版鸿蒙 (Harmony OS) 开发资料的小伙伴 

    请点击→纯血版全套鸿蒙HarmonyOS学习资料

    🚀写在最后

    data-report-view="{"mod":"1585297308_001","spm":"1001.2101.3001.6548","dest":"https://blog.csdn.net/shudaoshanQAQ/article/details/135796869","extend1":"pc","ab":"new"}">>
    注：本文转载自blog.csdn.net的蜀道山QAQ的文章"https://blog.csdn.net/shudaoshanQAQ/article/details/135796869"。版权归原作者所有，此博客不拥有其著作权，亦不承担相应法律责任。如有侵权，请联系我们删除。
    复制链接
    复制链接
    相关推荐
    发表评论

    评论记录：

    未查询到任何数据！