工作原理
日志服务提供文本分析服务，用于对海量日志中的文本内容进行自动化和智能化的检测。本文介绍文本分析功能的背景信息、功能介绍、基本概念、调度与执行场景、使用建议等信息。背景信息 服务在运行过程中会生成大量的日志，包括系统日志和...
通过消费组读取文本日志进行模板发现
通识字段模板 在文本分析作业对日志进行预处理时，日志相似聚类算法会使用模板表达式匹配日志中的文本内容并将其替换为模板名称，有助于提高分析的准确性。例如 模板名称 为IP，模板表达式 为(?[^A-Za-z0-9])|^)(\d{1,3}\.\d{1,3}\.\d{1,3}...
通过消费组读取文本日志进行模板匹配
通识字段模板 在文本分析作业对日志进行预处理时，日志相似聚类算法会使用模板表达式匹配日志中的文本内容并将其替换为模板名称，有助于提高分析的准确性。例如 模板名称 为 IP，模板表达式 为(?[^A-Za-z0-9])|^)(\d{1,3}\.\d{1,3}\.\d{1,3...
算法说明
日志服务异常智能分析应用提供文本分析功能，用于对日志中的文本日志进行智能化、自动化的分析，提供全局的统计分析结果。文本分析功能通过 日志模板发现 和 日志模板匹配 两个子任务，实现对于日志数据的监控和统计。您可以根据待分析的...
操作指南
NLP自然语言处理 基础文本服务 电商行业能力 对话智能服务 通用行业能力 医疗文本分析 NLP自学习平台 实体抽取 文本分类 文本关系抽取 双句文本分类 商品评价解析 合同要素抽取 文本匹配 对话文本分类 司法裁判文书（事实认定）合同抽取 ...
异常类型说明
本文介绍文本分析结果的异常类型。文本分析结果数据保存在名为internal-ml-log的Logstore中，您可以通过该数据中的 result.type 字段和 result.anomaly_type 字段分析异常类型。更多信息，请参见 结果字段说明。判断条件 异常类型说明 ...
基于文本分析算法实现新闻分类
基于文本分析算法实现新闻分类 进入PAI-Designer页面。登录 PAI控制台。在左侧导航栏单击 工作空间列表，在工作空间列表页面中单击待操作的工作空间名称，进入对应工作空间内。在工作空间页面的左侧导航栏选择 模型开发与训练>可视化建模...
产品简介
10/五、医疗行业能力 算法服务 支持领域 API基础信息 免费额度 默认QPS 是否支持定制 最大文本长度 医疗文本分析 诊断归一 医疗文本分析（诊断归一）累计500次 20 否 50个字符 药品归一 医疗文本分析（药品归一）累计500次 20 否/手术归一 ...
预训练模型（平台预置模型）
服务调用 模型调用文档参考：模型调用 SDK示例文档参考：SDK示例 API接口列表 电商行业能力 模型名称 模型说明 默认QPS 最大文本长度 商品评价解析-电商领域 支持55种电商领域的行业和192个评价属性，提供多维度商品评价文本分析。...
产品简介
500个字符 商品评价解析-本地生活领域 支持美容美发美甲、餐饮美食2种本地生活领域的行业和11个评价属性，提供多维度商品评价文本分析。500个字符 商品评价解析-汽车领域 支持汽车领域68个评价属性，提供多维度商品评价文本分析。500个字符...
阿里云ES机器学习
ES提供了多种内置的文本分析器和分词器，如标准分词器、N-gram分词器、拼音分词器等，主要基于文本的字面形式进行分析和索引，缺乏语义理解，上下文感知，歧义消除等能力。为了克服这些限制，可以将ES与text embedding模型相结合，这些模型...
智能异常分析概述
智能异常分析应用是一个可托管、高可用、可扩展的服务，主要提供智能巡检、文本分析和根因诊断三大能力。本文介绍智能异常分析应用的产品架构、功能优势、适用场景、核心名词、使用限制和费用说明等信息。重要 目前仅限白名单用户使用根因...
产品简介
自然语言处理（Natural Language Processing，简称NLP），是为各类企业及开发者提供的用于文本分析及挖掘的核心工具，旨在帮助用户高效的处理文本，已经广泛应用在电商、文娱、司法、公安、金融、医疗、电力等行业客户的多项业务中，取得了...
召回定制分析器
功能简介 分词作为搜索引擎中一个重要的基础组件，分词效果会直接影响搜索结果。由于业务场景的多样性，不同行业不同客户都有各自的特殊性，只有具体到客户应用级别的定制分词才能对每一个客户分词...近期定制分析器的类型仅开放文本分析器；
游戏行业算法版
（5）完成配置：查询测试 搜索测试 1、索引构建完成后可在 功能扩展>搜索测试 页面对游戏行业算法版的行业文本分析器对应的索引进行测试：以default索引为例，query子句填入：default:'游戏' 向量检索 如需测试向量检索功能请按如下流程...
召回定制词权重
1、依次点击 开放搜索->召回配置->定制召回模型->创建 创建召回定制-词权重模型：按要求填写模型名，选择词权重模型并选择需要训练的字段，最后点击 确认：配置参数：模型名称：按提示填写例（ly_tets）模型类型：当前可选文本分析器模型、...
索引结构
系统自带的default索引只能包含TEXT类型字段 分析方式介绍 文本分析器：用于文本分词召回（中英文、通用行业、IT内容、电商、教育等）、数值或定长字符精确匹配、模糊匹配、范围搜索（地理位置、时间范围、数值范围）；向量分析器：多维度...
内容社区行业算法版
（5）完成配置：查询测试 搜索测试 索引构建完成后可在 功能扩展>搜索测试 页面对内容社区行业算法版的行业文本分析器对应的索引进行测试：以default索引为例，query子句填入：default:'企业' 向量检索 如需测试向量检索功能请按如下流程...
电商行业算法版
(4) 数据源：（下面以RDS数据源为例进行说明）填写数据源配置信息： 设置字段映射： (5)配置完成： 查询测试 搜索测试 索引构建完成后可在 功能扩展>搜索测试 页面对电商行业算法版的行业文本分析器对应的索引进行测试：#...
教育行业算法版
（5）完成配置：查询测试 搜索测试 索引构建完成后可在 功能扩展>搜索测试 页面对教育行业算法版的行业文本分析器对应的索引进行测试：以default索引为例，query子句填入：default:'教育' 向量检索 如需测试向量检索功能请按如下流程操作...
组件参考：所有组件汇总
停用词过滤 该组件是文本分析中的一个预处理方法，用于过滤分词结果中的噪声（例如的、是或啊）。ngram-count 该组件是语言模型训练其中一个步骤。在词的基础上生成n-gram，并统计在全部语料集上，对应n-gram的个数。文本摘要 该组件是文献...
教育行业模板-多路搜索
教育拍照搜题场景相比网页/电商的文本搜索有显著差异：搜索Query特别长：常规检索term数上限30，搜题可能需要100 搜索Query可能是由拍照OCR识别之后得到的文本，关键term的识别错误会严重影响召回排序 纯文本查询方案 1.OR逻辑查询：为了...
电商行业模板-多路搜索
介绍 OpenSearch的 多路搜索功能 结合了文本搜索和向量搜索，做到了搜索延迟和计算消耗低于OR逻辑情况下更高的准确性，并在搜题场景已经得到有效验证。多路召回架构还可以使用到：图片向量召回、公式召回、个性化召回等场景中。为什么要多...
多轮对话搜索
它是文本分析过程中的一个重要组件，用于构建倒排索引，以便能够对文本进行搜索和匹配。分析器将输入的文本按照一定的规则进行分割，分析器可以将一个长文本分割成多个词，以便能够对这些词进行索引和搜索。企业搜索提供多种内置的分析器，...
搜索引擎线路
概述 搜索引擎是指搜索引擎爬虫（又被称为网页蜘蛛，网络机器人），是一种按照一定的规则、自动地抓取万维网信息的程序或者脚本。应用场景 网站被搜索引擎爬虫访问会耗费服务器的流量和带宽，可通过设置 搜索引擎线路 专门指向一个服务器...
V4.5.0版本说明
改为由分析者在分析前进行人群配置，将要参与分析的人群同步到Quick BI侧，然后再新建自助分析数据集，这样，分析者就可以自己选择分析哪些人群，并且仅选择能分析自己有权限的人群，请参见 自助分析数据集。用户营销：PUSH营销：触达营销...
产品计费
第一次使用，建议查看 入门介绍 NLP自然语言处理根据算法种类，分为了基础文本服务（基础版、高级版）、电商行业能力、对话智能服务、通用行业能力、医疗文本分析，其中高级版的中文分词和中文命名实体识别支持词表定制。详情请见 管控台，...
搜索增强
对OSS文件数据源,离线数据处理流程会自动对离线数据进行文本chunk分析，必须针对标题或者内容字段勾选文本快切分功能才能触发离线文本分析流程 对数据库数据源，数据库中保存用户已处理数据，这里文本块切分chunk功能可以不勾选 分析器 在...
pg_ts_config
一个配置指定了一个特定的文本搜索分析器和一个用于分析器输出记号的字典列表。分析器由 pg_ts_config 项展现，而记号到字典的映射则由 pg_ts_config_map 中的辅助项定义。列名称 列类型 描述 oid oid 行标识符。cfgname name 文本搜索配置...
性能体验定价及计费说明
支持调整网络分析、卡顿分析、启动分析、H5页面分析、原生页面分析的采样率；支持调整自定义异常的上限以及发送策略。购买管理 支持查看套餐的消耗进度 稳定性监控 原始日志 ☑️ 15天 卡顿模块 ☑️ OOM异常 ☑️ 内存占用 ☑️ 性能分析 ...
pg_ts_parser
pg_ts_parser 目录包含定义文本搜索分析器的项。一个分析器负责将输入文本分割成词位并为每一个词位分配一个记号类型。由于一个分析器必须用 C 语言级别的函数实现，创建新分析器的工作只限于数据库的超级用户。列名称 列类型 描述 oid oid...
暴力破解攻击防御方案
方案优势 充分利用阿里云在安全领域里的情报汇聚能力：通过跨多行业的爬虫行为分析，利用关系网络实现恶意爬虫的扩充发现。爬虫在行业性业务目的方面非常明确，利用生态体系达成行业内协同防御。沉淀网络黑灰产业中已知常用的针对性恶意...
什么是Quick Tracking
通过轻量级的集成接入即可拥有实时、可靠、全面的应用崩溃、ANR、自定义异常等捕获能力，及卡顿、启动分析、内存分析、网络分析等性能监测能力，支持多场景、多通道智能告警监测，帮助开发者高效还原异常、卡顿用户的访问路径和业务现场，...
术语解释
名词 解释 App内反馈 从App...情感分析 对用户反馈中带有情感色彩的主观性文本进行分析。标签分析 对用户反馈基于自定义标签分组进行分析。趋势分析 对用户反馈随时间变化的趋势进行分析。热门反馈 对用户反馈根据内容相似性进行聚合分析。
全文检索
全文检索（Full Text Search）指数据库将自然语言文本转换为可被查询数据的能力。云原生数据仓库AnalyticDB PostgreSQL版 使用PostgreSQL内核，提供完善的全文检索功能。本文介绍 AnalyticDB PostgreSQL版 如何实现“一站式全文检索”业务...
MapReduce
文本统计分析：热门小说的字数统计（WordCount）、词频TFIDF分析。学术论文、专利文献的引用分析和统计。维基百科数据分析。海量数据挖掘：非结构化数据、时空数据和图像数据挖掘。机器学习：监督学习、无监督学习和分类算法（例如决策树、...
使用文本审核增强版识别文本违规风险
文本审核增强版服务通过升级内容安全核心引擎，采用动态策略和模型强化变异对抗性，提供多种业务场景的审核服务，识别出多种违规风险。本文介绍如何使用文本审核增强版。功能特性 与文本检测1.0服务相比较，文本审核增强版服务支持更多的...
什么是网络智能服务
网络智能服务 NIS（Network Intelligence Service）是一个对网络进行健康分析、性能监控、诊断修复、流量分析和测量仿真的云服务，通过集成机器学习、知识图谱等AIOps方法减少网络使用复杂性，提供自助运维能力，方便网络架构师和运维...
功能特性
查看同域流量分析 网络监测与诊断 帮助用户在云上运维阶段更高效地监测网络业务变化和故障诊断排查。功能集 功能 功能描述 参考文档 事件中心 问题事件 展示已经造成业务受损，并且7天内状态一直处于进行中的异常事件列表。查看问题事件 ...
使用路径分析
路径分析是一个配置分析工具，覆盖 ECS 实例互访、ECS 与公网IP地址互访、ECS 与私网IP地址互访、云上 VPC 与云下站点互访等多类应用场景，能够判断源资源和目的资源之间的连通性，诊断网络配置错误引起的连接问题。路径分析介绍 路径分析...
- 产品推荐
- 这些文档可能帮助您