数据诊断
基础统计分析 用于分析哪些字段适合作为模型特征，而缺失率高、取值异常的特征可以丢弃。异常行为分析 在 用户(user)/物品(item)/用户-物品对(pair)粒度下,对上下游行为计数,并统计转化率,并统计不同粒度下的异常率,以及上述统计指标的分布...
基础统计分析
常用于分析哪些字段适合作为模型特征，而缺失率高、取值异常的特征可以丢弃。默认会对数据导入的全部字段进行分析 当字段类型为 float，double 时，作为连续值统计其取值；当字段类型为 string，boolean 时，作为离散值统计其取值的频数；...
特征管理
本文介绍了在PolarDB for AI中，特征管理的适用场景，以及创建特征、更新特征、查看特征状态、查看特征列表以及删除特征的语法及其示例内容。适用场景 从原始数据直接构建机器学习模型往往比较困难。机器学习模型的输入一般会先对原始数据...
App端性能体验功能说明
您可能发现您的产品后台和产品文档中的UI略有差异，但是这不影响您的使用以及产品功能，您可以参考此文档进行产品功能学习 开关与采样配置 安卓平台：iOS平台：您可以在产品后台中灵活进行开关和采样率的配置，此处的配置下发到SDK后优先级...
使用EasyRec构建推荐模型
EasyRec可以帮助您快速构建推荐模型。本文以读取MaxCompute表数据为例，介绍如何使用EasyRec进行模型训练、配置任务例行化及部署模型。前提条件 开通OSS，并创建Bucket，详情请参见 开通OSS服务 和 控制台创建存储空间。重要 创建Bucket时...
PAI-REC推荐算法定制的最佳实践文档
阅读指引：为方便用户快捷体验PAI-REC产品，本文提供了一份公开数据集，用户可按照文档说明按步体验PAI-REC推荐算法定制的召回、特征工程、精排等关键功能的配置，生成代码并部署到 DataWorks 相应的业务流程中。1.克隆公开数据集 我们在可...
EasyRec Processor（推荐打分服务）
contextFeatures:context特征,特征之间用\u0002(CTRL_B)分隔,特征名和特征值之间用:分割,特征值和特征值之间用:分隔。ctxt_fea0:ctxt_fea0_ival0:ctxt_fea0_ival1:ctxt_fea0_ival2\u0002ctxt_fea1:ctxt_fea1_ival0:ctxt_fea1_ival1:ctxt_...
召回配置
类型 是否必填 描述 Name string 是 召回的自定义名称，可以在 SceneConfs 中引用 RecallType string 是 引擎内置召回类型，枚举值，目前支持：●UserCollaborativeFilterRecall●UserTopicRecall●VectorRecall●UserCustomRecall●...
分区表简介
因此，您可以分解资源密集型任务，例如重建索引或表。您可以一次移动一个表分区。如果出现问题，则只需重做分区移动，而不是表移动。此外，如果分区设计中考虑了使用模式，则可以通过添加或删除分区来完成批量加载和删除。使用DROP TABLE...
分区表简介
因此，您可以分解资源密集型任务，例如重建索引或表。您可以一次移动一个表分区。如果出现问题，则只需重做分区移动，而不是表移动。此外，如果分区设计中考虑了使用模式，则可以通过添加或删除分区来完成批量加载和删除。使用DROP TABLE...
分区表简介
因此，您可以分解资源密集型任务，例如重建索引或表。您可以一次移动一个表分区。如果出现问题，则只需重做分区移动，而不是表移动。此外，如果分区设计中考虑了使用模式，则可以通过添加或删除分区来完成批量加载和删除。使用DROP TABLE...
FeatureStore公测版发布
中心化的特征管理和共享平台，用于组织、存储和管理AI训练中使用的特征 适用客户 对离在线一致性要求高，管理多个数据源的在线推荐，金融风控等场景的客户 新增功能/规格 特征平台可以方便的向多人、多团队共享特征，保证离线在线的一致性...
主成分分析
特征分解方式 分解特征的方式，取值如下：CORR COVAR_SAMP COVAR_POP 数据转换方式 转换为新数据的处理方式，取值如下：Simple Sub-Mean Normalization 执行调优 生命周期 指定输出表的生命周期，取值为正整数。节点个数 与 单个节点内存...
发布特征
说明 已发布的特征不可以删除。前提条件 您已成功创建特征组并完成特征列表配置。具体操作，请参见 新建特征组。操作步骤 登录 蚂蚁隐私计算服务平台。在左侧导航栏，选择 我的资源>数据资产。在 数据资产管理 页面，单击 特征组 页签，...
com.aliyun.opensearch.cava
用户可以使用这些特征库来计算查询词和文档的相关性，匹配查询请求与文档的标签并进行加权，获取文档的人气分等。类列表：功能类 类名称 类简介 TagMatch 匹配文档和请求中的标签 Util 提供了一系列常用的功能型函数，比如衰减函数，归一化...
com.aliyun.opensearch.cava
用户可以使用这些特征库来计算查询词和文档的相关性，匹配查询请求与文档的标签并进行加权，获取文档的人气分等。类列表：功能类 类名称 类简介 TagMatch 匹配文档和请求中的标签 Util 提供了一系列常用的功能型函数，比如衰减函数，归一化...
何时选择HASH分区
对于分布规则不明显的数据，并没有明显的范围查找等特征，可以使用HASH分区，将数据分区列的值按照HASH算法打散到不同的分区上，将数据随机分布到各个分区。使用HASH分区的目的如下：使分区间数据分布均匀，分区间可以并行访问；根据分区键...
文本审核服务在决策引擎中的应用
您也可以将内容安全服务返回的标签转化为主体（即账号、设备、IP等）维度的风险特征进行防控，以提升主体的准确率和效率。应用场景 说明 内容安全文本审核服务在决策引擎中的应用 如果您已经完成决策引擎对接，则无需再次对接内容安全接口...
特征管理
特征管理介绍 OpenSearch推出了定制排序模型功能，特征管理可用于为定制排序模型添加所需的特征表，并支持创建、编辑特征名称、特征类型以及来源字段。添加特征表 创建 行业模板 之后，进入开放搜索 控制台 页面，左侧导航栏选择：...
CC攻击防护最佳实践
对于上述异常的请求特征，您都可以在特征分析的基础上，使用WAF 自定义防护策略 的 ACL访问控制 规则设置对应的封禁策略。具体操作，请参见 设置自定义防护策略。配置示例：拦截不带cookie的请求。拦截不带authorization头的请求。滥刷接口...
FeatureStore Python SDK
背景信息 特征平台是用来生产、共享和管理机器学习模型特征的存储库，可以方便地向多人、多团队共享特征，保证离线在线的一致性，并提供高效的在线特征访问。特征平台基本适用于所有需要特征的场景，典型场景如推荐场景。特征表注册在特征...
数据处理
单击特征名，可以查看特征取值分布的统计。数据切分。解析后的数据帧，可以选择切分工具，按照自定义比例进行数据切分。帮助您自动划分训练集、验证集和测试集，划分时按照种子随机切分。单击 切分。单击 创建，得到拆分后的数据帧文件。
精排配置
模型配置 在精排阶段，一般会调用 EAS 上面的算法模型服务来获取得分，EAS 支持多种类型模型的部署，PAI-REC也支持不同模型的调用，包括 pmml、ps、alink、tensorflow、easyrec等，...如果不需要传特征，可以配置成"ContextFeatures":["none"]
一致性检查
传入的上下文特征没有，或者在线服务没有构造出相关特征 特征值不匹配，在线的特征值的处理逻辑或者方法与离线的构造不一致 模型的特征处理逻辑有误，processor在打分之前，如果需要对特征的处理，比如EasyRec，这块特征处理涉及特征加载、...
方案扩展
具体的用户特征分析可以依靠表格存储+MaxCompute。创建一个广告账号：新生广告。让这些具有新生特征的用户虚拟关注新生广告账号。用户侧看不到这一层关注关系。从七月份开始就通过新生广告账号发送广告。每个用户可能会有多个特征，那么就...
工作原理
针对文本的自动化、智能化分析应该具备以下特征：可以高效地处理海量日志。可以定位日志中的异常情况，或者缩小需要排查的异常范围。提供可配置的参数使用户可以根据业务需求对日志文本分析进行定制化配置。针对上述特征，日志服务推出文本...
工作原理
日志服务智能异常分析App提供模型训练和实时巡检功能，支持对日志、指标等数据进行自动化、智能化、自适应地模型...特征工程：包括同环比特征、平移特征、趋势特征、窗口特征、时间特征等。集成模型：通过集成多个树模型来构建最终的模型。
内容安全文本审核服务在决策引擎中的应用
将文本维度的风险转化为主体维度的风险特征 您可以将文本维度的风险转化为“主体”维度（账号、设备、ip等）的风险，提升处置的准确率及效率。例如，对于每个账号发送的广告类消息有一定容忍度，但超过限度则进行处罚。通过决策引擎透传...
网格优化中心概述
通过探测节点的特征，可以更好地理解节点所具备的支撑能力，例如可以根据Kernel版本判断是否支持eBPF的相关功能，根据是否支持AVX扩展指令集决定开启TLS加解密处理能力，或者判断是否提供了Device Plugin等。也就是说，通过检测Kubernetes...
人脸特征算法上云
本文档用来指导厂商提供特征算法上云服务镜像，在保持算法独立性的前提下实现人脸特征下发。IoT门禁服务向设备下发人脸权限时默认使用图片的方式，核心原因是为了更好的兼容性，下发图片后由端侧设备计算人脸特征值。之所以采用这种方式，...
拓展组件
该图元的主要特征：可以在数据中指定单个图标位置、图标图片、尺寸、颜色、表达空间、种类、数量关系。支持单个要素的选取。具有呼吸动画。不受光照影响。性能开销极小，可支持万级数据。属性名称 参数 说明 二维图标组件 配置资产 选择...
数据探索函数
可以看到集群的用电量随着设备数量的增长一直在上升。统计设备的功耗信息如周期曲线所示，可以看到其功耗是随着任务的不同而变化的。残差项指出了设备工作环境中的随机因素，如温度，湿度等因素对于设备功耗的影响。说明 本示例是从自定义...
访问列存数据
列存提供丰富的索引能力和数据分布特征，可以有效加速计算过程中的数据定位与排布，通过SQL即可完成海量主键数据的增删改查。高吞吐 列存引擎吞吐能力支持水平扩展，提供每分钟TB级数据的读写能力。适用于车联网数据快速导入、模型训练数据...
使用FeatureStore Python SDK搭建推荐系统
特征视图定义了数据从哪里来（DataSource）、需要进行哪些预处理或转换操作（如特征工程/Transformation）、特征的数据结构（包含特征名称和类型在内的特征schema）、数据存储的位置（OnlineStore/OfflineStore），并提供特征元信息管理，...
2.3 门禁设备与手机蓝牙对接协议
每个具体的 characteristic 特征值才是 BLE 通信的主体，characteristic 特征值可以理解为标签，通过这个标签可以获取和写入想要的内容。1.4.3 characteristic 属性 characteristic 的属性有以下几种：read，constant，write，write_no_...
任务中心
FeatureStore 为您提供任务中心功能，记录了数据离在线同步、训练样本导出等任务的日志详细信息，您可以在特征项目中的任务中心中查看当前项目的所有任务及任务状态。前提条件 已创建特征项目。操作详情请参见 新建项目。操作步骤 进入特征...
分箱
通过分箱组件可以进行特征离散化，即将连续的数据进行分段，使其变为多个离散化区间。分箱组件支持等频分箱、等宽分箱及自动分箱。配置组件 您可以使用以下任意一种方式，配置分箱组件参数。方式一：可视化方式 在 Designer 工作流页面配置...
如何设置数据特征中的最小值和最大值
您可以设置 特征 为cpu_usage，取值范围 为0~100，分段 为10。设置完成后，模型将0~100划分为10个桶，各个数据点（CPU使用率指标的值）会落入对应的桶中。例如数据点为101时，超出最小值和最大值范围，模型将输出异常分数为1.0的异常事件，...
组合多个索引
例如，WHERE x=42 OR x=47 OR x=53 OR x=99 这样一个查询可以被分解成为四个独立的在 x 上索引扫描，每一个扫描使用其中一个条件。这些查询的结果将被“或”起来形成最后的结果。另一个例子是如果我们在 x 和 y 上都有独立的索引，WHERE x=...
参数说明
参数使用 EMR Workflow支持$[.]格式的内置时间参数，$[yyyyMMddHHmmss]是可以任意分解组合的，例如$[yyyyMMdd]、$[HHmmss]、$[yyyy-MM-dd]等。您也可以通过以下两种方式对时间参数进行修改：使用 add_months()函数，该函数用于加减月份，...
- 产品推荐
- 这些文档可能帮助您