在AnalyticDB MySQL创建测试表
call_center表 create table call_center(cc_call_center_sk bigint not null,cc_call_center_id char(16)not null,cc_rec_start_date date,cc_rec_end_date date,cc_closed_date_sk bigint,cc_open_date_sk bigint,cc_name varchar(50),cc...
Apache Impala（CDH6）查询OSS数据
Query:use `default`[cdh-slave01:21000]default>create external table call_center(>cc_call_center_sk bigint>,cc_call_center_id string>,cc_rec_start_date string>,cc_rec_end_date string>,cc_closed_date_sk bigint>,cc_open_date_...
使用pg_pathman插件
本文介绍pg_pathman插件的一些常见用法。背景信息 为了提高分区表的性能，PolarDB PostgreSQL版 引入了pg_pathman插件。该插件一款分区管理插件，提供了分区优化机制。创建pg_pathman插件扩展 test=create extension pg_pathman;...
使用pg_pathman插件
本文介绍pg_pathman插件的一些常见用法。背景信息 为了提高分区表的性能，PolarDB PostgreSQL版（兼容Oracle）引入了pg_pathman插件。该插件一款分区管理插件，提供了分区优化机制。创建pg_pathman插件扩展 test=create extension pg_...
转换自定义DAG为Pipeline
["rec_tem_item_table_test_preprocess","rec_tem_user_table_test_preprocess","rec_tem_behavior_table_test_preprocess"],"sqlfile":"test/feature/rec_tem_behavior_table_test_preprocess_wide.sql","args":["-num-executors","1"],...
模型导出
Dmodel_dir="oss:/rec_sln_demo/EasyRec/deploy/rec_sln_demo_rec_sln_demo_sorting_v2/20230425"-Dexport_dir="oss:/lcl-hz/rec_sln_demo/EasyRec/deploy/rec_sln_demo_rec_sln_demo_sorting_v2/export/20230425/final_witn_fg"-Darn="acs...
PAI-Rec 引擎配置热加载
PAI-Rec 运行离不开灵活的配置，之前的做法都是配置文件与代码进行打包编译出镜像，然后在 EAS 上进行部署。如果只是更新配置的话，也需要重新编译进行，然后进行部署。频繁的部署会对线上服务造成一定的影响。借助于配置中心的配置功能，...
快速开始
CREATE TABLE rec.contextual_bandit_features(request_id text NOT NULL,user_id bigint NOT NULL,arm_id bigint NOT NULL,recom_time timestamp with time zone NOT NULL,feature text NOT NULL,PRIMARY KEY(user_id,arm_id));...
视频个性化推荐（协同过滤）
节点说明：将过去30天内的用户视频访问行为数据”rec_sln_demo_behavior_table_v1“与行为权重数据”rec_test_etrec_behavior_weight_v1“结合，生成带有行为权重的用户历史偏好统计数据（即带有量化了用户对视频的喜好程度的日志数据）...
友盟IOS SDK使用方法
推荐事件触发函数：/*行为事件类型*/typedef NS_ENUM(NSUInteger,bhvType){ AI_REC_EXPOSE=0,/曝光 AI_REC_STAY,/停留 AI_REC_CLICK,/点击 AI_REC_CART,/加入购物车 AI_REC_BUY,/购买 AI_REC_COLLECT,/收藏 AI_REC_LIKE,/点赞 AI_REC_...
快速导览 PAI-REC 引擎功能
本文提供 docker-compose 文件快速搭建基于 PAI-REC 引擎的推荐服务，可以快速了解 PAI-REC 引擎提供的服务。前提 需要 docker 和 docker-compose 来运行服务。安装 docker 参考 这里。安装 docker-compose 参考 这里。从本文学到什么 1...
RecognizeChinesePassport-中国护照识别
rec_cfd":0.999925,"rec_tcc":"EE1234567"},{"det_cfd":0.639483,"det_cls":4,"det_pts":[478.25,242.25,579.75,242.25,579.75,280.75,478.25,280.75],"rec_cfd":0.999972,"rec_tcc":"读小光"},{"det_cfd":0.625903,"det_cls":3,"det_pts...
排序
rec_sln_demo_user_table_preprocess_all_feature_v2 rec_sln_demo_item_table_preprocess_all_feature_v2 rec_sln_demo_behavior_table_preprocess_v2 实现排序 进入PAI-Designer页面。登录 PAI控制台。在左侧导航栏单击 工作空间列表，在...
向量召回模型拆分
sln_demo_dssm_recall_v1/20230425/export/final-user_model_dir=oss:/rec_sln_demo/EasyRec/deploy/rec_sln_demo_rec_sln_demo_sorting_v1/20230425/export/final/user-item_model_dir=oss:/rec_sln_demo/EasyRec/deploy/rec_sln_demo_...
RecognizeBirthCertification-出生证明识别
1067.5],\"rec_cfd\":0.999938,\"rec_tcc\":\"28\"},{\"det_cfd\":0.762958,\"det_cls\":7,\"det_pts\":[1459.271729,1195.45874,1569.286377,1197.750732,1567.728271,1272.54126,1457.713623,1270.249268],\"rec_cfd\":0.999709,\"rec_...
更新EasyRec配置文件
rec/python/tools/add_feature_info_to_config.py"-Dextra_params="-template_config_path=oss:/rec_sln_demo/EasyRec/deploy/rec_sln_demo_dssm_recall_v1/rec_sln_demo_dssm_recall_v1_template.config-output_config_path=oss:/rec_sln_...
特征工程
分别单击以下节点，将右侧 参数设置 页签的 执行时间窗口 参数由默认的(-45,0]改为(-9,0]：1_rec_sln_demo_item_table_preprocess_v2 2_rec_sln_demo_behavior_table_preprocess_v2 3_rec_sln_demo_user_table_preprocess_v2 4_rec_sln_...
什么是推荐全链路深度定制开发平台PAI-REC
推荐全链路深度定制开发平台PAI-REC（PAI是Platform of AI的缩写，Rec即Recommendation的简称），是适用于企业开发者自主搭建、开发、迭代、运维的一整套推荐系统平台级服务。推荐系统是一个比较复杂的系统化工程，推荐系统分为离线、在线...
DSSM向量召回
rec_sln_demo_user_table_preprocess_all_feature_v2 rec_sln_demo_item_table_preprocess_all_feature_v2 rec_sln_demo_behavior_table_preprocess_v2 实现向量召回 进入PAI-Designer页面。登录 PAI控制台。在左侧导航栏单击 工作空间列表...
游标属性
WHILE emp_cur_1%FOUND LOOP DBMS_OUTPUT.PUT_LINE(v_emp_rec.empno|' '|v_emp_rec.ename);FETCH emp_cur_1 INTO v_emp_rec;END LOOP;CLOSE emp_cur_1;END;调用前面的存储过程时，输出显示如下：EXEC cursor_example;EMPNO ENAME-7369 ...
推荐算法定制的最佳实践文档
本文的目标：提供一份公开数据集，用户可按照文档一步步体验PAI-REC推荐算法定制的召回、特征工程、精排等关键功能的配置，生成代码并部署代码到 DataWorks 上面。同时我们提供补数的流程图，方便用户按照顺序执行补数任务。1.克隆公开数据...
模型训练
该组件实现的EasyRec模型训练功能。前提条件 已开通OSS并完成授权，详情请...更完整的使用方式参考推荐算法定制-排序 节点8_rec_sln_demo_rec_sln_demo_sorting_v2_train和推荐算法定制-向量召回 节点12_rec_sln_demo_dssm_recall_v1_train。
使用FeatureStore Python SDK搭建推荐系统
同步用户表：rec_sln_demo_user_table_preprocess_all_feature_v1（单击查看详情）CREATE TABLE IF NOT EXISTS rec_sln_demo_user_table_preprocess_all_feature_v1 like pai_online_project.rec_sln_demo_user_table_preprocess_all_...
一致性检查
第四步：配置中心调用 PAI-REC 引擎特征重放 API 配置中心在获取到特征日志的同时，根据获得的特征日志，按任务设置的比例，批量地调用 PAI-REC引擎特征重放API（特征重放：指的是带着上面PAI-REC引擎落盘的特征，再请求一次PAI-REC引擎的...
模型预测
该组件实现EasyRec离线预测（predict）功能。前提条件 已完成 模型训练。...更完整的使用方式请参考推荐算法定制-向量召回 节点 13_rec_sln_demo_dssm_recall_item_embedding_v1 和节点 14_rec_sln_demo_dssm_recall_user_embedding_v1。
关闭游标
以下示例说明了 CLOSE 语句的用法：CREATE OR REPLACE PROCEDURE cursor_example IS v_emp_rec emp%ROWTYPE;CURSOR emp_cur_1 IS SELECT*FROM emp;BEGIN OPEN emp_cur_1;FETCH emp_cur_1 INTO v_emp_rec;DBMS_OUTPUT.PUT_LINE('Employee ...
基本概念
在PAI-REC中所有的服务和实验都需要关联一个推荐的场景，例如“首页瀑布流推荐”，“购物车猜你喜欢”，“详情页相关推荐”等等。下面我们介绍创建的细节。推荐场景 我们先创建一个推荐场景（建议场景的名称可以说明推荐场景的页面位置），...
在推荐系统中应用FeatureStore管理特征
同步用户表：rec_sln_demo_user_table_preprocess_all_feature_v1（单击查看详情）CREATE TABLE IF NOT EXISTS rec_sln_demo_user_table_preprocess_all_feature_v1 like pai_online_project.rec_sln_demo_user_table_preprocess_all_...
部署服务
PAI-Rec 引擎服务编译镜像可以参考 编译打包项目,适当修改 Makefile 把编译出来的镜像放到自己的镜像仓库里。也可以使用阿里云的容器镜像服务。直接 make release 就可以打包成镜像。注意：如果 PAI-Rec 引擎服务需要访问到 redis,mysql ...
开发参考
服务端SDK 友盟SDK的使用 API概览 推荐全链路深度定制开发平台 PAIRec 基础介绍 快速导览 PAI-REC 引擎功能 快速创建项目 PAI－REC引擎配置参考 智能召回引擎BE 智能召回引擎搭建完成后，通过API（Application Programming Interface）方式...
从游标提取行
CREATE OR REPLACE PROCEDURE cursor_example IS v_emp_rec emp%ROWTYPE;CURSOR emp_cur_1 IS SELECT*FROM emp;BEGIN OPEN emp_cur_1;FETCH emp_cur_1 INTO v_emp_rec;DBMS_OUTPUT.PUT_LINE('Employee Number:'|v_emp_rec.empno);DBMS_...
新建类型
dbms_output.put_line('被引用项：游标变量名称：'|v_rec.name|'*'|v_rec.age);close c2;v_obj:=ob_var('test','object');dbms_output.put_line('被引用项：对象实例的名称：'|v_obj.var|'*'|v_obj.var1);end;end;begin p_datatype;end;...
游标 FOR 循环
FOR v_emp_rec IN emp_cur_1 LOOP DBMS_OUTPUT.PUT_LINE(v_emp_rec.empno|' '|v_emp_rec.ename);END LOOP;END;实现了相同的结果，如下面的输出所示。EXEC cursor_example;EMPNO ENAME-7369 SMITH 7499 ALLEN 7521 WARD 7566 JONES 7654 ...
子类型
RAISE NOTICE 'rec=',rec;END;结果显示如下：NOTICE:rec=(1,a)DO 示例二：DECLARE SUBTYPE subtype_char IS VARCHAR;SUBTYPE sub_subtype_char IS subtype_char;sub_var sub_subtype_char;BEGIN sub_var:='a';RAISE NOTICE 'sub_var=',sub_...
服务初始化
PAI-REC初始化流程主要分为以下几个步骤：资源开通。资源绑定至PAI-REC。PAI-REC开发角色授权。授予PAI-REC访问资源的权限。当您新购PAI-REC实例，并完成资源开通步骤后，即可登入控制台，在“基本信息-操作指引”处点击按钮进入初始化流程...
基于 SLS 监控报警
PAI-Rec Engine 引擎服务会部署在 EAS 上，在引擎服务过程中，会产生一系列日志，基于这些日志可以监控我们的引擎服务以及报警。这些功能是基于 SLS 实现的。服务部署在 EAS 有两种情况，使用公共资源组或者使用私有资源组。两种方式对于...
基于etrec的U2I2I召回
数据集 pai_online_project.rec_sln_demo_behavior_table 字段名 类型 描述 request_id BIGINT 埋点ID/请求ID user_id BIGINT 用户唯一ID exp_id STRING 实验ID page STRING 页面 net_type STRING 网络类型 event_time BIGINT 行为时间 ...
FeatureStore最佳实践
同步用户表：rec_sln_demo_user_table_preprocess_all_feature_v1（单击查看详情）CREATE TABLE IF NOT EXISTS rec_sln_demo_user_table_preprocess_all_feature_v1 like pai_online_project.rec_sln_demo_user_table_preprocess_all_...
模型打分服务配置
svid,embedding"}],"AlgoType":"hybrid","CompressFeature":false,"LinUCBConf":{"Alpha":1.0,"ArmIdKey":"arm_id","HologresName":"vv_rec","ModelTable":"sv_rec.contextual_bandit_models_v2","FeatureTable":"sv_rec.contextual_...
基础介绍
PAI-REC 引擎是一款基于 go 的在线推荐服务引擎的框架，用户可以基于此框架快速搭建推荐在线服务，也可以定制化进行二次开发。PAI-REC 引擎提供如下功能：集成 go http server,提供路由注册功能，方便开发 Restful Api 包含完整的推荐引擎...
- 产品推荐
- 这些文档可能帮助您