Dataphin的数据开发平台包括数据的开发、发布、调度运维和权限管理模块,致力于为您构建便捷、高效的数据开发平台。

背景信息

如果您的Dataphin实例为智能研发版,则数据开发支持规范建模数据处理即席查询。数据开发支持通过界面配置和编写代码的方式构建同步任务、数据模型及即席查询,以满足不同数据的使用场景,助力企业实现数据应用价值最大化。数据开发模块旨在为您提供简单高效、安全可靠的智能化构建数据的平台:
  • 规范建模:基于已明确的业务需求,从业务顶层开始设计,规范定义数据的标准及计算口径。同时,根据业务需求完成数据模型的设计。
  • 数据处理:支持通过编写代码的方式构建复杂的数据模型。
  • 即席查询:即席查询模块为您提供主题式数据查询功能,您可以根据业务需求自定义查询条件。

如果您的Dataphin实例为基础研发版,则系统支持数据处理即席查询,不支持规范建模功能。

功能介绍

数据开发模块包括数据的开发、发布、运维和权限模块。

模块 描述
开发
  • 规范建模:构建指标模型。
  • 数据处理:构建同步任务、代码任务、函数和资源文件等。
  • 即席查询:任务发布前,查询和验证数据。
    说明
    • 即席查询功能仅开发环境支持。
    • 基础研发版不支持规范建模
发布
  • 查看从开发环境提交的任务,并将其发布到生产环境进行数据生产。
  • 查询历史发布记录。
说明 仅Dev-Prod开发模式支持发布功能,且仅开发环境支持。
运维
  • 运维中心:对周期任务和实例、手动任务和实例、逻辑表任务和实例、补数据实例等进行查看运维。
  • 监控报警:设置和查看生产环境任务的监控报警信息。
    说明 监控报警功能仅生产环境支持。
权限 权限模块保证了Dataphin中数据资源的安全性。如果您没有某个数据资源的权限,则需要通过权限模块申请相应的权限。

页面介绍

说明 如果您的Dataphin实例为基础研发版,则不支持规范建模
  • Dev项目
    功能区编号 描述
    当前打开的项目名称,以及项目的环境类型(Prod或Dev)。单击项目名称后的test图标,在下拉列表中依次选择项目的分类及项目。

    例如,当前您访问的是Dev项目,如果您切换至Prod项目后,则编号②的环境类型标识随之更换为生产环境,反之亦然。

    环境类型标识按钮,单击可以在Dev项目和Prod项目之间进行切换。Prod项目表示生产环境的项目,Dev项目表示开发环境项目。
    说明 Basic项目没有环境类型标识按钮。
    快速新建规范定义、逻辑表、数据处理和即席查询的入口。
    刷新任务列表、新建文件、新建文件夹的按钮。
    通过输入任务的关键字的方式,快速搜索任务。
    已创建的文件夹、任务和文件列表。
    左侧导航栏提供的规范建模和数据处理的相关操作入口。
    数据开发模块提供进入开发、发布、运维和权限模块的入口。
    在全局搜索框中输入物理表、逻辑表、规范定义、函数或资源等名称的关键字,搜索目标对象。您可以选择生产数据非生产数据源及目标对象的类型,快速搜索目标对象。
    规范定义需要定义的元素,并提供了相应的操作入口。
    数据建模包括维度逻辑表事实逻辑表汇总逻辑表,同时为您提供事实逻辑表汇总逻辑表的入口。
    任务研发包括离线计算任务实时计算任务同步任务,并提供了创建任务的入口。
    文件引用包括离线计算函数实时计算函数实时自定义源资源管理实时计算模板实时计算元表,并提供了创建文件的入口。
    即席查询仅包括SQL查询,并提供了创建即席查询的入口。
  • Baisc项目
    • Baisc项目(非Data_distill)项目tewfga
    • Data_distill项目

      Data_distill项目和其他Baisc项目页面相似,但Data_distill项目不支持规范建模。

  • Prod项目

    Prod项目和Dev项目页面相似,但Prod项目不支持数据处理、规范建模和即系查询。

SQL语法解析器的关键字

SELECT、DELETE、INSERT、UPDATE、FROM、HAVING、WHERE、ORDER、BY、GROUP、INTO、AS、CREATE、ALTER、DROP、SET、NULL、NOT、
DISTINCT、TABLE、TABLESPACE、VIEW、SEQUENCE、TRIGGER、USER、INDEX、SESSION、PROCEDURE、FUNCTION、PRIMARY、KEY、DEFAULT、
CONSTRAINT、CHECK、UNIQUE、FOREIGN、REFERENCES、EXPLAIN、FOR、IF、ADD、ALL、UNION、EXCEPT、INTERSECT、MINUS、INNER、LEFT、
RIGHT、FULL、OUTER、JOIN、ON、SCHEMA、CAST、COLUMN、USE、DATABASE、TO、AND、OR、XOR、CASE、WHEN、THEN、ELSE、ELSIF、END、
EXISTS、IN、NEW、ASC、DESC、IS、LIKE、ESCAPE、BETWEEN、VALUES、INTERVAL、LOCK、SOME、ANY、TRUNCATE、RETURN、TRUE、FALSE、
LIMIT、KILL、IDENTIFIED、PASSWORD、DUAL、BINARY、SHOW、REPLACE、PERIOD、BITS、WHILE、DO、LEAVE、ITERATE、REPEAT、UNTIL、
OPEN、CLOSE、OUT、INOUT、EXIT、UNDO、SQLSTATE、CONDITION、DIV、WINDOW、OFFSET、ROW、ROWS、ONLY、FIRST、NEXT、FETCH、OF、
SHARE、NOWAIT、RECURSIVE、TEMPORARY、TEMP、UNLOGGED、RESTART、IDENTITY、CONTINUE、CASCADE、RESTRICT、USING、CURRENT、RETURNING、
COMMENT、OVER、TYPE、ILIKE、RLIKE、FULLTEXT、START、PRIOR、CONNECT、WITH、EXTRACT、CURSOR、MERGE、MATCHED、ERRORS、
REJECT、UNLIMITED、BEGIN、EXCLUSIVE、MODE、WAIT、ADVISE、SYSDATE、DECLARE、EXCEPTION、GRANT、REVOKE、LOOP、GOTO、COMMIT、
SAVEPOINT、CROSS、PCTFREE、INITRANS、MAXTRANS、INITIALLY、ENABLE、DISABLE、SEGMENT、CREATION、IMMEDIATE、DEFERRED、STORAGE、
MINEXTENTS、MAXEXTENTS、MAXSIZE、PCTINCREASE、FLASH_CACHE、CELL_FLASH_CACHE、NONE、LOB、STORE、CHUNK、CACHE、NOCACHE、LOGGING、
NOCOMPRESS、KEEP_DUPLICATES、EXCEPTIONS、PURGE、COMPUTE、ANALYZE、OPTIMIZE、TOP、ARRAY、DISTRIBUTE、EOF、ERROR、IDENTIFIER、
HINT、VARIANT、LITERAL_INT、LITERAL_FLOAT、LITERAL_HEX、LITERAL_CHARS、LITERAL_NCHARS、LITERAL_ESCAPE、LITERAL_PATH、LITERAL_ALIAS、
LINE_COMMENT、MULTI_LINE_COMMENT、BINARY_FLOAT、BINARY_DOUBLE、PARTITION、PARTITIONED、OVERWRITE、SORT、SEL、LOCKING、
ACCESS、VOLATILE、MULTISET、POSITION、RANGE_N、FORMAT、QUALIFY、MOD、CONTAINS、CONCAT、UPSERT、LPAREN、RPAREN、LBRACE、
RBRACE、LBRACKET、RBRACKET、SEMI、COMMA、DOT、DOTDOT、DOTDOTDOT、EQ、GT、LT、LT_SUB_GT、BANG、BANGBANG、BANG_TILDE、
BANG_TILDE_STAR、BANG_TILDE_TILDE_STAR、TILDE、TILDE_STAR、TILDE_TILDE_STAR、TILDE_EQ、QUES、QUESQUES、QUESBAR、
QUESAMP、COLON、COLONCOLON、COLONEQ、EQEQ、EQGT、LTEQ、LTEQGT、LTGT、GTEQ、BANGEQ、BANGGT、BANGLT、AMPAMP、BARBAR、BARBARSLASH、
BARSLASH、PLUS、SUB、SUBGT、SUBGTGT、STAR、SLASH、AMP、BAR、CARET、CARETEQ、PERCENT、LTLT、GTGT、MONKEYS_AT、MONKEYS_AT_AT、
POUND、POUNDGT、POUNDGTGT、MONKEYS_AT_GT、LT_MONKEYS_AT、NOT_EXTEND_RIGHT、NOT_EXTEND_LEFT、DISTRIBUTED、WITHIN、TILDE_TILDE、
BANG_TILDE_TILDE、RANDOMLY、ENCODING、STATISTICS、INCLUSIVE、SUBPARTITION、EVERY、RENAME、WITHOUT、INVALIDATE、METADATA、
IMPORT、SERVER、OPTIONS