Java线程栈分析-CPU利用率持续升高
URLClassLoader里面有个ucp(URLClassPath)，它记录了当前URLClassLoader类加载器加载了哪些jar包，在类加载过程中，它会遍历所有jar包，然后逐个打开jar包并查找里面是否存在期望的类。再结合业务同学的反馈，大概有500多个jar包，所以根据...
JDBC数据源
例如 mysql-connector-java-8.0.25.jar，SelectDB会自动在本地 jdbc_drivers/目录下查找相应jar包，其中默认包含了 mysql-connector-java-8.0.25.jar、postgresql-42.5.1.jar、mssql-jdbc-11.2.3.jre8.jar、ojdbc8.jar 这4个常用的Driver包...
使用MongoDB Connector连接MongoDB数据库
manifest.json 从 Maven仓库 中下载avro-1.9.2.jar和mongodb-driver-sync-4.9.0.jar，将这两个jar包移动至MongoDB Connector文件夹中的lib目录下，然后将其压缩成.ZIP文件，上传至提前创建好的OSS Bucket。更多信息，请参见 控制台上传文件...
使用MongoDB Connector连接MongoDB数据库
manifest.json 从 Maven仓库 中下载avro-1.9.2.jar和mongodb-driver-sync-4.9.0.jar，将这两个jar包移动至MongoDB Connector文件夹中的lib目录下，然后将其压缩成.ZIP文件，上传至提前创建好的OSS Bucket。更多信息，请参见 控制台上传文件...
使用控制台单批发布应用（K8s）
上传JAR包 文件上传方式 选择 上传JAR包 时，单击 选择文件，上传JAR包。JAR包地址 文件上传方式 选择 JAR包地址 时，输入JAR包地址。说明 对于带认证签名的OSS文件访问URL，EDAS在部署时会缓存该文件用于之后的回滚、扩容等操作。版本 ...
JAR任务快速入门
您可以自行编写并构建包含业务逻辑的JAR包，上传此业务JAR包后，即可便捷地创建Spark JAR任务。本文通过一个示例，为您演示如何进行JAR任务的开发与部署。前提条件 已创建工作空间，详情请参见 管理工作空间。已提前完成业务应用程序开发，...
打包、上传及注册
当您完成Java程序开发及调试后，您需要将Java程序打包为JAR包并以资源形式上传至MaxCompute项目后，才可以注册MaxCompute UDF，供后续在数据开发中调用。本文为您介绍在MaxCompute Studio中一键完成Java程序打包为JAR包、上传JAR包为...
JAR包如何添加参数？
本文介绍使用SAE时，如何为JAR包添加参数。如果您遇到如下问题，均可参考本文指引。添加参数 连接内置Nacos JAR包部署、JAR参数、JAR启动参数 JAR包部署如何添加参数，请参见 启动命令和参数。如果您的程序是Java微服务应用，需要在SAE侧...
Maven开发常见问题
本文介绍如何解决无法下载JAR包的问题。无法下载JAR包 如果出现本地开发环境无法找到需要依赖的JAR包，请按以下步骤排查解决。确认 pom.xml 文件中是否已经添加了Maven依赖。例如：<dependency><groupId>...
Dataphin在Hadoop环境上传的资源JAR包，存放的HDFS...
概述 本文主要介绍Dataphin在Hadoop环境上传的资源JAR包，存放的HDFS路径是什么。详细信息 Dataphin在Hadoop环境上传的资源JAR包，存放的HDFS路径是什么？介绍如下：所有用户上传的资源JAR包，以及安全包的资源，都是默认放在/tmp/dataphin...
Dataphin中Shell运行JAR文件报错“bash:java:command ...
代码打成Jar包的时候，需要Jar包名称和main方法所在类名称保持一致；上传资源文件的时候，名称需要和Jar文件名称保持一致：2.需要注意java-jar命令是在Shell脚本中运行，而不是Spark任务。解决方案 Jar包名称、上传资源的时候名称和类名称...
安装第三方插件
前提条件 已获取第三方插件的JAR包。已创建集群，并且选择了Flume服务，详情请参见 创建集群。操作步骤 支持以下方式：方式一：修改 FLUME_CLASSPATH 参数来添加JAR包。在E-MapReduce控制台Flume服务的 配置 页面，在搜索框中输入参数 ...
Spark SQL开发介绍
AnalyticDB MySQL版 Spark支持在控制台直接提交Spark SQL，无需编写JAR包或者Python代码，便于数据开发人员使用Spark进行数据分析。本文介绍 AnalyticDB MySQL版 Spark SQL应用的示例代码及命令类型。开发工具 您可以通过SQL开发编辑器创建...
2021-01-11版本
说明 如果JAR包超过200 MB，建议对JAR包进行拆分或者通过OSS上传。VVP主要缺陷修复 修复语法检查较慢的问题。VVR 2.1.3版本重大功能变更 VVR支持使用Session模式提交JAR包。自动调优 Source-Delay-Based 策略支持Kafka。增加Connector ...
获取 SDK
下载下列链接中的 JAR 包：httpasyncclient-4.1.3 httpclient httpcore httpcore-nio fastjson slf4j-api 下载 TSDB-Client 的 JAR 包（推荐选择最新版本）:请到 SDK 版本说明 中下载最新版本的 JAR 包。将这些 JAR 包放到工程下即可使用 ...
Flink JAR作业快速入门
步骤一：开发JAR包 Flink控制台不提供JAR包的开发平台，因此您需要在线下完成JAR包的开发。DataStream API的开发方法、调试及连接器的使用详情请参见 JAR作业开发。本快速入门为了带您快速熟悉Flink流作业和批作业的操作，已为您提供了测试...
资源
上传JAR包的过程就是在MaxCompute上创建资源的过程，这个JAR包是MaxCompute资源的一种。MapReduce：您编写MapReduce程序后，将编译好的JAR包作为一种资源上传到MaxCompute。运行MapReduce作业时，MapReduce框架会自动下载这个JAR资源，获取...
SparkSQL UDF基础操作
使用Hive UDF 使用文件传输工具，上传生成的JAR包至集群任意目录（本文以test目录为例）。上传JAR包至HDFS或OSS（本文以HDFS为例）。通过SSH方式登录集群，详情请参见 登录集群。执行以下命令，上传JAR包到HDFS。hadoop fs-put/test/...
快速入门视频
构建.jar包命令：mvn install-Dmaven.test.skip=true Dockerfile文件内容：FROM maven:3.5-jdk-8 COPY target/iot-demo-0.0.1-SNAPSHOT.jar/iot-demo.jar EXPOSE 8080 ENTRYPOINT["/bin/bash","-c","java-jar/iot-demo.jar-server.port=...
质量校验函数jar包源代码
在创建质量校验函数时，请先使用Java工具将文中示例代码打包成jar包。本文提供质量校验函数jar包源代码示例内容。示例代码 运行Java开发工具，生成一个文件名称为“PhoneNumberChecker”jar包。package com.aliyun.odps.udf.examples;...
准备工作
您可以通过以下两种方式获取 JAR 包：直接下载示例 JAR 包 下载 Web 工程 JAR 包。下载 Core 工程 JAR 包。使用本地工程获取 JAR 包 搭建本地环境。操作步骤，请参见 搭建环境。生成示例工程。可以通过以下两种方式生成可运行的 Demo 工程...
配置SSL证书并开启HTTPS安全访问
绑定SSL到JAR包部署的应用 如需为使用JAR包直接部署的应用绑定SSL，首先需要修改 application.properties 文件开启SSL配置，然后将证书文件一同打包在JAR包中，使用JAR包部署应用，最后进入 应用设置 页面修改应用的Tomcat的应用端口为8443...
Notebook
jar包必须放在OSS上，多个jar包之间通过逗号分隔。通过设置spark.jars.packages 来设置依赖的package，格式：groupId:artifactId:version,多个package逗号分隔。Python package 需要通过Databricks数据洞察控制页面选择相应的python包。Q：...
快速入门
本文以开发WordCount MapReduce作业为例，为您介绍如何通过MaxCompute Studio编写MapReduce程序及生成JAR包，并在MaxCompute客户端上运行MapReduce作业。前提条件 请确认您已满足如下条件：已安装并配置MaxCompute客户端。更多安装并配置...
02创建质量校验函数并物理化
已准备好质量校验函数jar包，具体操作，请参见 质量校验函数jar包源代码。操作步骤 登录 数据资源平台控制台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择目标工作组。在左侧导航栏，选择>字段标准设计。将鼠标悬停至 质量...
Spark应用开发介绍
jars 否"jars":["oss:/<testBucketName>/path/to/jar","oss:/testBucketName/path/to/jar"]Spark应用依赖的JAR包，多个JAR包之间以英文逗号（,）分隔。需填写JAR包文件的绝对路径。JAR包在运行时会被加入到Driver和Executor JVM的ClassPath...
自定义函数（UDF）
代码中的 myfunc 是UDF函数的名称，org.example.MyUDF 是 开发UDF 中创建的类，hdfs:/user/hive/warehouse/hiveudf-1.0-SNAPSHOT.jar 为上传JAR包到HDFS的路径。当出现以下信息时，表示创建成功。Added[/private/var/folders/2s/wzzsgpn13...
升级或降级运行时环境
使用JAR包部署的原生应用：Spring Cloud、Dubbo、普通Java Web或Spring MVC应用，未使用过Pandora或Pandora Boot，通过JAR包部署时，需要选择标准Java应用运行时环境。HSF应用：包括使用Pandora Boot开发的Spring Cloud应用和由Dubbo转换为...
数据源支持概述
您只需要使用该JAR包，就可以完成Loghub、TableStore、HBase、JDBC和Redis数据源的实现以及相关的依赖包。Kafka和Druid数据源暂未在此JAR包中发布，后续会陆续加入，具体请参见 Release Notes。使用 streaming-sql 命令行进行交互式开发。...
Dataphin创建Java函数步骤
2.编写代码并达成Jar包。例如下图：3.上传Jar包。类型：选择对应的包类型，此处选择jar。名称：XXX.jar，此处的名称可以随便定义，但是为了后续使用以及管理，增加易读性，建议打包的包名，名称都保持和类名一致。描述：可以写此资源作用。...
使用控制台分批发布应用（K8s）
JAR包地址 文件上传方式 选择 JAR包地址 时，输入JAR包地址。说明 对于带认证签名的OSS文件访问URL，EDAS在部署时会缓存该文件用于之后的回滚、扩容等操作。构建仓库类型 说明 构建仓库类型 功能仅支持容器服务K8s集群下的Java、Tomcat、...
创建EMR Spark节点
JAR包大于等于200MB时，无法通过本地上传的方式直接上传为DataWorks的资源，建议直接将JAR包存储在EMR的HDFS中，并记录下JAR包的存储路径。便于后续在DataWorks调度Spark任务时引用该路径。引用EMR JAR资源。JAR包存储在HDFS时，您可以直接...
错误：“超时取消”问题排查
Java 构建 jar 包下载卡住 日志中出现 jar 包下载然后不继续往下执行。出现这种情况是由于 jar 包下载失败，首先判断使用 maven 源是否为国内镜像源，推荐使用 aliyun 提供的 mave镜像仓库 进行依赖下载加速。NodeJS 构建 Npm 包下载卡住 ...
编译过程中ut和app-monitor发生冲突
问题详述 编译时报下面的错误：Error:Execution failed for task':app:...解决方法 如发现有 monitor 和ut-5两个jar包，请删除monitor的jar包，或者发现monitor有重复，只留一个，如没能解决，请寻求钉钉群（35248489）中的技术支持解决。
Java UDF最佳实践
前提条件 下载 JAR包。背景信息 本教程基于下载的JAR包自定义的Java UDF函数，实现大写字母转换为小写字母。您也可以编写Java UDF代码，以实现更多的功能，请参见 IntelliJ IDEA Java UDF开发最佳实践 本教程中的JAR包的代码如下。package ...
Java UDF最佳实践
前提条件 下载 JAR包。背景信息 本教程基于下载的JAR包自定义的Java UDF函数，实现大写字母转换为小写字母。您也可以编写Java UDF代码，以实现更多的功能，请参见 IntelliJ IDEA Java UDF开发最佳实践。本教程中的JAR包的代码如下。package...
创建和部署应用概述（K8s）
Java应用 Spring Cloud、Dubbo或HSF应用开发完成后，可通过WAR包、JAR包或镜像的方式部署至K8s集群。部署方式 介绍 运行环境 监控及治理方案 示例文档 镜像部署 适用于在K8s集群中使用自定义的镜像部署应用。自定义 默认自动挂载Java Agent...
使用控制台升级应用（ECS集群）
文件上传方式 新版本应用部署包的上传方式，包含上传部署包（JAR包或WAR包）和部署包（JAR包或WAR包）地址。部署包类型同样由当前应用首次部署的方式决定。上传JAR包 或 上传WAR包：单击 选择文件，选择本地的新版本应用部署包。JAR包地址 ...
SAE支持安装字体吗？
支持，您可以通过以下任意一个方式来实现。通过挂载NAS盘共享字体文件。更多信息，请参见 设置NAS存储。在WAR包或JAR包中，将字体文件打包到Resource资源中加载。
UDF示例：兼容Hive
注意事项 使用兼容的Hive UDF时，您需要注意：在MaxCompute上使用 add jar 命令添加Hive UDF的资源时，您需要指定所有JAR包，MaxCompute无法自动将所有JAR包加入Classpath。调用Hive UDF时，需要在SQL语句前添加 set odps.sql.hive....
- 产品推荐
- 这些文档可能帮助您