Python SDK常见问题
使用PyODPS o.gettable('table_name').size中size字段的含义是什么？如何设置Tunnel Endpoint？PyODPS如何使用包含cPython的第三方包？PyODPS中的DataFrame最多可以处理多少数据，对表的大小有限制吗？在DataFrame中如何使用max_pt？使用...
PyODPS常见问题
使用PyODPS o.gettable('table_name').size中size字段的含义是什么？如何设置Tunnel Endpoint？PyODPS如何使用包含cPython的第三方包？PyODPS中的DataFrame最多可以处理多少数据，对表的大小有限制吗？在DataFrame中如何使用max_pt？使用...
迁移实施
例如上传文件 myapp/resource/1.jpg，开启静态网站托管后，迁移服务扫描会得到3个对象，分别为 myapp/、myapp/resource/和 myapp/resource/1.jpg，其中 myapp/和 myapp/resource/会迁移失败，但不影响 myapp/resource/1.jpg 的正常迁移。...
自定义函数（邀测中）
XIHE_REMOTE_CALL_MAX_BATCH_SIZE max_batch_size 否 调用REMOTE_CALL函数之后，每批次向函数计算服务中发送的数据最大行数。默认无限制。数据行数越小，函数计算服务中CPU和内存的压力越小，但查询的执行时间会变长。示例 函数计算服务中...
分片上传
在上传大文件（超过5 GB）到OSS的过程中，如果出现网络中断、程序异常退出等问题导致文件上传失败，您需要使用分片上传的方式上传大文件。分片上传通过将待上传的大文件分成多个较小的碎片（Part），充分利用网络带宽和服务器资源并发上传...
发布者最佳实践
因此，云消息队列 Kafka 版 Producer客户端什么时候把消息批量发送至服务器是由 batch.size 和 linger.ms 共同决定的。您可以根据具体业务需求进行调整。为了提升发送的性能，保障服务的稳定性，建议您设置 batch.size=16384 和 linger.ms=...
利用DCGM实现GPU的性能分析
Batch Size从256到512，SM Active、SM Occupancy和FP32 Pipe active三个指标值几乎没有什么提升。对于这个训练任务，如果仅从GPU资源高效利用的角度来看，Batch Size大小设置为64~256比较合适。场景四：评估一张 共享GPU 卡可以运行多少个...
常见问题
为什么建表失败？流式写入Delta时产生了很多的小文件怎么办？Optimize执行时间很长是什么原因？为什么Optimize失败了？应该如何处理？执行了Optimize，为什么还有很多小文件？执行了Vacuum，为什么还有很多小文件？如果想删除最近产生的小...
常见问题
解决方案：通过-omax_stat_cache_size=xxx 参数增大stat cache 的 size，这样第一次ls会较慢，但是后续的ls速度会提高，因为文件的元数据都在本地cache中。这个值默认是1000，约消耗4 MB内存，请根据您机器内存大小调整为合适的值。ossfs在...
列存索引常见问题
SQL语句如下：SELECT SCHEMA_NAME,TABLE_NAME,SUM(EXTENT_SIZE*TOTAL_EXTENT_COUNT)AS TOTAL_SIZE,SUM(EXTENT_SIZE*USED_EXTENT_COUNT)AS USED_SIZE,SUM(EXTENT_SIZE*FREE_EXTENT_COUNT)AS FREE_SIZE FROM INFORMATION_SCHEMA.IMCI_DATA_...
常见问题
1.Doc相关操作不指定Partition参数时，具体行为是什么？每个Collection创建时，默认创建一个名称为 default 的Partition，且该Partition无法被删除。当Doc操作不指定Partition时，实际相当于使用 default Partition。例如：检索Doc 时，若...
pg_replication_slots
confirmed_flush_lsn pg_lsn 代表逻辑槽的消费者已经确认接收数据到什么位置的地址（LSN）。比这个地址更旧的数据已经不再可用。对于物理槽此处为 NULL。wal_status text 复制插槽声称的WAL文件的可用性。可能的取值如下：reserved：表示...
pg_replication_slots
confirmed_flush_lsn pg_lsn 代表逻辑槽的消费者已经确认接收数据到什么位置的地址（LSN）。比这个地址更旧的数据已经不再可用。对于物理槽这里是 NULL。wal_status text 此插槽声称的 WAL 文件的可用性。可能的值为：reserved 意味着声称...
网络异常时如何抓取数据包
tcpdump[-AbdDefhHIJKlLnNOpqStuUvxX#][-B buffer_size][-c count][-C file_size][-G rotate_seconds][-F file][-i interface][-j tstamp_type][-m module][-M secret][-number][-Q in|out|inout][-r file][-V file][-s snaplen][-T type]...
NAS性能测试
bs=4K-size=1G-time_based-runtime=60-name=Fio-directory=mnt 测试结果样例：随机读吞吐：fio-numjobs=1-iodepth=128-direct=1-ioengine=libaio-sync=1-rw=randread-bs=1M-size=1G-time_based-runtime=60-name=Fio-directory=mnt 测试结果...
库表
执行以下SQL，可以查看表的所有二级分区及分区的统计信息：SELECT partition_id,-分区名 row_count,-分区总行数 local_data_size,-分区本地存储所占用空间大小 index_size,-分区的索引大小 pk_size,-分区的主键索引大小 remote_data_size-...
MongoDB 分片集群介绍
什么情况下使用分片集群？当您遇到如下问题时，可以使用分片集群解决：存储容量受单机限制，即磁盘资源遭遇瓶颈。读写能力受单机限制，可能是CPU、内存或者网卡等资源遭遇瓶颈，导致读写能力无法扩展。如何确定shard、mongos数量？您可以...
DescribePrice-查询云服务器ECS资源的最新价格
655.2 Currency string 货币单位。中国站：CNY。国际站：USD。CNY TradePrice float 最终价，为原价减去折扣。3712.8 DetailInfos object[]价格的详细信息。说明 该返回值正在邀测中，暂未开放使用。Resource string 资源名称。instance ...
滚动窗口
TUMBLE(,<size-interval>)<size-interval>:INTERVAL 'string' timeUnit 说明参数必须是时间流中的一个合法的时间属性字段，指定为Processing Time或Event Time，请参见 概述，了解如何定义 时间属性。标识函数 使用标识函数选出窗口的起始...
查看监控信息
Rows Processed、Logical Page Write 和 Queries per Second：判断大事务是什么类型。例如查询很少，但删除的行数很多时，表明存在删除数据的大事务。大事务会引起Binlog写入阻塞：当实例有大事务时，临时表空间（binlog cache）先逐步增加...
透明页压缩TPC
您可以使用 pg_database_size、pg_tablespace_size、pg_relation_size、pg_table_size、pg_index_size、pg_total_relation_size 等函数可以查看数据的实时大小。说明 您可以利用sysbench测试工具分别向压缩表和非压缩表中插入相同数据量的...
查询字符串排序
假设您有一个电子商务网站，用户可以通过查询字符串来过滤商品列表。以下是两个有相同参数但顺序不同的URL请求例子：...
通用云盘IO加速功能
因此，默认的buffer_pool_size会自动下调4%，后续如需修改buffer_pool_size，请根据内存使用率指标合理调整。开启或关闭IO加速功能后，实例约有30秒不可用，建议在业务低峰期执行功能的开启和关闭操作。开启IO加速功能后，实例性能会有明显...
窗口函数
查询和分析语句 bucket:bucket90|select object,object_size,first_value(object_size)over(partition by object order by object_size range between unbounded preceding and unbounded following)as first_value from oss-log-store ...
通用云盘IO加速功能
因此，默认的buffer_pool_size会自动下调4%，后续如需修改buffer_pool_size，请根据内存使用率指标合理调整。开启或关闭IO加速功能后，实例约有30秒不可用，建议在业务低峰期执行功能的开启和关闭操作。开启IO加速功能后，实例性能会有明显...
通用云盘IO加速功能
因此，默认的buffer_pool_size会自动下调4%，后续如需修改buffer_pool_size，请根据内存使用率指标合理调整。开启或关闭IO加速功能后，实例约有30秒不可用，建议在业务低峰期执行功能的开启和关闭操作。开启IO加速功能后，实例性能会有明显...
添加手机联系人
row">网站</view><view class="form-row-content"><input id="url" onInput="onInput" class="input" value="www.alipay.com" /></view></view><view style="font-size:18px;margin-top:18px;margin-bottom:18px"><text style="font-size:18px;...
数据标准
数据元、指标和维度属性的质量校验函数（UDF）编写规范是什么？数据元、指标和维度属性的质量校验函数（UDF）编写规范 整体规范说明：针对用于数据元、指标和维度属性的质量校验函数UDF，要求定义的函数入口接收2个参数：待校验的字段值。...
CREATE TABLE
本文介绍 AnalyticDB for MySQL 的 CREATE TABLE 建表语法。您将了解到如何创建分区表和维表，以及如何定义表的分布键、分区键、索引、生命周期、冷热数据分层等。设置默认值、自增列 设置主键 设置...为什么要定义分区 分区可以加快数据过滤...
小马智行基础设施自动化（IaC）实践
type=$.ecs_instance_type，vswitch_id=VPC_output["vswitch-public-"+host_config.az].value，data_volume_size=$.ecs_data_volume_size，system_disk_size=$.ecs_system_disk_size）for host_config in host_configs }，同时如果要调整的...
小马智行基于Terraform的IaC实践
instance_type,vswitch_id=vpc_output["vswitch-public-"+host_config.az].value,data_volume_size=$.ecs_data_volume_size,system_disk_size=$.ecs_system_disk_size)for host_config in host_configs },同时如果要调整的话直接调整对应的...
什么是Deepytorch Training（训练加速）
7B 2 x 8 ZeRO stage 1 micro batch size=4 提升15%LLaMa-13B 2 x 8 ZeRO stage 2 micro batch size=2 提升29%LLaMa-30B 2 x 8 ZeRO stage 3 micro batch size=4 activation recomputing 提升98%LLaMa-65B 2 x 8 ZeRO stage 3 micro batch ...
数据类型
macaddr 无 6 bytes 无 MAC 地址 money 无 8 bytes-92233720368547758.08 到+92233720368547758.07 货币金额 path 无 16+16n bytes[(x1,y1),.]平面上的几何路径，不允许在分配键列中。point 无 16 bytes(x,y)平面上的几何点，不允许在分配...
数据索引
数据索引是OSS对外提供的文件（Object）元数据索引能力。...常见问题 Bucket内文件数量达到上亿级别时，为什么很长时间都没有成功建立数据索引？1秒内大约可以为600个文件建立索引。您可以结合Bucket内的文件数量，预估建立索引所需时间。
日志字段详情
id LoggingFlag logging_flag Requester Aliyun ID requester_id Operation operation Bucket bucket Key object ObjectSize object_size Server Cost Time(ms)server_cost_time Error Code error_code Request Length request_length ...
动手实践
ECS 建议实验时长：1小时 开始体验 Java Web环境(Alibaba Cloud Linux 2)部署Java Web环境 ECS 建议实验时长：1小时 开始体验 Node.js环境 搭建Node.js编程环境 ECS 建议实验时长：1小时 开始体验 搭建网站与应用 云上博客 基于ECS搭建云上...
对象存储
object_size OSS Object大小，单位：Byte。operation 访问类型。更多信息，请参见 访问类型。request_uri 请求URI，包括query-string，路径是URL编码。查询时，您可使用select url_decode(request_uri)解码。error_code OSS返回的错误码。...
什么是ARMS前端监控？
为什么要有前端监控？用户访问您的业务时，整个访问过程大致可以分为三个阶段：页面生产时（服务器端状态）、页面加载时和页面运行时。为了保证线上业务稳定运行，我们会在服务器端对业务的运行状态进行各种监控。现有的服务器端监控系统...
TensorFlow常见问题
batch=tf.train.shuffle_batch([label,image_content],batch_size=FLAGS.batch_size,num_threads=4,capacity=1000+3*FLAGS.batch_size,min_after_dequeue=1000)sess=tf.Session()#创建Session。tf.train.start_queue_runners(sess=sess)#...
流式数据通道概述
什么是云消息队列 Kafka 版？默认使用批量数据通道，支持流式数据通道模式，需要联系Kafka值班同学后台打开。LogStash日志采集端：使用Logstash（流式数据传输）。MaxCompute流式数据通道服务功能点如下：提供流式语义API：通过流式服务的...
- 产品推荐
- 这些文档可能帮助您