Q1: when you read tables in hive, it contributes to REMOTE_SCAN_ BYTES_PER_SECOND. Q2:Thread pool num is determined when doris starts, when it is -1, actually doris use std::max(512, CpuInfo::num_cores() * 10); Q3: You can propose your problem more explicitly. Q4: https://doris.apache.org/docs/query-acceleration/performance-tuning-overview/analysis-tools?_highlight=profile#doris-profile Q5: I did not receive your image.
On Thu, Apr 10, 2025 at 11:00 AM 吴晓东 <a799767...@126.com> wrote: > 您好： > 想请教一些问题（doris 3.0 存算一体模式） > 问题一：为什么当前没有任务REMOTE_SCAN_BYTES_PER_SECOND 还有几千G ，使用sar监控网卡每秒只有1G > ，这是为什么，统计原理是什么（目前是用doris连hive，hive表数据量几十T） > 问题二：doris_max_remote_scanner_thread_pool_thread_num > 官网默认值是512，使用sql查询默认值是-1，如果be > 是128核他的实际计算是公式是多少？默认情况他是随着parallel_pipeline_task_num变化而动态变化的吗？ > > 问题三：能否请提供一些读取hive大表，提升性能的优化手段 > 问题四：有没有针对profile文件指标的详细解释 > 问题五：偶尔be会出现如下报错，也没有其他的提示，be进程也没有挂 > > 问题比较多，实际也再用，并且对doris也很感兴趣，希望大佬能给与指导，不胜感激！！！！！ > >
