RTX 3060 多卡 Beam Search 扩展性实验
数据集简介
实验环境与受控对比设计
测量在单台 Vast 节点上完成,节点配置为 8 张相同的 RTX 3060 GPU。数据集页面说明当前采用可用的 CUDA 实现,并沿用原始 p900 模型与输入;所有数据直接来自被测节点,未经二次转存。实验设计包含四组受控对比,围绕固定全局 beam 与通信条件展开,用于观察多卡配置下的扩展行为。数据集发布页标注任务类型为 Other,页面同时注明该工作仍在进行中。
逐步搜索记录与截断校验
数据集以结构化字段记录 Beam Search 每个深度步骤的运行状态,便于逐层核对搜索过程:
steps:包含 depth、parents、actions、frontier、per_gpu_frontier、threshold、unique、duplicates 与 canonical_state_sha256,用于刻画每层前沿规模、阈值、状态去重情况与规范化状态摘要。cutoff_check:记录 reference_states、candidate_states、common_states、exclusive_reference、exclusive_candidate、cutoff、common_scores_equal、all_exclusive_at_cutoff 与 accepted,用于校验截断处参考结果与候选结果的一致性。
上述字段共同支撑对搜索正确性与截断行为的复核。
耗时、显存与利用率测量
parsed 字段汇总了一次完整搜索的测量结果,覆盖多个维度的计时与资源指标:
| 维度 | 字段 |
|---|---|
| 总体耗时 | full_search_sec |
| 分阶段计时 | initialization_sec、model_host_load_sec、model_device_upload_sec、history_flush_sec、depth_seconds |
| 搜索规模 | expanded_actions、expanded_parents、steps |
| 显存 | peak_memory_mib_per_gpu |
| GPU 利用率 | median_utilization_pct_per_gpu |
| SM 时钟 | median_sm_clock_mhz_per_gpu |
其中显存、利用率与 SM 时钟均按每张 GPU 分别统计,便于比较不同卡之间的负载差异。
按 rank 汇总的扩展结果
rank_results 以 rank 为单位记录各并行副本的运行结果,字段包括 rank、world_size、full_steps、expanded_parents、expanded_actions、initialization_sec、model_host_load_sec、model_device_upload_sec、full_search_sec、history_flush_sec 与 admission_dump。该结构可用于对照不同 world_size 下的搜索步数、扩展规模与各阶段耗时。
此外,记录中还包含 first_differing_depth、binary_sha256 与 scope 字段,用于定位不同运行之间首次出现差异的深度,并以二进制摘要标识对应范围。
文件获取与页面说明
数据集托管于 HuggingFace,可通过页面上的 Files and versions 入口浏览并下载文件;页面另设 Community 区域。数据集页面预览因列名不匹配而报错,直接查看表格时需留意字段命名。页面未标注具体文件格式与总体积,也未给出明确的许可条款。
引用信息
数据集名称为 TryDotAtwo/multigpu-beam-rtx3060-scaling-20261004,发布日期为 2026-10-04。使用或引用时请以该名称与日期标识本数据集。