Rika
2020-12-07 13:17:04
批处理大小是你提供给模型的每次迭代的样本数。
例如，如果你的数据集包含10,000个样本，并且批次大小为100，则将需要10,000 / 100 = 100迭代才能达到一个纪元。
你在日志中看到的是纪元数和迭代数。
Epoch 160/170表示你当前正在运行总共170个纪元中的第160个纪元。你的每个时代都需要进行32次迭代。
知道你的样本只有3,459个，每个批次大小将为3459/32 =108。
你应该已经知道所设置的批次大小，但这也将为你提供答案。
至于批处理的方式，取决于实现方式，有些只是不使用不能构成完整批的项目，有些则使用较小的批处理（剩下的全部制成批处理），有些则合并了图像从以前的迭代中弥补不足的数量。
热门github
1
2
4
The Python Risk Identification Tool for generative AI (PyRIT) is an open access automation framework to empower security professionals and machine learning engineers to proactively find risks in their generative AI systems.
(翻译：用于生成式 AI 的 Python 风险识别工具 (PyRIT) 是一个开放式访问自动化框架，使安全专业人员和机器学习工程师能够主动发现其生成式 AI 系统中的风险。)
5
7
8
9
Mamba is a new state space model architecture showing promising performance on information-dense data such as language modeling, where previous subquadratic models fall short of Transformers. It is based on the line of progress on structured state space models, with an efficient hardware-aware design and implementation in the spirit of FlashAttention.
(翻译：Mamba 是一种新的状态空间模型架构，在信息密集型数据（例如语言建模）上显示出良好的性能，而之前的二次模型在 Transformers 方面存在不足。它基于结构化状态空间模型的进展，并本着FlashAttention的精神进行高效的硬件感知设计和实现。)
10
11
13