1 个仓库
Functions used to set starting values for neural network parameters across submodules.
Distinct from Dynamic Parameter Initialization: Focuses on the explicit initialization of weights across a model hierarchy, rather than lazy/dynamic initialization.
Explore 1 awesome GitHub repository matching artificial intelligence & ml · Weight Initialization Functions. Refine with filters or upvote what's useful.
这是一个关于使用 PyTorch 构建神经网络的综合教学资源和课程。它涵盖了深度学习的基本构建块,包括张量操作、自动微分以及模块化神经网络组件的构建。 该仓库是多个专业领域的参考指南。它提供了计算机视觉任务(如图像分类、目标检测和语义分割)的实现细节,以及涉及 Transformer、循环网络和生成模型的自然语言处理工作流。此外,它还包括生成式 AI 的参考资料,专门关注通过扩散模型和对抗网络进行图像合成。 材料延伸至模型优化和部署流水线。它涵盖了通过量化和将模型导出为 ONNX 和 TensorRT 等格式来减小模型大小并提高推理速度的技术。其他能力领域包括用于并行加载的数据工程、使用自定义指标的模型评估,以及开源大语言模型的部署。 该项目主要以一系列 Jupyter Notebook 的形式提供。
Provides functions to set starting values for neural network parameters across submodules.