llm-course
進入大型語言模型(LLMs)的課程,包含路線圖和 Colab 筆記本。
llm-course 是什麼?
進入大型語言模型(LLMs)的課程,包含路線圖和 Colab 筆記本。
llm-course 概覽
這是什麼
這是一門免費課程,旨在學習大型語言模型(LLM)。課程分為三部分:LLM 基礎(選修,涵蓋數學、Python 與神經網路)、LLM 科學家(建立最先進的 LLM)以及 LLM 工程師(建立與部署 LLM 應用)。儲存庫還包含一系列筆記本與文章,涵蓋工具、微調、量化與其他主題。
主要功能
- 三部分課程結構:基礎、建立 LLM 與工程應用 - 提供 Colab 筆記本進行實作(例如微調、量化、模型合併) - 涵蓋 MergeKit、Axolotl、Unsloth 與 llama.cpp 等工具 - 包含自動評估、量化、去重與消融(abliteration)的筆記本 - 選修基礎章節涵蓋數學、Python 與神經網路
使用情境
- 個人自學,進入 LLM 領域 - 從事實務的從業人員參考,用於微調、量化或部署 LLM - 作為課程或工作坊的教材
快速開始
請參閱儲存庫的 README 以取得完整說明。課程分為三個章節,您可以從基礎開始,或直接進入科學家或工程師部分。儲存庫提供筆記本供實作練習。
授權與價格
採用 Apache-2.0 授權。本課程為免費且開源。
內容整理自該專案公開的 README 與儲存庫資訊。