Buckets:
| <meta charset="utf-8" /><meta name="hf:doc:metadata" content="{"title":"Việc làm tại Hugging Face","local":"hugging-face-jobs","sections":[{"title":"Huấn luyện một LoRA trên Jobs","local":"train-a-lora-on-jobs","sections":[],"depth":2},{"title":"Quản lý một Job","local":"managing-a-job","sections":[],"depth":2},{"title":"Huấn luyện trên hình ảnh của bạn","local":"train-on-your-own-images","sections":[],"depth":2},{"title":"Huấn luyện ở FP8","local":"train-in-fp8","sections":[],"depth":2},{"title":"Chạy một script không có phần tiêu đề phụ thuộc","local":"run-a-script-without-a-dependency-header","sections":[],"depth":2},{"title":"Lưu checkpoint cho các lần chạy dài","local":"save-checkpoints-for-long-runs","sections":[],"depth":2},{"title":"Các bước tiếp theo","local":"next-steps","sections":[],"depth":2}],"depth":1}"/> | |
| <link href="/docs/diffusers/main/en/_app/immutable/entry/start.0S0_iEoG.js" rel="modulepreload"> | |
| <link href="/docs/diffusers/main/en/_app/immutable/chunks/I9eooN77.js" rel="modulepreload"> | |
| <link href="/docs/diffusers/main/en/_app/immutable/chunks/Bupkjr9f.js" rel="modulepreload"> | |
| <link href="/docs/diffusers/main/en/_app/immutable/entry/app.CPdOxCbw.js" rel="modulepreload"> | |
| <link href="/docs/diffusers/main/en/_app/immutable/chunks/CyvZ3FS5.js" rel="modulepreload"> | |
| <link href="/docs/diffusers/main/en/_app/immutable/chunks/l0QnnOED.js" rel="modulepreload"> | |
| <link href="/docs/diffusers/main/en/_app/immutable/chunks/DnVIJfC5.js" rel="modulepreload"> | |
| <link href="/docs/diffusers/main/en/_app/immutable/chunks/DsnmJJEf.js" rel="modulepreload"> | |
| <link href="/docs/diffusers/main/en/_app/immutable/nodes/0.DteTvmQZ.js" rel="modulepreload"> | |
| <link href="/docs/diffusers/main/en/_app/immutable/chunks/CoSrdQax.js" rel="modulepreload"> | |
| <link href="/docs/diffusers/main/en/_app/immutable/nodes/371.mqOHi8TH.js" rel="modulepreload"> | |
| <link href="/docs/diffusers/main/en/_app/immutable/chunks/DSPDl1gz.js" rel="modulepreload"> | |
| <!--1ffuigs--><meta name="hf:doc:metadata" content="{"title":"Hugging Face Jobs","local":"hugging-face-jobs","sections":[{"title":"Train a LoRA on Jobs","local":"train-a-lora-on-jobs","sections":[],"depth":2},{"title":"Managing a Job","local":"managing-a-job","sections":[],"depth":2},{"title":"Train on your own images","local":"train-on-your-own-images","sections":[],"depth":2},{"title":"Train in FP8","local":"train-in-fp8","sections":[],"depth":2},{"title":"Run a script without a dependency header","local":"run-a-script-without-a-dependency-header","sections":[],"depth":2},{"title":"Save checkpoints for long runs","local":"save-checkpoints-for-long-runs","sections":[],"depth":2},{"title":"Next steps","local":"next-steps","sections":[],"depth":2}],"depth":1}"/><!----> | |
| <link href="/docs/diffusers/main/en/_app/immutable/assets/0.tn0RQdqM.css" rel="modulepreload"> <!--[--><!--[0--><!--[--><!--[0--><!--[--><p></p> <div class="items-center shrink-0 min-w-[100px] max-sm:min-w-[50px] justify-end ml-auto flex" style="float: inline-end; margin-inline-start: 10px; display: inline-flex; position: relative; z-index: 10;"><div dir="ltr" class="inline-flex rounded-md max-sm:rounded-sm"><button class="inline-flex items-center gap-1 h-7 max-sm:h-7 px-2 max-sm:px-1.5 text-sm font-medium text-gray-800 border border-r-0 rounded-l-md max-sm:rounded-l-sm border-gray-200 bg-white hover:shadow-inner dark:border-gray-850 dark:bg-gray-950 dark:text-gray-200 dark:hover:bg-gray-800" aria-live="polite"><span class="inline-flex items-center justify-center rounded-md p-0.5 max-sm:p-0 hover:text-gray-800 dark:hover:text-gray-200"><svg class="sm:size-3.5 size-3" xmlns="http://www.w3.org/2000/svg" aria-hidden="true" fill="currentColor" focusable="false" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 32 32"><path d="M28,10V28H10V10H28m0-2H10a2,2,0,0,0-2,2V28a2,2,0,0,0,2,2H28a2,2,0,0,0,2-2V10a2,2,0,0,0-2-2Z" transform="translate(0)"></path><path d="M4,18H2V4A2,2,0,0,1,4,2H18V4H4Z" transform="translate(0)"></path><rect fill="none" width="32" height="32"></rect></svg><!----></span> <span dir="auto">Copy page</span></button> <button class="inline-flex items-center justify-center w-6 max-sm:w-5 h-7 max-sm:h-7 disabled:pointer-events-none text-sm text-gray-500 hover:text-gray-700 dark:hover:text-white rounded-r-md max-sm:rounded-r-sm border border-l transition border-gray-200 bg-white hover:shadow-inner dark:border-gray-850 dark:bg-gray-950 dark:text-gray-200 dark:hover:bg-gray-800" aria-haspopup="menu" aria-expanded="false" aria-label="Open copy menu"><svg class="transition-transform text-gray-400 overflow-visible sm:size-3.5 size-3 rotate-0" width="1em" height="1em" viewBox="0 0 12 7" fill="none" xmlns="http://www.w3.org/2000/svg"><path d="M1 1L6 6L11 1" stroke="currentColor"></path></svg><!----></button></div> <!--[-1--><!--]--></div><!----> <!--[0--><h1 class="relative group"><a id="hugging-face-jobs" class="header-link block pr-1.5 text-lg no-hover:hidden with-hover:absolute with-hover:p-1.5 with-hover:opacity-0 with-hover:group-hover:opacity-100 with-hover:right-full" href="#hugging-face-jobs"><span><svg xmlns="http://www.w3.org/2000/svg" xmlns:xlink="http://www.w3.org/1999/xlink" aria-hidden="true" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 256 256"><path d="M167.594 88.393a8.001 8.001 0 0 1 0 11.314l-67.882 67.882a8 8 0 1 1-11.314-11.315l67.882-67.881a8.003 8.003 0 0 1 11.314 0zm-28.287 84.86l-28.284 28.284a40 40 0 0 1-56.567-56.567l28.284-28.284a8 8 0 0 0-11.315-11.315l-28.284 28.284a56 56 0 0 0 79.196 79.197l28.285-28.285a8 8 0 1 0-11.315-11.314zM212.852 43.14a56.002 56.002 0 0 0-79.196 0l-28.284 28.284a8 8 0 1 0 11.314 11.314l28.284-28.284a40 40 0 0 1 56.568 56.567l-28.285 28.285a8 8 0 0 0 11.315 11.314l28.284-28.284a56.065 56.065 0 0 0 0-79.196z" fill="currentColor"></path></svg><!----></span></a> <span><!---->Việc làm tại Hugging Face<!----></span></h1><!--]--><!----> <p><a href="https://huggingface.co/docs/hub/jobs" rel="nofollow">Hugging Face Jobs</a> chạy trên GPU của Hugging Face, vì vậy bạn không cần thiết lập máy, và quá trình chạy sẽ tiếp tục ngay cả khi bạn đóng terminal. Các script huấn luyện của Diffusers chạy trên Jobs trực tiếp từ URL GitHub mà không cần clone repository hay cài đặt gì đó cục bộ.</p> <p>Trước khi bắt đầu, hãy làm theo <a href="https://huggingface.co/docs/hub/jobs-quickstart" rel="nofollow">Jobs quickstart</a> để cài đặt CLI <code>hf</code>, đăng nhập và thêm tín dụng vào tài khoản của bạn.</p> <!--[1--><h2 class="relative group"><a id="train-a-lora-on-jobs" class="header-link block pr-1.5 text-lg no-hover:hidden with-hover:absolute with-hover:p-1.5 with-hover:opacity-0 with-hover:group-hover:opacity-100 with-hover:right-full" href="#train-a-lora-on-jobs"><span><svg xmlns="http://www.w3.org/2000/svg" xmlns:xlink="http://www.w3.org/1999/xlink" aria-hidden="true" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 256 256"><path d="M167.594 88.393a8.001 8.001 0 0 1 0 11.314l-67.882 67.882a8 8 0 1 1-11.314-11.315l67.882-67.881a8.003 8.003 0 0 1 11.314 0zm-28.287 84.86l-28.284 28.284a40 40 0 0 1-56.567-56.567l28.284-28.284a8 8 0 0 0-11.315-11.315l-28.284 28.284a56 56 0 0 0 79.196 79.197l28.285-28.285a8 8 0 1 0-11.315-11.314zM212.852 43.14a56.002 56.002 0 0 0-79.196 0l-28.284 28.284a8 8 0 1 0 11.314 11.314l28.284-28.284a40 40 0 0 1 56.568 56.567l-28.285 28.285a8 8 0 0 0 11.315 11.314l28.284-28.284a56.065 56.065 0 0 0 0-79.196z" fill="currentColor"></path></svg><!----></span></a> <span><!---->Huấn luyện một LoRA trên Jobs<!----></span></h2><!--]--><!----> <p>Lệnh bên dưới huấn luyện một LoRA cho <a href="https://huggingface.co/black-forest-labs/FLUX.2-klein-4B" rel="nofollow">FLUX.2-klein-4B</a> trên năm bức ảnh chó trong <a href="https://huggingface.co/datasets/diffusers/dog-example" rel="nofollow">diffusers/dog-example</a>. Nó chạy trên một A10G duy nhất và đẩy LoRA lên namespace của bạn trên Hub.</p> <div class="code-block relative "><div class="absolute top-2.5 right-4"><button class="inline-flex items-center relative text-sm focus:text-green-500 cursor-pointer focus:outline-none transition duration-200 ease-in-out opacity-0 mx-0.5 text-gray-600 " title="code excerpt" type="button"><svg xmlns="http://www.w3.org/2000/svg" aria-hidden="true" fill="currentColor" focusable="false" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 32 32"><path d="M28,10V28H10V10H28m0-2H10a2,2,0,0,0-2,2V28a2,2,0,0,0,2,2H28a2,2,0,0,0,2-2V10a2,2,0,0,0-2-2Z" transform="translate(0)"></path><path d="M4,18H2V4A2,2,0,0,1,4,2H18V4H4Z" transform="translate(0)"></path><rect fill="none" width="32" height="32"></rect></svg><!----> <div class=" absolute pointer-events-none transition-opacity bg-black text-white py-1 px-2 leading-tight rounded font-normal shadow left-1/2 top-full transform -translate-x-1/2 translate-y-2 opacity-0 "><div class="absolute bottom-full left-1/2 transform -translate-x-1/2 w-0 h-0 border-black border-4 border-t-0" style="border-left-color: transparent; border-right-color: transparent;"></div> Đã sao chép</div><!----></button><!----></div> <pre class="language-bash "><!----><span class="hljs-comment"># 20 steps is a test run. For a real run, raise --max_train_steps</span> | |
| <span class="hljs-comment"># (the FLUX.2 README uses 500) and --timeout to match.</span> | |
| hf <span class="hljs-built_in">jobs</span> uv run --flavor a10g-small --<span class="hljs-built_in">timeout</span> 30m -s HF_TOKEN -- \ | |
| https://raw.githubusercontent.com/huggingface/diffusers/main/examples/dreambooth/train_dreambooth_lora_flux2_klein.py \ | |
| --pretrained_model_name_or_path black-forest-labs/FLUX.2-klein-4B \ | |
| --dataset_name diffusers/dog-example \ | |
| --instance_prompt <span class="hljs-string">"a photo of sks dog"</span> \ | |
| --resolution 512 --mixed_precision bf16 --guidance_scale 1 \ | |
| --gradient_checkpointing --cache_latents \ | |
| --optimizer adamW --use_8bit_adam --learning_rate 1e-4 \ | |
| --max_train_steps 20 --seed 0 \ | |
| --output_dir /tmp/out \ | |
| --push_to_hub --hub_model_id your-username/klein-dog-lora<!----></pre></div><!----> <p><code>uv</code> cài đặt các phụ thuộc được liệt kê trong phần đầu <code># /// script</code> của script, bao gồm Diffusers từ <code>main</code>. Các Job không nhận token Hugging Face theo mặc định, do đó <code>-s HF_TOKEN</code> chuyển token của bạn để script có thể push LoRA. Ổ đĩa của Job sẽ bị xóa khi Job kết thúc, và bất kỳ thứ gì bạn không push sẽ bị mất. Hướng dẫn <a href="./dreambooth">DreamBooth</a> và <a href="./lora">LoRA</a> giải thích các đối số huấn luyện.</p> <!--[1--><h2 class="relative group"><a id="managing-a-job" class="header-link block pr-1.5 text-lg no-hover:hidden with-hover:absolute with-hover:p-1.5 with-hover:opacity-0 with-hover:group-hover:opacity-100 with-hover:right-full" href="#managing-a-job"><span><svg xmlns="http://www.w3.org/2000/svg" xmlns:xlink="http://www.w3.org/1999/xlink" aria-hidden="true" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 256 256"><path d="M167.594 88.393a8.001 8.001 0 0 1 0 11.314l-67.882 67.882a8 8 0 1 1-11.314-11.315l67.882-67.881a8.003 8.003 0 0 1 11.314 0zm-28.287 84.86l-28.284 28.284a40 40 0 0 1-56.567-56.567l28.284-28.284a8 8 0 0 0-11.315-11.315l-28.284 28.284a56 56 0 0 0 79.196 79.197l28.285-28.285a8 8 0 1 0-11.315-11.314zM212.852 43.14a56.002 56.002 0 0 0-79.196 0l-28.284 28.284a8 8 0 1 0 11.314 11.314l28.284-28.284a40 40 0 0 1 56.568 56.567l-28.285 28.285a8 8 0 0 0 11.315 11.314l28.284-28.284a56.065 56.065 0 0 0 0-79.196z" fill="currentColor"></path></svg><!----></span></a> <span><!---->Quản lý một Job<!----></span></h2><!--]--><!----> <p>Nhật ký huấn luyện được in ra terminal của bạn trong khi Job đang chạy. Việc đóng terminal hoặc nhấn <code>Ctrl+C</code> sẽ không dừng quá trình huấn luyện, vì Job chạy trên các máy của Hugging Face. Để khởi chạy một phiên dài mà không chiếm dụng terminal, hãy thêm <code>-d</code> trước <code>--</code>. Lệnh sẽ in ra Job ID và trả về.</p> <p>Sử dụng Job ID để gắn lại vào nhật ký, kiểm tra bộ nhớ và mức sử dụng GPU trong khi mô hình đang huấn luyện, hoặc dừng một lần chạy.</p> <div class="code-block relative "><div class="absolute top-2.5 right-4"><button class="inline-flex items-center relative text-sm focus:text-green-500 cursor-pointer focus:outline-none transition duration-200 ease-in-out opacity-0 mx-0.5 text-gray-600 " title="code excerpt" type="button"><svg xmlns="http://www.w3.org/2000/svg" aria-hidden="true" fill="currentColor" focusable="false" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 32 32"><path d="M28,10V28H10V10H28m0-2H10a2,2,0,0,0-2,2V28a2,2,0,0,0,2,2H28a2,2,0,0,0,2-2V10a2,2,0,0,0-2-2Z" transform="translate(0)"></path><path d="M4,18H2V4A2,2,0,0,1,4,2H18V4H4Z" transform="translate(0)"></path><rect fill="none" width="32" height="32"></rect></svg><!----> <div class=" absolute pointer-events-none transition-opacity bg-black text-white py-1 px-2 leading-tight rounded font-normal shadow left-1/2 top-full transform -translate-x-1/2 translate-y-2 opacity-0 "><div class="absolute bottom-full left-1/2 transform -translate-x-1/2 w-0 h-0 border-black border-4 border-t-0" style="border-left-color: transparent; border-right-color: transparent;"></div> Đã sao chép</div><!----></button><!----></div> <pre class="language-bash "><!---->hf <span class="hljs-built_in">jobs</span> logs -f <job_id> | |
| hf <span class="hljs-built_in">jobs</span> stats <job_id> | |
| hf <span class="hljs-built_in">jobs</span> cancel <job_id><!----></pre></div><!----> <p>Nếu run thất bại, <code>hf jobs inspect <job_id></code> sẽ hiển thị thông báo lỗi. Xem <a href="https://huggingface.co/docs/hub/jobs-manage" rel="nofollow">Quản lý Jobs</a> để biết các lệnh khác.</p> <!--[1--><h2 class="relative group"><a id="train-on-your-own-images" class="header-link block pr-1.5 text-lg no-hover:hidden with-hover:absolute with-hover:p-1.5 with-hover:opacity-0 with-hover:group-hover:opacity-100 with-hover:right-full" href="#train-on-your-own-images"><span><svg xmlns="http://www.w3.org/2000/svg" xmlns:xlink="http://www.w3.org/1999/xlink" aria-hidden="true" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 256 256"><path d="M167.594 88.393a8.001 8.001 0 0 1 0 11.314l-67.882 67.882a8 8 0 1 1-11.314-11.315l67.882-67.881a8.003 8.003 0 0 1 11.314 0zm-28.287 84.86l-28.284 28.284a40 40 0 0 1-56.567-56.567l28.284-28.284a8 8 0 0 0-11.315-11.315l-28.284 28.284a56 56 0 0 0 79.196 79.197l28.285-28.285a8 8 0 1 0-11.315-11.314zM212.852 43.14a56.002 56.002 0 0 0-79.196 0l-28.284 28.284a8 8 0 1 0 11.314 11.314l28.284-28.284a40 40 0 0 1 56.568 56.567l-28.285 28.285a8 8 0 0 0 11.315 11.314l28.284-28.284a56.065 56.065 0 0 0 0-79.196z" fill="currentColor"></path></svg><!----></span></a> <span><!---->Huấn luyện trên hình ảnh của bạn<!----></span></h2><!--]--><!----> <p>Để huấn luyện trên các hình ảnh của bạn, hãy gắn (mount) thư mục chứa chúng vào Job bằng <code>-v</code> và truyền đường dẫn gắn vào <code>--instance_data_dir</code> thay vì <code>--dataset_name</code>. Jobs sẽ tải thư mục lên một bucket riêng tư trước khi Job bắt đầu và gắn nó ở chế độ chỉ đọc. Việc tải cùng một thư mục lên lần nữa chỉ gửi các tệp mới hoặc đã thay đổi.</p> <div class="code-block relative "><div class="absolute top-2.5 right-4"><button class="inline-flex items-center relative text-sm focus:text-green-500 cursor-pointer focus:outline-none transition duration-200 ease-in-out opacity-0 mx-0.5 text-gray-600 " title="code excerpt" type="button"><svg xmlns="http://www.w3.org/2000/svg" aria-hidden="true" fill="currentColor" focusable="false" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 32 32"><path d="M28,10V28H10V10H28m0-2H10a2,2,0,0,0-2,2V28a2,2,0,0,0,2,2H28a2,2,0,0,0,2-2V10a2,2,0,0,0-2-2Z" transform="translate(0)"></path><path d="M4,18H2V4A2,2,0,0,1,4,2H18V4H4Z" transform="translate(0)"></path><rect fill="none" width="32" height="32"></rect></svg><!----> <div class=" absolute pointer-events-none transition-opacity bg-black text-white py-1 px-2 leading-tight rounded font-normal shadow left-1/2 top-full transform -translate-x-1/2 translate-y-2 opacity-0 "><div class="absolute bottom-full left-1/2 transform -translate-x-1/2 w-0 h-0 border-black border-4 border-t-0" style="border-left-color: transparent; border-right-color: transparent;"></div> Đã sao chép</div><!----></button><!----></div> <pre class="language-bash "><!---->hf <span class="hljs-built_in">jobs</span> uv run --flavor a10g-small --<span class="hljs-built_in">timeout</span> 30m -s HF_TOKEN \ | |
| -v ./my-dog:/data -- \ | |
| https://raw.githubusercontent.com/huggingface/diffusers/main/examples/dreambooth/train_dreambooth_lora_flux2_klein.py \ | |
| --pretrained_model_name_or_path black-forest-labs/FLUX.2-klein-4B \ | |
| --instance_data_dir /data \ | |
| --instance_prompt <span class="hljs-string">"a photo of sks dog"</span> \ | |
| --resolution 512 --mixed_precision bf16 --guidance_scale 1 \ | |
| --gradient_checkpointing --cache_latents \ | |
| --optimizer adamW --use_8bit_adam --learning_rate 1e-4 \ | |
| --max_train_steps 20 --seed 0 \ | |
| --output_dir /tmp/out \ | |
| --push_to_hub --hub_model_id your-username/klein-dog-lora<!----></pre></div><!----> <p>Script mở mọi tệp trong <code>--instance_data_dir</code> như một hình ảnh, vì vậy chỉ giữ các tệp hình ảnh trong thư mục. Một tệp ẩn như <code>.DS_Store</code> sẽ khiến quá trình chạy thất bại. Xem <a href="https://huggingface.co/docs/hub/jobs-configuration#local-directories" rel="nofollow">Thư mục cục bộ</a> để biết thêm về việc gắn (mount) một thư mục.</p> <p>Với <code>--with_prior_preservation</code>, script sẽ tạo các ảnh lớp vào <code>--class_data_dir</code> trước khi quá trình huấn luyện bắt đầu. Hãy trỏ đến một đường dẫn mà Job có thể ghi được. Để tái sử dụng các ảnh lớp trong các lần chạy sau, hãy đặt chúng trong một bucket mount đọc-ghi như trong <a href="#save-checkpoints-for-long-runs">Lưu checkpoint cho các lần chạy dài</a>.</p> <!--[1--><h2 class="relative group"><a id="train-in-fp8" class="header-link block pr-1.5 text-lg no-hover:hidden with-hover:absolute with-hover:p-1.5 with-hover:opacity-0 with-hover:group-hover:opacity-100 with-hover:right-full" href="#train-in-fp8"><span><svg xmlns="http://www.w3.org/2000/svg" xmlns:xlink="http://www.w3.org/1999/xlink" aria-hidden="true" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 256 256"><path d="M167.594 88.393a8.001 8.001 0 0 1 0 11.314l-67.882 67.882a8 8 0 1 1-11.314-11.315l67.882-67.881a8.003 8.003 0 0 1 11.314 0zm-28.287 84.86l-28.284 28.284a40 40 0 0 1-56.567-56.567l28.284-28.284a8 8 0 0 0-11.315-11.315l-28.284 28.284a56 56 0 0 0 79.196 79.197l28.285-28.285a8 8 0 1 0-11.315-11.314zM212.852 43.14a56.002 56.002 0 0 0-79.196 0l-28.284 28.284a8 8 0 1 0 11.314 11.314l28.284-28.284a40 40 0 0 1 56.568 56.567l-28.285 28.285a8 8 0 0 0 11.315 11.314l28.284-28.284a56.065 56.065 0 0 0 0-79.196z" fill="currentColor"></path></svg><!----></span></a> <span><!---->Huấn luyện ở FP8<!----></span></h2><!--]--><!----> <p>Các script DreamBooth LoRA của FLUX.2, Z-Image, Ideogram 4 và Krea 2 nhận <code>--do_fp8_training</code> để huấn luyện ở FP8 bằng <a href="https://github.com/pytorch/ao" rel="nofollow">torchao</a>, giúp giảm mức sử dụng bộ nhớ. Không có header script nào bao gồm torchao, vì vậy hãy thêm <code>--with torchao</code> trước <code>--</code>. FP8 cũng yêu cầu GPU có khả năng tính toán từ 8.9 trở lên, chẳng hạn như L4 (<code>l4x1</code>) hoặc L40S (<code>l40sx1</code>). A10G (8.6) và A100 (8.0) không hỗ trợ tính năng này.</p> <!--[1--><h2 class="relative group"><a id="run-a-script-without-a-dependency-header" class="header-link block pr-1.5 text-lg no-hover:hidden with-hover:absolute with-hover:p-1.5 with-hover:opacity-0 with-hover:group-hover:opacity-100 with-hover:right-full" href="#run-a-script-without-a-dependency-header"><span><svg xmlns="http://www.w3.org/2000/svg" xmlns:xlink="http://www.w3.org/1999/xlink" aria-hidden="true" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 256 256"><path d="M167.594 88.393a8.001 8.001 0 0 1 0 11.314l-67.882 67.882a8 8 0 1 1-11.314-11.315l67.882-67.881a8.003 8.003 0 0 1 11.314 0zm-28.287 84.86l-28.284 28.284a40 40 0 0 1-56.567-56.567l28.284-28.284a8 8 0 0 0-11.315-11.315l-28.284 28.284a56 56 0 0 0 79.196 79.197l28.285-28.285a8 8 0 1 0-11.315-11.314zM212.852 43.14a56.002 56.002 0 0 0-79.196 0l-28.284 28.284a8 8 0 1 0 11.314 11.314l28.284-28.284a40 40 0 0 1 56.568 56.567l-28.285 28.285a8 8 0 0 0 11.315 11.314l28.284-28.284a56.065 56.065 0 0 0 0-79.196z" fill="currentColor"></path></svg><!----></span></a> <span><!---->Chạy một script không có phần tiêu đề phụ thuộc<!----></span></h2><!--]--><!----> <p>Chỉ các script trong <a href="https://github.com/huggingface/diffusers/tree/main/examples/dreambooth" rel="nofollow">examples/dreambooth</a> và <a href="https://github.com/huggingface/diffusers/tree/main/examples/advanced_diffusion_training" rel="nofollow">examples/advanced_diffusion_training</a> khai báo các phụ thuộc của chúng trong khối <code># /// script</code> ở đầu tệp. Một số script trong các thư mục đó, chẳng hạn như <code>train_dreambooth_lora_sdxl.py</code>, không có khối này.</p> <p>Đối với script không có header, hãy truyền từng dependency bằng <code>--with</code>. Cài đặt Diffusers từ source, vì các script huấn luyện yêu cầu phiên bản phát triển. Các dependency khác đến từ tệp <code>requirements.txt</code> của script và các import của nó.</p> <div class="code-block relative "><div class="absolute top-2.5 right-4"><button class="inline-flex items-center relative text-sm focus:text-green-500 cursor-pointer focus:outline-none transition duration-200 ease-in-out opacity-0 mx-0.5 text-gray-600 " title="code excerpt" type="button"><svg xmlns="http://www.w3.org/2000/svg" aria-hidden="true" fill="currentColor" focusable="false" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 32 32"><path d="M28,10V28H10V10H28m0-2H10a2,2,0,0,0-2,2V28a2,2,0,0,0,2,2H28a2,2,0,0,0,2-2V10a2,2,0,0,0-2-2Z" transform="translate(0)"></path><path d="M4,18H2V4A2,2,0,0,1,4,2H18V4H4Z" transform="translate(0)"></path><rect fill="none" width="32" height="32"></rect></svg><!----> <div class=" absolute pointer-events-none transition-opacity bg-black text-white py-1 px-2 leading-tight rounded font-normal shadow left-1/2 top-full transform -translate-x-1/2 translate-y-2 opacity-0 "><div class="absolute bottom-full left-1/2 transform -translate-x-1/2 w-0 h-0 border-black border-4 border-t-0" style="border-left-color: transparent; border-right-color: transparent;"></div> Đã sao chép</div><!----></button><!----></div> <pre class="language-bash "><!---->hf <span class="hljs-built_in">jobs</span> uv run --flavor a10g-small --<span class="hljs-built_in">timeout</span> 30m -s HF_TOKEN \ | |
| --with <span class="hljs-string">"diffusers @ git+https://github.com/huggingface/diffusers.git"</span> \ | |
| --with torch --with torchvision --with accelerate --with transformers \ | |
| --with peft --with datasets --with bitsandbytes \ | |
| --with ftfy --with tensorboard --with Jinja2 -- \ | |
| https://raw.githubusercontent.com/huggingface/diffusers/main/examples/dreambooth/train_dreambooth_lora_sdxl.py \ | |
| --pretrained_model_name_or_path stabilityai/stable-diffusion-xl-base-1.0 \ | |
| --pretrained_vae_model_name_or_path madebyollin/sdxl-vae-fp16-fix \ | |
| --dataset_name diffusers/dog-example \ | |
| --instance_prompt <span class="hljs-string">"a photo of sks dog"</span> \ | |
| --resolution 1024 --mixed_precision fp16 \ | |
| --gradient_checkpointing --use_8bit_adam --learning_rate 1e-4 \ | |
| --max_train_steps 20 --seed 0 \ | |
| --output_dir /tmp/out \ | |
| --push_to_hub --hub_model_id your-username/sdxl-dog-lora<!----></pre></div><!----> <!--[1--><h2 class="relative group"><a id="save-checkpoints-for-long-runs" class="header-link block pr-1.5 text-lg no-hover:hidden with-hover:absolute with-hover:p-1.5 with-hover:opacity-0 with-hover:group-hover:opacity-100 with-hover:right-full" href="#save-checkpoints-for-long-runs"><span><svg xmlns="http://www.w3.org/2000/svg" xmlns:xlink="http://www.w3.org/1999/xlink" aria-hidden="true" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 256 256"><path d="M167.594 88.393a8.001 8.001 0 0 1 0 11.314l-67.882 67.882a8 8 0 1 1-11.314-11.315l67.882-67.881a8.003 8.003 0 0 1 11.314 0zm-28.287 84.86l-28.284 28.284a40 40 0 0 1-56.567-56.567l28.284-28.284a8 8 0 0 0-11.315-11.315l-28.284 28.284a56 56 0 0 0 79.196 79.197l28.285-28.285a8 8 0 1 0-11.315-11.314zM212.852 43.14a56.002 56.002 0 0 0-79.196 0l-28.284 28.284a8 8 0 1 0 11.314 11.314l28.284-28.284a40 40 0 0 1 56.568 56.567l-28.285 28.285a8 8 0 0 0 11.315 11.314l28.284-28.284a56.065 56.065 0 0 0 0-79.196z" fill="currentColor"></path></svg><!----></span></a> <span><!---->Lưu checkpoint cho các lần chạy dài<!----></span></h2><!--]--><!----> <p>Một lần chạy mất hàng giờ có thể bị hết thời gian hoặc gặp sự cố trước khi hoàn tất. Để giữ lại tiến độ, hãy gắn <a href="https://huggingface.co/docs/hub/storage-buckets" rel="nofollow">Storage Bucket</a> vào Job bằng <code>-v</code> và trỏ <code>--output_dir</code> đến bucket đó. Trước tiên, hãy tạo bucket bằng <code>hf buckets create</code>.</p> <p>Script lưu một thư mục <code>checkpoint-<step></code> vào <code>--output_dir</code> mỗi <code>--checkpointing_steps</code> bước (mặc định là 500), do đó các checkpoint sẽ được đưa vào bucket trong khi huấn luyện đang diễn ra. <code>--checkpoints_total_limit</code> giới hạn số lượng checkpoint được giữ lại. <code>--resume_from_checkpoint latest</code> tiếp tục từ checkpoint mới nhất trong <code>--output_dir</code>, và bắt đầu từ đầu nếu không có checkpoint nào, nhờ đó cùng một lệnh hoạt động cho lần chạy đầu tiên cũng như cho mỗi lần khởi động lại.</p> <div class="code-block relative "><div class="absolute top-2.5 right-4"><button class="inline-flex items-center relative text-sm focus:text-green-500 cursor-pointer focus:outline-none transition duration-200 ease-in-out opacity-0 mx-0.5 text-gray-600 " title="code excerpt" type="button"><svg xmlns="http://www.w3.org/2000/svg" aria-hidden="true" fill="currentColor" focusable="false" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 32 32"><path d="M28,10V28H10V10H28m0-2H10a2,2,0,0,0-2,2V28a2,2,0,0,0,2,2H28a2,2,0,0,0,2-2V10a2,2,0,0,0-2-2Z" transform="translate(0)"></path><path d="M4,18H2V4A2,2,0,0,1,4,2H18V4H4Z" transform="translate(0)"></path><rect fill="none" width="32" height="32"></rect></svg><!----> <div class=" absolute pointer-events-none transition-opacity bg-black text-white py-1 px-2 leading-tight rounded font-normal shadow left-1/2 top-full transform -translate-x-1/2 translate-y-2 opacity-0 "><div class="absolute bottom-full left-1/2 transform -translate-x-1/2 w-0 h-0 border-black border-4 border-t-0" style="border-left-color: transparent; border-right-color: transparent;"></div> Đã sao chép</div><!----></button><!----></div> <pre class="language-bash "><!---->hf <span class="hljs-built_in">jobs</span> uv run --flavor a10g-small --<span class="hljs-built_in">timeout</span> 8h -s HF_TOKEN \ | |
| -v hf://buckets/your-username/checkpoints:/ckpt -- \ | |
| https://raw.githubusercontent.com/huggingface/diffusers/main/examples/dreambooth/train_dreambooth_lora_flux2_klein.py \ | |
| --pretrained_model_name_or_path black-forest-labs/FLUX.2-klein-4B \ | |
| --dataset_name diffusers/dog-example \ | |
| --instance_prompt <span class="hljs-string">"a photo of sks dog"</span> \ | |
| --resolution 1024 --mixed_precision bf16 --guidance_scale 1 \ | |
| --gradient_checkpointing --cache_latents \ | |
| --optimizer adamW --use_8bit_adam --learning_rate 1e-4 \ | |
| --max_train_steps 5000 --seed 0 \ | |
| --checkpointing_steps 500 --checkpoints_total_limit 3 \ | |
| --resume_from_checkpoint latest \ | |
| --output_dir /ckpt/klein-dog<!----></pre></div><!----> <p>Khi quá trình huấn luyện kết thúc, LoRA sẽ được lưu vào bucket dưới dạng <code>pytorch_lora_weights.safetensors</code>. Xem <a href="https://huggingface.co/docs/hub/jobs-configuration#volumes" rel="nofollow">Volumes</a> để biết các tùy chọn gắn (mount).</p> <blockquote class="note"><p>Đừng thêm <code>--push_to_hub</code> khi <code>--output_dir</code> chứa các checkpoint. Việc tải lên chỉ bỏ qua các thư mục <code>step_*</code> và <code>epoch_*</code>, do đó các thư mục <code>checkpoint-<step></code> sẽ được đẩy lên kho mô hình cùng với LoRA. Thay vào đó, hãy tự tải <code>pytorch_lora_weights.safetensors</code> lên kho mô hình.</p></blockquote> <!--[1--><h2 class="relative group"><a id="next-steps" class="header-link block pr-1.5 text-lg no-hover:hidden with-hover:absolute with-hover:p-1.5 with-hover:opacity-0 with-hover:group-hover:opacity-100 with-hover:right-full" href="#next-steps"><span><svg xmlns="http://www.w3.org/2000/svg" xmlns:xlink="http://www.w3.org/1999/xlink" aria-hidden="true" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 256 256"><path d="M167.594 88.393a8.001 8.001 0 0 1 0 11.314l-67.882 67.882a8 8 0 1 1-11.314-11.315l67.882-67.881a8.003 8.003 0 0 1 11.314 0zm-28.287 84.86l-28.284 28.284a40 40 0 0 1-56.567-56.567l28.284-28.284a8 8 0 0 0-11.315-11.315l-28.284 28.284a56 56 0 0 0 79.196 79.197l28.285-28.285a8 8 0 1 0-11.315-11.314zM212.852 43.14a56.002 56.002 0 0 0-79.196 0l-28.284 28.284a8 8 0 1 0 11.314 11.314l28.284-28.284a40 40 0 0 1 56.568 56.567l-28.285 28.285a8 8 0 0 0 11.315 11.314l28.284-28.284a56.065 56.065 0 0 0 0-79.196z" fill="currentColor"></path></svg><!----></span></a> <span><!---->Các bước tiếp theo<!----></span></h2><!--]--><!----> <ul><li>Đọc <a href="https://huggingface.co/docs/hub/jobs-training" rel="nofollow">Train Models on Jobs</a> trong tài liệu Hub để biết các bước kiểm tra cần thực hiện trước một tác vụ dài và cách đọc một tác vụ đã thất bại.</li> <li>Tải LoRA đã được huấn luyện của bạn để suy luận với hướng dẫn <a href="../tutorials/using_peft_for_inference">LoRA</a>.</li> <li>Xem các <a href="https://github.com/huggingface/diffusers/tree/main/examples/dreambooth" rel="nofollow">tệp README của DreamBooth</a> để biết các lệnh và tùy chọn bộ nhớ cụ thể cho từng mô hình.</li></ul> <a class="!text-gray-400 !no-underline text-sm flex items-center not-prose mt-4" href="https://github.com/huggingface/diffusers/blob/main/docs/source/en/training/jobs.md" target="_blank"><svg class="mr-1" xmlns="http://www.w3.org/2000/svg" aria-hidden="true" fill="currentColor" focusable="false" role="img" width="1em" height="1em" preserveAspectRatio="xMidYMid meet" viewBox="0 0 32 32"><path d="M31,16l-7,7l-1.41-1.41L28.17,16l-5.58-5.59L24,9l7,7z"></path><path d="M1,16l7-7l1.41,1.41L3.83,16l5.58,5.59L8,23l-7-7z"></path><path d="M12.419,25.484L17.639,6.552l1.932,0.518L14.351,26.002z"></path></svg><!----> <span><span class="underline">Update</span> on GitHub</span></a><!----> <p></p><!--]--><!----><!--]--><!--]--><!--]--> <!--[-1--><!--]--><!--]--> | |
| <script> | |
| { | |
| __sveltekit_1qsdbwf = { | |
| base: "/docs/diffusers/main/en", | |
| assets: "/docs/diffusers/main/en" | |
| }; | |
| const element = document.currentScript.parentElement; | |
| Promise.all([ | |
| import("/docs/diffusers/main/en/_app/immutable/entry/start.0S0_iEoG.js"), | |
| import("/docs/diffusers/main/en/_app/immutable/entry/app.CPdOxCbw.js") | |
| ]).then(([kit, app]) => { | |
| kit.start(app, element, { | |
| node_ids: [0, 371], | |
| data: [null,null], | |
| form: null, | |
| error: null | |
| }); | |
| }); | |
| } | |
| </script> | |
Xet Storage Details
- Size:
- 34 kB
- Xet hash:
- 2ea1d90fdcf6e249dcd13eb583237231a89d32fa10eb3053fbca866e4024738d
·
Xet efficiently stores files, intelligently splitting them into unique chunks and accelerating uploads and downloads. More info.