FLUX AI는 AI 기반 이미지 생성의 새로운 시대를 열었습니다. 그 몰입감은 비할 데 없는 사실감으로, 자주 유명한 경쟁자를 능가합니다. LoRA(저순위 적응) 모델과 결합될 때, 그것은 예술가와 애호가를 위한 방대한 창의의 캔버스를 엽니다. 이 포괄적인 가이드는 FLUX AI와 함께 LoRA의 힘을 활용하는 방법을 안내합니다. 심층적인 지침, 필수 자원 링크, 그리고 업계의 모범 사례로 가득 차 있습니다. 함께 알아봅시다.더 보기



LoRA와 FLUX 이해하기
LoRA는 저순위 적응(Low-Rank Adaptation)을 의미하는 것으로, 광범위한 언어 모델을 완전히 다시 훈련할 필요 없이 미세 조정할 수 있는 독창적인 방법입니다. FLUX AI와 함께 사용할 때, Stability AI의 제품으로 놀라울 만큼 상세하고 사실적인 이미지를 생성하는 LoRA는 기본 FLUX 체크포인트를 조정하여 특정 스타일, 캐릭터 또는 예술적 효과를 생성할 수 있습니다. 이러한 완벽한 융합은 사용자가 FLUX의 능력을 극대화하고 특정 요구 사항에 맞게 출력을 사용자화할 수 있도록 합니다.더 보기
소프트웨어 설정
FLUX AI와 함께 LoRA를 사용하려면 적절한 소프트웨어 환경을 설정해야 합니다:
- FLUX AI 모델과 LoRAs에 대한 훌륭한 지원을 제공하는 SD Forge WebUI를 설치하세요.
다운로드: https://github.com/lllyasviel/stable-diffusion-webui-forge - FLUX AI 모델 다운로드:
https://huggingface.co/lllyasviel/flux1-dev-bnb-nf4/tree/main - FLUX VAE 다운로드:
https://huggingface.co/black-forest-labs/FLUX.1-schnell/tree/main - Stable Diffusion 설치 관리에 더 편리함을 위해 StabilityMatrix를 사용하는 것을 고려하세요:
https://github.com/LykosAI/StabilityMatrix - 파일 추출을 위해 7-Zip이 필요할 수 있습니다:
https://www.7-zip.org/download.html
적어도 8GB의 VRAM을 가진 호환 가능한 GPU를 보유하고 있어야 합니다 (최적의 성능을 위해 16GB 이상이 추천됨).
FLUX AI와 함께 LoRA 모델을 사용하기 위한 세부 단계
1단계: LoRA 모델 얻기
- Civitai 방문하기: https://civitai.com/
- FLUX와 호환되는 LoRA 모델을 찾기 위해 검색 필터를 사용하세요.
- “FLUX” 태그가 있는 LoRA 또는 FLUX AI와 호환된다고 설명된 LoRA를 찾아보세요.
- 선택한 LoRA 모델을 다운로드하세요. .safetensors 또는 .pt 파일 형태로 제공됩니다.
2단계: LoRA 모델 설치하기
- 설치 디렉토리 찾기: SD Forge WebUI가 설치된 디렉토리를 찾으세요.
- LoRA 폴더로 이동하기: 경로
webui/models/Lora
를 엽니다. - 조직을 위한 하위 폴더 만들기: LoRA 폴더 내에 "Flux"라는 새로운 하위 폴더를 만들어 정리합니다.
- LoRA 파일 이동하기: 다운로드한 LoRA 파일을 새로 만든 "Flux" 하위 폴더에 넣습니다.
3단계: Forge WebUI에서 LoRA로 이미지 생성하기
- SD Forge WebUI 열기: WebUI를 실행하고 "Stable Diffusion" 탭으로 이동합니다.
- 체크포인트 선택하기: "Checkpoint" 드롭다운에서 FLUX 체크포인트를 선택합니다 (추천: 최고 품질을 위해 flux1-dev 사용).
- LoRA 섹션 접근하기: 인터페이스에서 "LoRA" 섹션으로 스크롤 다운합니다.
- LoRA 모델 추가하기: "Add LoRA"를 클릭하고 드롭다운 목록에서 원하는 LoRA 모델을 선택합니다.
- LoRA 가중치 조정하기: 가중치 슬라이더를 사용하여 LoRA 효과를 설정합니다 (최적의 결과를 위해 보통 0.5에서 1.0 사이에서 조정).
- 텍스트 프롬프트 입력하기: 프롬프트 상자에 원하는 텍스트를 작성합니다. 지정된 경우, 모델 설명서의 LoRA 트리거 단어를 포함합니다.
- 이미지 매개변수 설정하기: 이미지 크기, 샘플링 방법 및 단계를 선택합니다.
- 이미지 생성하기: 모든 설정이 완료되면 "Generate"를 클릭하여 LoRA를 적용한 이미지를 생성합니다.
고급 LoRA 사용 기술
여러 LoRA 결합하기
- WebUI의 LoRA 섹션에 여러 LoRA를 추가하세요.
- 각 LoRA의 가중치를 조정하여 효과를 균형잡습니다.
- 고유한 스타일을 위해 다양한 조합을 실험하세요.
부정적 프롬프트로 LoRA 사용하기
- "부정적 프롬프트" 상자를 사용하여 제외하고 싶은 요소를 설명합니다.
- LoRA 모델은 부정적인 가중치로 설정하여 부정적 프롬프트에도 적용할 수 있습니다.
LoRA 효과 미세 조정하기
- LoRA 가중치를 조정하여 효과의 강도를 제어합니다.
- "CFG Scale" 슬라이더를 사용하여 이미지가 프롬프트에 얼마나 밀착하는지 미세 조정합니다.
- 다양한 샘플링 방법 (예: Euler a, DPM++ 2M Karras)을 실험하여 가장 잘 작동하는 것을 찾아보세요.
인기 있는 FLUX LoRA 및 사용법
이와 다른 FLUX 호환 LoRA를 Civitai에서 찾을 수 있습니다: https://civitai.com/
- Flux Disney: Disney 스타일의 애니메이션 캐릭터 생성에 이상적입니다.
- 트리거 단어: “flux_disney”
- 추천 가중치: 0.7–0.9
2. Flux Realism: FLUX의 이미 인상적인 사실감을 더욱 향상시킵니다.
- 트리거 단어: “flux_realism”
- 추천 가중치: 0.6–0.8
3. Flux Yarn Art: 독특한 질감의 수공예적인 모습을 만듭니다.
- 트리거 단어: “flux_yarn”
- 추천 가중치: 0.8–1.0
4. Flux Aquarell Watercolor: 아름다운 수채화 스타일의 이미지를 생성합니다.
- 트리거 단어: “flux_watercolor”
- 추천 가중치: 0.7–0.9
FLUX와 LoRA를 위한 프롬프트 기법
- 명확한 주제 설명으로 시작하세요.
- 스타일, 조명 및 구성에 대한 세부 정보를 추가하세요.
- 지정된 경우, LoRA 트리거 단어를 포함하세요.
- 스타일을 유도하기 위해 예술적 용어를 사용하세요 (예: “인상파”, “포토리얼리틱”).
예시 프롬프트:
“젊은 여성의 하이퍼 리얼리스틱 초상화, flux_realism, 빈티지 꽃무늬 드레스를 입고, 부드러운 미소, 햇빛이 드는 정원에 서 있는 모습, 심도, 전문 사진 촬영”
일반적인 문제 해결하기
- LoRA가 이미지에 영향을 미치지 않음:
- WebUI에 LoRA가 제대로 로드되었는지 확인하세요.
- LoRA 가중치를 높이세요.
- 올바른 트리거 단어를 사용하고 있는지 확인하세요.
2. 메모리 부족 오류:
- 이미지 크기 또는 배치 수를 줄이세요.
- 반 정밀도 (fp16) 모드를 사용해보세요.
- 다른 메모리 집약적인 응용 프로그램을 닫으세요.
3. 예기치 않은 결과:
- 프롬프트에 충돌하는 요소가 있는지 확인하세요.
- CFG 스케일을 조정해보세요.
- 다른 샘플링 방법을 실험해보세요.
자신만의 FLUX LoRA 훈련하기
커스텀 LoRA를 만드는 데 관심 있는 고급 사용자들을 위해:
- 원하는 스타일 또는 주제를 나타내는 고품질 이미지 15–30장의 데이터 세트를 준비하세요.
- 각 이미지에 대한 상세한 설명이 포함된 텍스트 파일을 생성하세요.
- LoRA 훈련 스크립트를 위한 kohya_ss GitHub 리포지토리를 사용하세요:
https://github.com/bmaltais/kohya_ss - 구성 파일을 편집하여 데이터 세트 폴더, 학습률 및 훈련 단계를 지정하세요.
- 훈련 스크립트를 실행하고 과적합을 방지하기 위해 손실 값을 모니터링하세요.
훈련 환경을 설정하는 Mac 사용자들을 위해:
- Python 3.10: https://www.python.org/downloads/
- Git: https://git-scm.com/download/mac
LoRA 훈련 및 사용을 위한 모범 사례
- 다양한 데이터 세트를 사용하여 다재다능한 LoRA를 생성하세요.
- 캐릭터 LoRA의 경우, 다양한 포즈, 표정 및 의상을 포함하세요.
- 낮은 학습률 (예: 1e-4)로 시작하고 필요시 증가시켜보세요.
- 다양한 가중치와 프롬프트로 LoRA를 테스트하여 그 능력을 이해하세요.
- 커뮤니티와 LoRA를 공유하고 개선을 위한 피드백을 수집하세요.
FLUX AI와 함께 LoRA 모델 사용을 마스터하면 AI 생성 예술의 경계를 확장할 수 있습니다. 초 현실주의, 스타일화된 일러스트레이션 또는 독특한 예술적 효과를 목표로 하든, FLUX와 LoRA의 조합은 창의적인 비전을 실현하는 강력한 도구 키트를 제공합니다. 실험하고 탐험하며 이 기술이 제공하는 무한한 가능성을 즐기세요. 항상 소프트웨어를 공식 출처에서 다운로드하고 제3자 도구 설치에 주의하세요. 또한 이러한 응용 프로그램을 실행하기 위한 최소 요구 사항을 충족하는지 확인하세요, 특히 AI 이미지 생성을 위한 GPU 능력 측면에서.