본문 바로가기

ComfyUI9

FLUX Model FLUX는 SD 모델의 변종 모델로, SD3 및 Midjourney 모델과 유사합니다. 권장사항으로는 23GB의 VRAM이 필요합니다.VRAM이 부족하면 RAM을 VRAM으로 사용하도록 전환하여 프로세스가 상당히 느려집니다.VRAM이 부족하면 1024x1024 이미지를 생성하는 데 20~30분이 걸릴 수 있습니다(2080TI, 11GB vram 기준).Flux가 게시한 공식 성능 표입니다. [Black Forest Labs - Frontier AI Lab] 에서 개발하였습니다.FLUX는 세 가지 유형의 모델을 제공합니다.Pro 모델:설명 : 최고 수준의 프롬프트 추적, 시각적 품질, 이미지 세부 정보 및 출력 다양성을 갖춘 이미지 생성에서 최첨단 성능을 제공합니다.License : EnterpriseDe.. 2024. 8. 19.
ComfyUI X UnrealEngine - ComfyTexture 개발 일지 (2) 전에 작성하던 글과2024.04.17 - [AI Image] - ComfyUI X UnrealEngine2024.05.07 - [AI Image] - ComfyUI X UnrealEngine - ComfyTexture 개발 일지 (1) 이어지는 글이다. 현재 ChatGPT와 PerplexityAI 두가지 AI툴을 이용하여 코딩 및 개발을 진행하고있다.현재 개발 진행 상황 (UE5.3) 1분 정도의 짧은 영상이다.TripoSR 과 UnrealEngine , ComfyUI 를 이용하여언리얼엔진에서 텍스트를 입력 후 버튼 한번 클릭으로 StaticMesh가 생성이 되는것을 볼 수 있다. Prompt1. Basket2. Robot toy 2024. 5. 31.
캐릭터 시트 만들기 (ComfyUI) ComfyUI를 통한 나만의 캐릭터 시트 만들기 전체 워크플로메타데이터가 png파일에 들어있어, 드래그앤 드랍시 워크플로를 사용할 수 있다. 워크플로 설명1. Openpose를 이용하여 포즈를 잡는다.2. TextPrompt , Image의 Ipadapter로 적용한 스타일과 해당 포즈를 ControlNet에 연결해서 캐릭터 시트를 만든다.3. 이후 Upscale, FaceFix (FaceDetailer 노드를 이용)를 해준다. 4. 각 포즈가 위치한 부분을 잘라 저장해준다. 5. 해당 캐릭터에 감정을 넣어준 이미지를 생성한다.FaceDetailer 노드를 활용, IPAdapter Plus 커스텀 노드를 활용.  6.  Final upscale 및 감정이 들어간 이미지를 세이브 해준다. ComfyUI를 .. 2024. 5. 22.
Photoshop X ComfyUI Photoshop과 ComfyUI의 결합 ComfyUI for Photoshop 플러그인- AI 기반 이미지 생성 시스템을 Photoshop에 통합하는 플러그인 기능Unlimited Generative Fill: Create AI-infused content in selected image areas. -  선택 영역에 AI 생성 콘텐츠를 만듭니다. Customizable Back-End: change the workflow from you ComfyUi webpage. - ComfyUI 웹페이지에서 워크플로우를 변경할 수 있습니다. AI-Powered Artistry: Generate or transform images with advanced AI. - 고급 AI로 이미지를 생성하거나 변환합니다. O.. 2024. 5. 21.
ComfyUI X UnrealEngine - ComfyTexture 개발 일지 (1) 2024.04.17 - [AI Image] - ComfyUI X UnrealEngine ComfyUI X UnrealEngine오늘의 주제 Unreal Engine 의 프로젝트에 ComfyUI를 플러그인으로 연결해주기 git : ComfyTextures https://github.com/AlexanderDzhoganov/ComfyTextures GitHub - AlexanderDzhoganov/ComfyTextures: Unreal Engine ⚔️ ComfyUI - Automatic texdose.tistory.com이어지는 글이다. ComfyTexture 기본 기능Prompt에 따라 AI Image 생성 이후 Unreal Level의 Camera가 보고있는 Actor에 Image Projection한.. 2024. 5. 7.
ComfyUI X UnrealEngine 오늘의 주제 Unreal Engine 의 프로젝트에 ComfyUI를 플러그인으로 연결해주기 git : ComfyTextures https://github.com/AlexanderDzhoganov/ComfyTextures GitHub - AlexanderDzhoganov/ComfyTextures: Unreal Engine ⚔️ ComfyUI - Automatic texturing using generative diffusion models Unreal Engine ⚔️ ComfyUI - Automatic texturing using generative diffusion models - GitHub - AlexanderDzhoganov/ComfyTextures: Unreal Engine ⚔️ ComfyUI .. 2024. 4. 17.
ComfyUI 3D 생성형 AI (SV3D, TripoSR) 1. TripoSR TripoSR is a state-of-the-art open-source model for fast feedforward 3D reconstruction from a single image, developed in collaboration between Tripo AI and Stability AI. (본문 설명) 3D 추측 모델 TripoSR 을 사용하여 2D 이미지 → 3D 오브젝트를 생성한다. 장점 : 24년 3월 최신모델이라 기존의 3D생성 모델보다는 정확한편이다. 속도가 굉장히 빠르다. git 주소 https://github.com/VAST-AI-Research/TripoSR GitHub - VAST-AI-Research/TripoSR Contribute to VAST-AI.. 2024. 4. 9.
ComfyUI를 이용한 모양 및 스타일 변경 먼저 예제 이미지파일이다. download 링크 https://www.artstation.com/artwork/mqXNB9 1. 원본 이미지 + 프롬프트 -> 변형 이미지 첫번째 워크플로 (모양 변경) IPAdapter(SDXL1.0)를 사용하여서 유사한 화풍을 그리게 노력하였고, 모델은 juggernautXL_v8 (SDXL1.0) 을 사용하였다. https://civitai.com/models/133005?modelVersionId=288982 해당 json 파일을 받아서 커스텀노드와 모델을 설치하면된다. CustomNode - ComfyUI WD 1.4 Tagger - 이미지를 분석해 적당한 프롬프트를 예상하여 출력해준다. 2. 두번째 워크플로 (스타일 변경) 원본이미지 + 프롬프트 -> 변형 이미.. 2024. 4. 8.
Stable Diffusion 설치 방법 3년만? 의 포스팅 재개 강력한 ComfyUI 에 대해 꾸준히 포스팅 할 예정이다. Stable Diffusion의 설치방법 스테이블 디퓨전은 현재 대중적인 프로그램인 Stable Diffusion Web UI (Automatic1111) 버전과 ComfyUI (노드기반 이미지생성) 버전이있다. 따로 깃허브에서 찾아가서 귀찮게 설치 할 필요 없이 하나의 프로그램에서 두 가지 모두 설치 및 버전 관리를 할 수 있는 프로그램이 있다. 바로 Stability Matrix 이다 (마치 Visual Studio 처럼 스테이블 디퓨전 통합환경을 제공한다.) https://lykos.ai/ Stability Matrix - One-Click Stable Diffusion Installer Stability Matri.. 2024. 4. 2.