AI/Generate img

미드저니 MJ 7 (ow)/Topaz photo AI)/Google AI Studio/ Runway AI Gen 4 / Kling / Luma / 로 AI 영화 만들기

잉_민 2025. 4. 10. 00:56
728x90
반응형

실패담.

1. 대략적인 시놉만 가지고 막무가내로 이미지만 뽑았다. 

-> 몇백장을 거의 다 버렸다.

>>>> 아이데이션에 아주 좋은 주사위 놀이.

 

2. 시나리오를 작성했다.

->이제 시작.

->> 이미지를 뽑았다.  : 역시 많이 버린다. (일관성 없는 인물, 장소, 빛, 분위기, 똑같은 카메라 앵글...)

 

3. 스토리보드를 만들었다.

->> 이게 가장 효과적이였다.

>>>> 영화의 핵심은 일관성을 어떻게 만들거냐.

인물 성격 결정하기, 인물 모습 결정하기 , 장소 구체화해서 몇개의 맵 고르기, 일관성을위해서는 스토리보드, 무드보드가 필수적이다. 

(장소, 카메라 각도, .. 구체적일수록 좋다. 빛 , 라이트 , 렌즈, 화각, 카메라 무빙, 분위기, 감정)


1.  Midjourney "consistency"

영화는 10초짜리 영상이 아니다. 일관성이 중요하다

유튜브 참조 "midjourney consistency"

https://youtu.be/ZMaUHJvXEI8

 

1. 톤설정 :

구현방법

 - 미드져니에서 무드보드 만들기 

- 프롬프트에 일관적인 단어 구성하기 (단어 템플릿 만들기)

 

 

2. 전체 공간과, 카메라. 구도. 샷 설정.

>> 스토리보드가 더 정확해야한다.  ** 이과정이 제일 중요하다.

>> + 장소, 카메라 각도, .. 구체적일수록 좋다. 빛 , 라이트 , 렌즈, 화각, 카메라 무빙, 분위기, 감정

 

 

3. 프롬프트 예시

> gpt 에게 프롬프트 일관성을 만들어달라고 요청한다.

애초에 이런 형식을 가지고 프롬프트를 작성해야 일관성 있게 이미지를 뽑을 수 있다.

 

4. 구체적인 디테일 추가

>>> 원경을 크롭하여, 디벨롭한다. (** 이거 효과적이다.)

>> 참고사진으로 적용하면 형태가 고정된체 인물만 추가된다. 

 

5. 미드져니 edit, retexture를 머리 좋게 이용하기

edit 으로 공간을 넓혀, 빈 공간을 만든후,

프롬프트에 예시 이미지를 넣고 같은 얼굴의 인물을 그려달라고한다.

https://www.youtube.com/watch?v=TbUaaYYoFg0

 

인물 일관성 2

쓰레드 @ Cho Namkyoung이

인물이 포함된 이미지를 eidt 누르면 , retexture 탭이있다.

인물 참조 이미지를 첨부하고

--iw 3 (0 ~3까지의 값) 3이 가장 크다. 그러면 이미지 참조를 가장 강하게 줄수있다.

하지만 여전히 한번에 뽑는 이미지가 가장 자연스럽다. 

 

인물 의상 일관성 3

(@shimyup 쓰레드)

--ow 1000

Oref기능이라고한다. 참조이미지의 가중치인듯.

페이스 스왑(얼굴 일관성), 옷 바꿔입히기 일관성있게 뽑기가 더 용이해짐. 

version7에서만 가능하다고 하는데 나는 아직 안 생겼다.

 

버전 6에서의 인물지정기능이 7에서는 사라졌는데 그 기능같다.

 

https://docs.midjourney.com/hc/en-us/articles/36285124473997-Omni-Reference

2.Google AI studio

사진을 변형하여, 영상 일관성을 만들 수 있다.

[장단점]

1. 일관성있는 컷을 만들기 좋다.

2. 단 화질이 낮다.

3. 컷의 움직임을 뽑아내기 좋다. 앞모습 -> 뒷모습 모션

[사용법]

>> 사람들은 구글 AI studio로 일관성있는 이미지를 여러장 뽑고, 업스케일해서 퀄리티를 올린다. 그 후 그 이미지로 영상을 뽑는다. 

이 모델만 가능하다 !!! 이미지 생성모델. 모델지정하고 이미지 업로드하고 프롬프트 작성하면된다.

유튜브에서 작성된 프롬프트

한 남자가 귀중한 화물이 실린 추락한 비행기를 찾는 정글 모험을 다룬 가상의 영화에 사용할 10개의 영화 같은 사실적인 고품질 이미지를 생성해 보세요. 이를 출발점으로 삼아 다음 장면 시퀀스를 상상해 보세요.
이미지에 다양한 샷 유형이 있는지 확인하고, 캐릭터와 의상을 매우 일관되게 유지하며, 모든 샷에서 캐릭터가 보이는지 확인하세요.
스토리에서 뚜렷한 순간을 묘사하는 일련의 개별 이미지를 스토리보드처럼 순차적인 순서로 만듭니다. 각 이미지에 따옴표를 넣어 그 안에서 일어나는 사건을 설명합니다. 이미지 사이의 흐름이 일관되고 논리적이어야 하며, 각 이미지가 내러티브를 발전시키는 영화 촬영처럼 스타일링되어야 합니다. 모든 이미지에 일관된 시각적 스타일을 유지하여 일관성을 유지합니다.
Generate 10 cinematic, photo-realistic, high-quality images for a fictional film about a Jungle adventure which a man is searching for a crashed airplane with a valuable cargo. Use this as a starting point and imagine the next sequence of scenes. Ensure there is a variety of shot types in the images, keep the character and outfit extremely consistent, and make sure the character is visible in every shot. Create a series of separate images, each depicting a distinct moment in the story, presented in sequential order like a storyboard. Include quotes for each image to narrate the events happening within it. Ensure the flow between images is consistent and logical, with each one styled like a cinematic movie shot that advances the narrative. Maintain the visual style across all images to keep them cohesive.

https://youtu.be/iKUdeKYnt6Y

 

2.  인물의 여러각도의 얼굴 이미지를 뽑는다

create 10 seperate images that showcase this character from multiple angles, keep the character extremely consistent

이 이미지를 google ai studio에 다시 던져주고.

generate side shot of same scene

3. [ 업스케일 ] Magnific , Topaz AI (photoshop plug- in/ software)

magnific : 이 사이트 플랫폼을 제일 많이 쓰는듯. 비용이 또 든다...

Topaz AI :  나는 이 소프트웨어를 받아서 사용한다. (구매해야함.)

 

4. img to video 비디오 생성 : Kling

1. frames 기능을 사용하여, 첫 이미지 끝이미지를 의도하여 생성한다.

뭐든 '의도'가 들어가면 영상이 어색해진다....

 

2. Elements 기능 

주제 오브젝트와 배경 이미지를 첨부하여,

프롬프트로 인물, 배경, 행동, 조명,카메라를 지정한다.

https://youtu.be/EWBsU0fSgPs?list=LL

 

 

 

4. img to video 비디오 생성 : Runway (Gen 4 Turbo :무제한 사용중)

Gen 4 Turbo 모델 : 인물 일관성을 가장 잘 유지한다고한다.

런웨이 움직임이 좋지는 않은거 같은데, 사실적이고 세련된 느낌이 좋다.

처음 모델에서는 이상한 사람들이 튀어나오거나 사라지거나 했는데 지금은 한두명의 인물일경우 잘 유지된다.

(사람수가 많아지면 사람이 합쳐지거나 환경에 흡수된다.)

 

*카메라 무빙을 제일 먼저 작성. 그리고 행동 작성. 분위기, 감정, 렌즈 , 샷 설정.

 

Gen 3 Turbo 모델 : Fram 시작 끝 지정할 수 있는 모델, 비율은 고정되어있다.

 

확실히 원하는 영상을 만들어내기는 좋으나, 두 이미지 사이의 도약이 심할경우 

대충 페이트인, 하거나 컷으로 잘라버린다.. 

Use Frame을 활용하여, 제일 마지막 프레임의 이미지를 시작으로하는 영상을 또 뽑을 수 있다.

런웨이는 10초를 지원해줘서 좋다.

4K로 업스케일해서 받으면 화질이 좀 나아진다. 그래도 애초에 뭉개진건 뭉개진채로 있으니, 좋은 이미지를 써야한다.

 

4. img to video 비디오 생성 : LUMA 

카메라 무빙이 가장 자연스러운것같다.

3개월 monthly plus 무료 프로모션 코드 : LUMA-MDMZ

막혔을지도 모르지만

luma Dream Machine 

1. Reference.

이미지 레퍼런스를 올리고 1. 캐릭터지정인지 2. 스타일지정인지

@를 사용하여 프롬프트 작성하여 영상 생성

https://www.youtube.com/watch?v=Wen81sUP81E&t=469s

2. Keyframe

이 메인 기능인듯 !

첫 프레임과 마지막 프레임. Ray2 가 신모델. 

 

 


 

그밖에도 blender video to 2.5d (depth AI) Addon

https://youtu.be/u4E98RpviR4

 


캐릭터 두명을 지정하여 이야기를 만드는

https://youtu.be/ko9bk9rkGKw

https://openart.ai/home?ref=roboverse-3

 

AI 아트 제너레이터: 무료 AI 이미지 생성기 및 편집기 | OpenArt

무료 사진 생성기 및 편집기로 AI 이미지 생성기를 살펴보세요.텍스트를 이미지로 변환하는 프롬프트를 사용하여 아이디어를 멋진 비주얼로 변환하는 데 적합합니다.

openart-blog-posts.webflow.io

같은것들이있다...

 

계속 쏟아져나온다

Krea GPT Paint

Gen 4 - References

Pikaswaps

728x90
반응형