반업주부의 일상 배움사

RUNWAY GEN-2 TEXT TO VIDEO 곧 출시 되는가? 진짜 큰 거 옵니다. :: ChatGPT 정리 본문

IT 인터넷/일반

RUNWAY GEN-2 TEXT TO VIDEO 곧 출시 되는가? 진짜 큰 거 옵니다. :: ChatGPT 정리

Banjubu 2023. 3. 22. 11:53
반응형


> English Summary

> English Full Text

 

[ 요약 ]

런웨이의 다양한 기능들에 대해 알아보도록 하겠습니다.
첫 번째로, TextToVideo와 ImageToVideo가 있습니다.
이들을 이용하여 다양한 스토리 보드와 마스코트를 만들 수 있습니다.

또한, 초상화 생성기와 동물 생성기 훈련 등도 가능합니다.
첨부된 이미지들을 확장하여 추가 이미지를 업로드하고, 액자도 움직일 수 있습니다.

다음으로, 런웨이에서는 배경 제거도 가능하며, 텍스트를 이용한 영상 제작도 가능합니다.
이들을 이용하여 유튜브 영상 제작 등의 다양한 작업을 할 수 있습니다.

하지만, 처음부터 혼자 만드는 것은 어려울 수 있으므로, 이를 함께 공부하거나 지원해 줄 동료들과 함께 해보시길 권장드립니다.

 

 

반응형

 


RUNWAY GEN-2 TEXT TO VIDEO coming soon? Something really big is coming.
https://www.youtube.com/watch?v=8MFSd8yQnpc 

 

 



 

[ 한글 전체 ]

안녕하세요 작전관입니다.
네, 오늘은 여러분들과 함께 런웨이에 대해서 알아보도록 하겠습니다.
자, 런웨이 젠 1에 대해서 아시죠?
TextToVideo 화면에서 런웨이가 핫했습니다.
그래서 TextToVideo를 밀고 있는 Runway에서는 어떤 시도를 하고 있는지를 알아보도록 하겠습니다.
현재 TextToVideo는 아직 공개되지 않았습니다.
하지만 조만간 공개될 예정이며 저도 대기 명단에 있습니다.
원래부터 젠투까지 해서 벌써 두 번째 단계까지 갔다는 얘기를 해주고 있습니다.
하지만 아직까지 TextToVideo까지는 아닙니다.자, 근데 얘네가 말하는 건 뭐냐면요, 조명이 필요하지 않을 것이고 촬영도 안 할 것이다는 얘기를 해주고 있습니다.
그러나 모든 행동이 가능할 것이라는 것을 말해주고 있습니다.
그래서 이제 TextToVideo에 대해서 알고 계시죠.두 번째로는 텍스트 플러스 ImageToVideo가 있습니다.
ImageToVideo도 이제 가능하다는 얘기를 하고 있습니다.
이런 템플릿들을 통해서 다양한 스토리 보드와 아예 다른 것들도 할 수 있습니다.
이런 것들은 다 아시겠지만 렌더링도 가능하고 커스터마이징도 가능합니다.
이게 나중에 될 때 하나의 이미지를 가지고 자신의 마스코트로 이제 활용할 수 있다면, 여러분들은 이제 가상 유튜브가 될 수도 있습니다.
그래서 가능성이 열리고 있는 것입니다.
현재 젠투가 되면서 무엇이 됐는지 알아보도록 하겠습니다.자, 이제 로그인하겠습니다.
로그인하고 왔습니다.
여러 가지를 좀 시도해봤는데, 시도해봤던 것 중에 재미있게 해볼 수 있는 것들을 소개하려고 합니다.
초상화 생성기 훈련과 동물 생성기 훈련은 파인 튜닝이 가능하다는 것이죠.
초상화 생성기를 누르면 이제 할 수 있다는 것이 나옵니다.
그래서 내가 이 초상화 생성을 해봤었거든요.
파인 튜닝을 한 결과물이 이렇게 나오고 있습니다.
자, 이거 한번 보도록 하겠습니다.
자, 한번 여기서부터 보도록 하겠습니다.
자, 요런 식으로 제 사진들이 나오는데요.
잠시만요.
자, 100가지를 할 수 있고요.
자, 100가지를 이렇게 출력을 해주고요.
여기에서 여러분들이 파인 튜닝 한 거 안에서 여러분들의 초상화 또는 프로필 같은 것들을 할 수가 있는 거죠.
그래서 하나를 선택을 하고 맨 아래로 쭉 내려서 그 다음에 1번까지 shift를 누른 상태에서 클릭을 하면 이게 다 있거든요.
이런 식으로 된 다음에 '행위'가 있죠.
여기에서 다운로드를 할 것인가 이제 뜨겠죠.
자, 그래서 조금 기다리면 지핑 이런 거 보니까 압축 파일로 압축을 해주나 봐요.
이렇게 치핑 보이죠.
자, 이렇게 됩니다.
자, 그래서 저는 이거를 일단 다운로드를 받아보겠습니다.
자, 다운로드 한번 보겠습니다.
다운됐을 거예요.
다음은 보도록 합시다네.
이상의 보이는 것도 있고 잘 나오는 것도 분명 있을 거예요.
자, 보도록 하겠습니다.
자, 요런 식으로 나왔는데 마음에 드는 것도 있어요.
어, 마음에 드는 것도 있습니다.
잠깐 감상 한번 해보도록 하죠.
중간중간 마음에 드는게 있고, 얘네도 변수가 좀 많다 보니까 이건 완전 사람같이 나왔네요.
예, 변수가 좀 많다 보니까 100가지를 주고 너네들이 거기에서 원하는 거 한두 가지를 찾아라 이렇게 얘기를 하는 거 같고요.
예, 좀 이상해 보이는 것 제너레이터.
이거 눌러서 똑같이 파인 튜닝을 하면 됩니다.
자, 여기 보시면 또 '사용자 지정 생성기' 교육 해가지고 텍스트를 이미지로 변환하기 위한 파인 튜닝을 또 하세요라는 거죠.
일반적인 파인 튜닝 그리고 초상화 그리고 자신의 동물 같은 거 그리고 일반적인 파인 튜닝 이렇게 가능하다는 거예요.
런웨이에서 이게 가능하다면, 나중에 좀 더 엔진이 좋아지고 그러면은 레오날드나 달리 같은 거에 대해서도 아, 대체할 수 있는 프로그램이 한 번에 모든 것들.
나중에는 또 TextToVideo까지 할 수 있는 프로그램이 나오는구나.
런웨이에서는 공룡 프로그램이 될 수도 있겠다.
늦게 나와도 공용이 될 수도 있겠다는 생각이 듭니다.
배경 제거는 다들 아시죠.
크로마키를 사용하면 됩니다.
텍스트 2 이미지를 펼쳐볼까요?
어제 한 번 만들어 본 사진이 괜찮았습니다.
미드저니에서 뽑은 사진이에요.
생성중인데요, 이렇게 확장할 수 있습니다.
생성하기를 계속 누르면 다양한 사진이 나와요.
저는 이런 사진이 괜찮다고 봅니다.
하지만 이미지를 자동으로 펼치지 말고, 내가 원할 때 확장할 수 있게 만들어주세요.
무한 이미지에 들어가서 사진을 끌어다가 넣을 수 있고, 손바닥 모양으로 움직이는 것도 가능합니다.
액자도 움직일 수 있고, 추가 이미지는 컴퓨터에서 업로드해서 사용할 수 있습니다.
일단 계속 진행해봅시다.
번역이 된 고양이의 사진을 이용해서 left side Leone이라고 부르면서 생성해봅시다.
불이 들어왔네요.
그래서 ‘생성하다’라고 했고, 엔터를 치면 이제 여기서 확장을 해줍니다.
자, 여기에서 일단 확장이 되면서 말씀드리겠지만 이상한데요.
자, 그러면 계속 바꿔보는 거예요.
이상하다 그러면 다시 ‘생성하다’를 취소 누르시고 다시 ‘생성하다’ 하는데, 이게 이런 식으로 빠져나가면 빠져나갈수록 이상하게 나오거든요.
그래서 일단은 이 사진과 제일 관련된 쪽으로 먼저 하겠습니다.
자, 요런 식으로 조금씩만 해볼게요.
자, 좌측 사이드가 잘 나오겠죠?
이제 비슷하게 나오죠.
자, 그럼 여기에서 4개의 이런 예시들이 있습니다.
이거 누르면 이렇게 확장이 된 거예요.
자, 이런 식으로 확장이 가능하고 이 위에도, 이 아래에도 다 확장이 가능합니다.
이런 식으로 확장하면 되겠고, 다른 효과들을 여러분들이 추가할 수 있어요.
자, 그래서 새 프로젝트를 만들기 하고 ‘녹색 비디오 구성’을 들어가게 되면, 얘네가 데모로 만들어 놨던 영상과 음성들이 있어서 조작해 볼 수가 있습니다.
자, 그리고 텍스트는 말 그대로 이제 여기에 텍스트를 치는 거죠.
이런 식으로 텍스트가 나옵니다.
그럼 여기에서 이제 ‘실 거’ 치고 뭐 ‘유튜브’다.
그러면 ‘유튜브’, ‘유튜브’ 이런 식으로 영상에 치면 되겠죠?
자, 이 모든 것들을 처음부터 다 혼자 만들기에는 어려울 수 있잖아요.
자 그래서 보시면, 템플릿이라고 있습니다.
좀 로딩 걸리네요.
자, ‘9:16’ 둘도 있고요 이런 식으로 다양하게 또 있습니다.
자, 부대 16이면 이런 것들은 여러분들이 여기에 와서 ‘쇼츠’, ‘쇼폼’ 영상을 만들어도 된다는 거예요.
이거는 클릭해 볼까요?
클릭해도 똑같고, 얘를 잡아서 이렇게 끌어당기면 자 이런 식으로 영상이 만들어지죠.
자, 그럼 이 상태에서 ‘페이스’를 누르면 이런 식으로, 요런 식으로 만들어집니다.
자, 그래서 여러분들은 이런 식으로 사용할 수 있는 ‘런웨이’가 지금 ‘젠 n2’라는 이름으로 업그레이드되었습니다.
이걸 소개드리고 싶었구요.
‘TextToVideo’는 순간에 나올 것 같아요.
자, 이제 TextToVideo가 나오면 여러분들이 이런 것들이 나오고 있고, 또한 덴 프로 업그레이드됨에 따라서 여러분들은 다양한 것들을 할 수 있다는 점입니다.
저는 저이 젠투를 낸 이유가 마이크로소프트 디자이너가 나왔기 때문에 그렇다고 생각합니다.
이게 나왔다고 저는 생각을 하거든요.
마이크로소프트 디자이너가 나왔기 때문에 젠투가 더 발빠르게 움직이고 있다는 생각이 듭니다.
지금 미드저니 이런 그림 AI 스테이블 디퓨저 이런 것도 중요하지만 여러분들은 이런 발빠른 소식들을 빨리빨리 아셔야 됩니다.
여러분들 영상은 여기까지이며, 젠투를 꼭 확인하시고 제가 신청할 수 있는 것을 확인할 수 있는 링크를 같이 남겨드리겠습니다.
영상이 마음에 드셨다면 좋아요, 구독, 알림 설정까지 부탁드립니다.

 

 

SMALL




[ English Summary ]

Let's take a look at the different features of the Runway.
First, we have TextToVideo and ImageToVideo.
You can use them to create different storyboards and mascots.

You can also train the portrait generator and animal generator.
The attached images can be expanded to upload additional images, and the picture frames can be moved.

Next, Runway allows you to remove backgrounds and create videos with text.
You can use them to create YouTube videos and much more.

However, it can be difficult to create these on your own from scratch, so we recommend studying them together or working with colleagues who can support you.

 

 

 

[ English Full Text ]

Hi, this is Ops.
Yes, today we're going to be talking about Runway with you.
So, you know about Runway Gen 1, right?
Runway was hot on the TextToVideo screen.
So let's take a look at what Runway is trying to do in terms of pushing TextToVideo.
Right now, TextToVideo is not yet publicly available.
But it's coming soon, and I'm on the waiting list.
I'm telling you that I'm already in the second phase because I've been in Gentoo since the beginning.
But it's not yet TextToVideo.Now, what they're telling me is, they're telling me that you're not going to need lighting, you're not going to be filming.
But they're telling us that all the action will be there.
So now you know about TextToVideo.The second one is text plus ImageToVideo.
We're telling you that ImageToVideo is now possible.
And with these templates, you can do different storyboards and completely different things.
You know, all of these things are renderable and customizable.
If you can take one image and use it as your mascot now, which is what this is going to be later on, you could be a virtual YouTube now.
So the possibilities are opening up.
Let's take a look at what it has become now that it's Gentoo, so let's go ahead and log in.
I'm logged in.
I've been playing around with a few things, and I'm going to show you some of the things that I've tried that I think are fun to do.
The portrait generator training and the animal generator training is that you can fine-tune it.
If I hit the portrait generator, it says I can do this now.
So I did this portrait generator.
And this is what I got after fine-tuning it.
Okay, let's take a look at this.
Okay, let's take a look here.
Okay, so this is what my picture looks like.
Hold on a second.
Okay, I can do 100 different things.
Okay, I can do 100, and it'll give me an output like this.
So here's where you can do things like portraits or profiles of yourself inside of what you've fine-tuned.
So I'm going to select one, and I'm going to go all the way down to the bottom, and then I'm going to hold down shift until I get to number one, and then I'm going to click on it, and that's it.
It's like this, and then there's "Actions.
This is where it's going to say do I want to download it.
Okay, so if I wait a little bit, I see this zipping thing, so I guess it's compressing it into a zipped file.
It's chipping like this.
Okay, this is what it looks like.
Okay, so I'm going to go ahead and download this.
Okay, let's go ahead and download it.
It should be down.
Let's see what happens next.
I'm sure there's going to be some things that look weird and some things that look good.
So, let's see.
Okay, this is what it looks like, and I like it.
Uh, there are some that I like.
Let's take a quick look at it.
There's something in the middle that I like, and they've got a lot of variables, so this one looks really human.
Yeah, there's a lot of variables, so it's like I'm like, "I'm going to give you 100 things and you're going to find one or two things you want in there.
Yeah, the one that looks a little weird, the generator.
You can press this and do the same fine tuning.
Okay, so if you look here, it says, "Customize generator" training sunset, do another fine tune to convert text to image.
So you can do general fine-tuning, and then portraits, and then things like your own animals, and then general fine-tuning.
If you can do this on the runway, then later on, when the engine gets a little bit better, you can have a program that can, ah, replace Leonard or Dali and do everything at once.
Later on, there's a program that can do TextToVideo.
It could be a dinosaur program on the runway.
I'm thinking it could be a late-comer and it could be public.
We all know how to remove the background.
We can do that with a chroma key.
Let's expand the text 2 image.
I made one yesterday and it turned out okay.
It's from Midjourney.
I'm creating it, and I can expand it like this.
If I keep pressing generate, I'll get a bunch of different photos.
I think this is a good photo.
But don't make the image expand automatically, make it expand when I want it to expand.
If I go into the infinite image, I can drag and drop photos in, and I can move them around in the palm of my hand.
I can move the picture frame, and I can upload additional images from my computer.
Let's move on.
Let's take the translated picture of the cat and create it, calling it left side Leone.
It's lit up.
So I said, "Create," and I hit enter, and now it's expanding here.
Now, once it expands here, I'm going to say, this is weird.
Okay, so I'm going to keep changing it.
And if it's weird, I'll hit undo and then I'll hit create again, and then I'll hit create again, because if it goes out like this, the further it goes out, the weirder it comes out.
So I'm going to go with the one that's most relevant to this photo first.
Okay, let's just do a little bit like this.
Okay, the left side should come out good, right?
Now it's coming out similar.
Okay, so we've got four of these examples here.
If I press this, it expands like this.
Now, I can expand it like this, and I can expand it above this, and I can expand it below this.
You can expand it like this, and you can add other effects.
Okay, so if you create a new project and you go into the "green video composition," you'll see that they've got the video and the voice that they demoed, and you can manipulate it.
Okay, and the text is literally what we're going to do is we're going to type text here.
This is how the text comes out.
And then here, I'm going to hit "live" and it's "youtube".
And then I can type in the video, "youtube," "youtube," like that, right?
Now, it can be hard to create all of this from scratch.
So if you look, there's a template.
It's taking a while to load.
Now, there's a couple of '9:16' ones, and there's a bunch of different ones like that.
Now, if you're in Troop 16, these are the ones that say you can come in here and make a "shorts" or "showform" video.
Let's click on this one.
It's the same thing if you click on it, and you can grab this guy and pull him like this, and it'll create a movie like this.
Okay, and then if I hit "face" while I'm in this state, it's going to look like this, like this, like this.
Okay, so what you've got here is the Runway, which you can use like this, has been upgraded to what's now called the Zen N2.
And I wanted to show you this.
I think 'TextToVideo' is going to come up in a moment.
Now, the thing about TextToVideo is that when it comes out, you're going to be able to do these things, and also as we upgrade to Den Pro, you're going to be able to do a lot of different things.
I think the reason I put out Gentoo is because Microsoft Designer came out.
I think that's why I put out Gentoo.
I think Gentoo is moving faster because Microsoft Designer is out.
Now, I'm talking about midgets, AI stable diffusers, and things like that, which are important, but you need to keep up with these fast news.
That's it for this video, and I'll leave you with a link to check out Gentoo and see what I can apply for.
If you enjoyed the video, please like, subscribe, and set up notifications.

 

 

 

반응형
LIST
Comments