본 발명은 원샷 페이스 스왑을 통한 실시간 얼굴 특수 장 장치 및 방법에 관한 발명으로서, 보다 상세하게는 영상 콘텐츠에 포함된 사람의 얼굴에 대해 얼굴 부위별로 측정된 나이와 개인의 환경 정보를 이용하여 나이를 변환한 얼굴을 생성하는 기술에 관한 발명이다.The present invention relates to a real-time facial special device and method through one-shot face swap, and more specifically, to determine the age of a person's face included in video content using the age measured for each facial part and the individual's environmental information. This invention relates to technology for generating transformed faces.
기술이 발달하면서 5G 통신이 등장함에 따라, 대용량의 데이터 트래픽 처리가 가능해 졌다. 이에, 4k이상 고화질 카메라, 360카메라, 드론 카메라 등의 고성능의 다양한 기능의 카메라들이 등장하고 있으며, 이에 따라 공유되는 영상 또한 기하급수적으로 증가하고 있다. 또한, 최근 개인 크리에이터의 등장 및 개인 SNS 계정의 활성화로 인해, 자체 제작 영상의 수가 폭발적으로 증가하다 보니, 이에 따라 동영상의 제작 및 공유가 활발해지고 있으며, 실시간 방송도 보편화되고 있는 시점이다.As technology develops and 5G communications emerge, processing large amounts of data traffic has become possible. Accordingly, high-performance cameras with various functions, such as 4K or higher high-definition cameras, 360 cameras, and drone cameras, are emerging, and the number of shared videos is also increasing exponentially. In addition, due to the recent emergence of individual creators and the activation of personal SNS accounts, the number of self-produced videos has increased explosively. As a result, the production and sharing of videos is becoming more active, and real-time broadcasting is becoming common.
한편, 얼굴의 나이를 자동으로 인식하고, 특정 나이로 변환하는 연구는 실생활에서의 응용 분야가 늘어나면서, 그에 대한 관심이 증가하고 있다. 특히, 얼굴 영상의 나이를 특정 나이로 변환하는 연구는 다양한 분야에서 많이 사용되고 있다.Meanwhile, interest in research on automatically recognizing the age of a face and converting it to a specific age is increasing as its applications in real life increase. In particular, research on converting the age of a face image into a specific age is widely used in various fields.
종래 기술에 따라 영상 내의 사람의 얼굴을 원하는 나이의 얼굴로 변환하고자 하는 경우, 얼굴 전체 나이를 실제 나이로 동일하게 설정하고 나이를 변환하였다. 그러나, 얼굴의 부위별 노화 과정은 환경적인 요인과 복잡하게 결합되어 발생되기 때문에 단순히 이러한 변환은 구체적인 개인의 특성에 따른 노화의 변화를 반영할 수 없는 문제가 있다.According to the prior art, when it was desired to convert a person's face in an image into a face of a desired age, the entire face's age was set to be the same as the actual age and the age was converted. However, because the aging process for each part of the face occurs in complex combination with environmental factors, there is a problem that this transformation cannot simply reflect changes in aging according to specific individual characteristics.
예를 들어, 야외에서 활동을 많이 하는 직업을 가진 사람의 경우, 얼굴의 전체 형태(shape)는 실제 본인의 나이에 맞게 변화되지만, 피부의 경우에는 자외선의 영향을 많이 받기 때문에 노화가 더 빨리 진행될 수 있다. 따라서, 본 나이에 비해 피부 나이가 더 많게 측정될 수 있다. 또한, 기능성 화장품, 피부 미용 등으로 꾸준히 피부를 관리하는 사람의 경우, 그렇지 않은 사람에 비해 피부의 노화가 지연될 수 있다.For example, in the case of a person whose job involves a lot of outdoor activity, the overall shape of the face changes to match the actual age, but the skin is greatly affected by ultraviolet rays, so aging occurs more quickly. You can. Therefore, the skin age may be measured as being older than the actual age. Additionally, in the case of people who consistently care for their skin with functional cosmetics, skin care, etc., skin aging may be delayed compared to people who do not.
즉, 종래 기술에 따라 나이가 변환된 얼굴을 생성하는 경우, 얼굴 부위별로 측정되는 나이와 개인의 환경 정보를 고려하지 않고 얼굴의 나이를 변환했을 때, 정확한 나이 변환 결과를 얻기 어려운 경우가 발생한다.In other words, when creating a face whose age has been converted according to the prior art, when the age of the face is converted without considering the age measured for each facial part and the individual's environmental information, it is difficult to obtain accurate age conversion results. .
따라서, 일 실시예에 따른 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 장치 및 방법은 상기 설명한 문제점을 해결하기 위해 고안된 발명으로서, 영상 콘텐츠에 포함된 사람의 얼굴을 실시간으로 식별한 후, 식별된 얼굴에 대해 개인 환경 정보를 고려하여 나이를 변환된 얼굴을 생성하여 제공하는 것을 목표로 한다.Therefore, the real-time facial special makeup device and method through one-shot face swap according to an embodiment is an invention designed to solve the problem described above. After identifying the face of a person included in video content in real time, the identified face is The goal is to generate and provide a face with converted age by considering personal environmental information.
일 실시예에 따른 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 장치는, 카메라를 이용하여 입력 영상을 취득하고, 취득한 얼굴 영상을 기초로 얼굴 부위별로 나이를 측정하는 나이 측정부, 환경적 요인에 따라 얼굴 영상을 분류한 데이터가 저장되어 있는 저장부 및 상기 얼굴 부위별 나이와 상기 저장부에 저장되어 있는 데이터를 기초로 나이 변환 모델을 적용하여 상기 얼굴 부위별로 나이를 변환하고, 상기 얼굴 부위별로 변환된 영상을 복원하는 영상 프로세서를 포함할 수 있다.According to one embodiment, a real-time facial special makeup device through one-shot face swap acquires an input image using a camera, an age measurement unit that measures the age of each facial part based on the acquired facial image, and an age measurement unit that measures the age of each facial part based on the acquired facial image, and an age measurement unit that measures the age of each facial area based on the acquired facial image. Age is converted for each face part by applying an age conversion model based on the data stored in the storage unit and the age of each face part and the storage unit where image classification data is stored, and the age is converted for each face part. It may include an image processor that restores images.
일 실시예에 따른 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 방법 및 장치는, 얼굴 부위별 나이를 측정하고, 이를 기초로 나이 변환 얼굴을 생성하므로, 기존 방법에 비해 보다 생동감 있는 나이 변환 얼굴을 얻을 수 있는 장점이 존재한다.The real-time facial special makeup method and device through one-shot face swap according to an embodiment measures the age of each facial part and creates an age-transformed face based on this, so that a more vivid age-transformed face can be obtained compared to the existing method. There are advantages.
또한, 일 실시예에 따른 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 방법 및 장치는, 얼굴 부위별 나이 변환 과정에 영향을 주는 환경적 요인을 고려하여 얼굴을 변환하므로, 보다 개인 맞춤형 나이 변환 결과를 얻을 수 있는 효과가 있다.In addition, the real-time facial special makeup method and device through one-shot face swap according to an embodiment transforms the face by considering environmental factors that affect the age transformation process for each facial part, thereby obtaining more personalized age transformation results. There is a possible effect.
도 1은 본 발명의 실시예에 따른 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 장치의 구성을 도시한 블록도이다.
도 2는 본 발명의 실시예에 따른 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 장치의 동작 순서를 도시한 순서도이다.Figure 1 is a block diagram showing the configuration of a real-time special facial makeup device through one-shot face swap according to an embodiment of the present invention.
Figure 2 is a flowchart showing the operation sequence of a real-time special facial makeup device through one-shot face swap according to an embodiment of the present invention.
이하, 본 발명에 따른 실시 예들은 첨부된 도면들을 참조하여 설명한다. 각 도면의 구성요소들에 참조 부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명의 실시 예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 실시예에 대한 이해를 방해한다고 판단되는 경우에는 그 상세한 설명은 생략한다. 또한, 이하에서 본 발명의 실시 예들을 설명할 것이나, 본 발명의 기술적 사상은 이에 한정되거나 제한되지 않고 당업자에 의해 변형되어 다양하게 실시될 수 있다.Hereinafter, embodiments according to the present invention will be described with reference to the attached drawings. When adding reference signs to components in each drawing, it should be noted that the same components are given the same reference numerals as much as possible even if they are shown in different drawings. Additionally, when describing embodiments of the present invention, if detailed descriptions of related known configurations or functions are judged to impede understanding of the embodiments of the present invention, the detailed descriptions will be omitted. In addition, embodiments of the present invention will be described below, but the technical idea of the present invention is not limited or limited thereto and may be modified and implemented in various ways by those skilled in the art.
또한, 본 명세서에서 사용한 용어는 실시 예를 설명하기 위해 사용된 것으로, 개시된 발명을 제한 및/또는 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.Additionally, the terms used in this specification are used to describe embodiments and are not intended to limit and/or limit the disclosed invention. Singular expressions include plural expressions unless the context clearly dictates otherwise.
본 명세서에서, "포함하다", "구비하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 작동, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 작동, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는다.In this specification, terms such as “comprise,” “comprise,” or “have” are intended to designate the presence of features, numbers, steps, operations, components, parts, or combinations thereof described in the specification. It does not exclude in advance the existence or addition of other features, numbers, steps, operations, components, parts, or combinations thereof.
또한, 명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "간접적으로 연결"되어 있는 경우도 포함하며, 본 명세서에서 사용한 "제 1", "제 2" 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되지는 않는다.In addition, throughout the specification, when a part is said to be “connected” to another part, this refers not only to the case where it is “directly connected” but also to the case where it is “indirectly connected” with another element in between. Terms including ordinal numbers, such as “first” and “second,” used in this specification may be used to describe various components, but the components are not limited by the terms.
아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략한다.Below, with reference to the attached drawings, embodiments of the present invention will be described in detail so that those skilled in the art can easily implement the present invention. In order to clearly explain the present invention in the drawings, parts unrelated to the description are omitted.
일 실시예에 따른 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 장치(100)는 얼굴을 다양한 부위로 나누고, 각 얼굴 부위별 나이 정보를 기반으로 나이를 변환하고, 각 얼굴 부위별 나이 변환 과정에 영향을 주는 환경 변수를 이용하여 나이를 변환하는 장치이다.The real-time facial special makeup device 100 through one-shot face swap according to an embodiment divides the face into various parts, converts the age based on age information for each facial part, and affects the age conversion process for each facial part. It is a device that converts age using environmental variables.
또한, 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 장치(100)는 이동성을 갖거나 고정될 수 있다. 상기 나이 변환 장치(10)는, 서버(server) 또는 엔진(engine) 형태일 수 있으며, 디바이스(device), 기구(apparatus), 단말(terminal), UE(user equipment), MS(mobile station), 무선기기(wireless device), 휴대기기(handheld device) 등 다른 용어로 불릴 수 있다.Additionally, the real-time facial special makeup device 100 through one-shot face swap may be mobile or fixed. The age conversion device 10 may be in the form of a server or engine, and may be a device, apparatus, terminal, user equipment (UE), mobile station (MS), It may be called by other terms such as wireless device or handheld device.
또한, 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 장치(100)는 운영체제(Operation System; OS), 즉 시스템을 기반으로 다양한 소프트웨어를 실행하거나 제작할 수 있다. 상기 운영체제는 소프트웨어가 장치의 하드웨어를 사용할 수 있도록 하기 위한 시스템 프로그램으로서, 안드로이드 OS, iOS, 윈도우 모바일 OS, 바다 OS, 심비안 OS, 블랙베리 OS 등 모바일 컴퓨터 운영체제 및 윈도우 계열, 리눅스 계열, 유닉스 계열, MAC, AIX, HP-UX 등 컴퓨터 운영체제를 모두 포함할 수 있다.In addition, the real-time facial special makeup device 100 through one-shot face swap can run or produce various software based on an operating system (OS), that is, a system. The operating system is a system program that allows software to use the hardware of the device, and includes mobile computer operating systems such as Android OS, iOS, Windows Mobile OS, Bada OS, Symbian OS, Blackberry OS, Windows series, Linux series, Unix series, etc. It can include all computer operating systems such as MAC, AIX, and HP-UX.
도 1은 본 발명의 실시예에 따른 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 장치의 구성을 도시한 블록도이다.Figure 1 is a block diagram showing the configuration of a real-time special facial makeup device through one-shot face swap according to an embodiment of the present invention.
일 실시예에 따른 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 장치(100)는 얼굴을 다양한 부위로 나누고, 각 얼굴 부위별 나이 정보를 기반으로 나이를 변환하고, 각 얼굴 부위별 나이 변환 과정에 영향을 주는 환경 변수를 이용하여 나이를 변환하는 장치로서, 도 1에 도시된 바와 같이 측정부(110), 저장부(120) 및 프로세서(130) 등을 포함할 수 있다.The real-time facial special makeup device 100 through one-shot face swap according to an embodiment divides the face into various parts, converts the age based on age information for each facial part, and affects the age conversion process for each facial part. The device is a device that converts age using environmental variables and may include a measuring unit 110, a storage unit 120, and a processor 130, as shown in FIG. 1.
측정부(110)는 입력 영상을 실시간으로 획득하고 획득한 영상(10)을 프로세서(130)로 송신할 수 있으며, 측정부(110)는 카메라와 드론과 같은 촬영 장치를 포함할 수 있다.The measuring unit 110 may acquire an input image in real time and transmit the acquired image 10 to the processor 130, and the measuring unit 110 may include a photographing device such as a camera and a drone.
측정부(110)는 촬영된 영상 속에 존재하는 얼굴을 인식하고, 인식된 얼굴 영상을 기초로 얼굴 부위별로 나이를 측정할 수 있다. 측정부(110)는 얼굴 부위별로 나이를 측정함에 있어서, 개인의 환경적인 요인을 고려하여 나이를 측정할 수 있다.The measurement unit 110 can recognize faces present in a captured image and measure age for each facial part based on the recognized face image. When measuring age for each facial part, the measurement unit 110 can measure age by taking into account environmental factors of the individual.
일 예로 측정부(110)는 개인의 건강, 체형, 직업, 생활 습관, 인종, 지역 중 적어도 하나를 지정할 수 있다. 상기 환경적 요인의 생활 습관에는 피부관리, 음주, 흡연, 운동, 식이 요법 등이 포함될 수 있다.As an example, the measurement unit 110 may specify at least one of the individual's health, body type, occupation, lifestyle, race, and region. Lifestyle habits of the environmental factors may include skin care, drinking, smoking, exercise, diet, etc.
저장부(120)는 얼굴 영상을 수집하고, 각 얼굴 영상의 주인공의 건강, 체형, 직업,생활습관, 성별, 인종 등 여러 가지 환경적 요인을 조사하고, 상기 얼굴 영상을 환경 별로 분류하여 데이터를 구축할 수 있다.The storage unit 120 collects face images, investigates various environmental factors such as health, body type, occupation, lifestyle, gender, and race of the main character of each face image, and classifies the face images by environment to store the data. It can be built.
환경적 요인의 생활 습관에는 피부관리, 음주, 흡연, 운동, 식이요법 등이 포함될 수 있다.Environmental lifestyle habits may include skin care, drinking, smoking, exercise, and diet.
또한, 저장부(120)는 저장된 데이터를 이용하여 얼굴 부위별 나이와 환경 별 나이 함수(aging function)를 학습할 수 있다. 나이 함수(aging function)는 얼굴의 부위별 특징 및 환경 정보와 나이와의 관계를 함수로 정의한 것으로, 이에 따라 얼굴 부위별 나이와 환경적 요인을 기반으로 나이 변환 모델을 생성할 수 있다.Additionally, the storage unit 120 can learn the age for each facial part and the aging function for each environment using the stored data. The aging function is a function that defines the relationship between age and the characteristics of each part of the face and environmental information. Accordingly, an age conversion model can be created based on the age of each part of the face and environmental factors.
프로세서(130)는 얼굴 부위별 나이와 상기 환경적인 요인에 따른 나이 변환 모델을 적용하여 얼굴 부위별로 나이를 변환할 수 있다. 부위별 나이 변환은, 상기 얼굴의 각 부위들(눈, 코, 입, 턱, 이마, 주름, 피부 등)의 형태(shape) 및 텍스쳐(texture)에 대한 나이를 변환할 수 있다.The processor 130 may convert the age for each facial part by applying an age conversion model based on the age for each facial part and the environmental factors. Age conversion for each part can convert the age of the shape and texture of each part of the face (eyes, nose, mouth, chin, forehead, wrinkles, skin, etc.).
프로세서(130)는 상기 얼굴 부위별로 변환된 영상을 복원할 수 있다. 예를 들어, 얼굴의 눈, 코, 입 등의 형태(shape)와 텍스쳐(texture), 주름(wrinkle) 및 피부(skin)의 각 부위에 대한 변환 영상을 각 복원 기법에 따라 복원할 수 있다.The processor 130 can restore the converted image for each facial part. For example, the transformed image of the shape and texture of the eyes, nose, mouth, etc., wrinkles, and skin of the face can be restored according to each restoration technique.
예를 들어, 학습 데이터(training data)의 주름, 피부 특징 벡터들과 주름, 피부 영상 패치들로 구성된 지역적 영상 테이블(local image table)을 이용하여 영상으로 복원할 수 있다. 또한, 주름 및 피부 특징의 유사성과 환경적 요인을 이용하여 지역적 영상 테이블에서 주름, 피부 영상 패치를 선택하는 방법으로 부위별로 영상 복원을 수행할 수 있다.For example, the wrinkles in the training data can be restored to an image using a local image table composed of skin feature vectors, wrinkles, and skin image patches. Additionally, image restoration can be performed for each region by selecting wrinkle and skin image patches from a local image table using similarities of wrinkle and skin features and environmental factors.
프로세서(130)는 상기 프로세서(130)에서 각 부위별로 복원된 영상을 합성하여 나이 변환된 얼굴을 생성하고, 최종 변환된 얼굴(20)을 결과물로 출력할 수 있다.The processor 130 may generate an age-converted face by combining the images reconstructed for each part, and output the final converted face 20 as a result.
도 2는 본 발명의 실시예에 따른 원샷 페이스 스왑을 통한 실시간 얼굴 특수 분장 장치의 동작 순서를 도시한 순서도이다.Figure 2 is a flowchart showing the operation sequence of a real-time special facial makeup device through one-shot face swap according to an embodiment of the present invention.
도 2를 참조하면, 본 실시예에 따른 나이 변환 방법은, 얼굴 영상, 환경적 요인을 입력 받아 이를 기반으로 나이 변환을 수행할 수 있다(단계 S10).Referring to FIG. 2, the age conversion method according to this embodiment can receive face images and environmental factors and perform age conversion based on them (step S10).
구체적으로, 입력되는 얼굴 영상을 기초로 얼굴 부위별로 나이를 측정할 수 있는데, 사람의 얼굴 영상은 눈, 코, 입 등의 다양한 구성 요소들의 형태와 텍스처 정보로 구성되어 있으며, 각 구성 요소에 따라 노화 과정에 차이가 있으므로 이를 고려하여 측정한다.Specifically, age can be measured for each facial part based on the input face image. A human face image is composed of shape and texture information of various components such as eyes, nose, and mouth, and is classified according to each component. Since there are differences in the aging process, measurements are taken taking this into account.
상기 단계 S10 단계에서 입력되는 얼굴 영상을 기초로 얼굴 부위별로 나이를 측정하는 단계와, 입력되는 얼굴 영상을 얼굴 부위별로 세분화하는 단계, 부위별 특징을 추출하는 단계 및 부위별 특징으로부터 나이를 측정하는 단계를 포함할 수 있다.Measuring age for each face part based on the face image input in step S10, segmenting the input face image for each face part, extracting features for each part, and measuring age from the features for each part. May include steps.
나이 측정 단계가 완료되면 개인의 환경적인 요인을 지정한다(단계 S20).Once the age measurement step is completed, the individual's environmental factors are specified (step S20).
구체적으로, S20 단계는 개인의 건강, 체형, 직업, 생활 습관, 인종, 지역 중 적어도 하나를 지정할 수 있는데, 상기 환경적 요인의 생활 습관에는 피부관리, 음주, 흡연, 운동, 식이요법 등이 포함될 수 있다.Specifically, the S20 stage can specify at least one of the individual's health, body type, occupation, lifestyle, race, and region, and the lifestyle habits of the environmental factors include skin care, drinking, smoking, exercise, and diet. You can.
상기 얼굴 부위별 나이와 상기 환경적인 요인에 따른 나이 변환 모델을 적용하여 상기 얼굴 부위별로 나이를 변환한다(단계 S30).An age conversion model according to the age for each facial area and the environmental factors is applied to convert the age for each facial area (step S30).
마찬가지로, 나이 변환 단계(단계 S30)에서도, 얼굴의 각 부위들(눈, 코, 입, 턱, 이마, 주름, 피부 등)의 형태(shape) 및 텍스쳐(texture)에 대해 부위별로 수행될 수 있다.Likewise, in the age conversion step (step S30), the shape and texture of each part of the face (eyes, nose, mouth, chin, forehead, wrinkles, skin, etc.) can be performed for each part. .
얼굴의 부위별 나이 변환이 완료되면, 상기 얼굴 부위별로 변환된 영상을 복원하고, 복원된 영상을 합성하여 최종적으로 나이 변환된 얼굴을 출력한다(단계 S40).When the age conversion for each part of the face is completed, the converted image for each face part is restored, the restored images are synthesized, and the final age-converted face is output (step S40).
예를 들어, 얼굴의 눈, 코, 입 등의 형태(shape) 및 텍스쳐(texture), 주름(wrinkle) 및 피부(skin)의 각 부위에 대한 변환 영상을 각 복원 기법이 따라 복원할 수 있다. 또한, 나이 변환된 얼굴의 각 부위들(눈, 코, 입, 턱, 이마, 주름, 피부 등)의 텍스쳐(texture)에 대해 복원된 영상을 합성하는 단계 및 상기 합성된 영상을 나이 변환된 상기 얼굴 형태(shape)와 결합하여 구부리는(warping) 단계가 포함되어 진행될 수 있다.For example, the transformed image for each part of the face, such as the shape and texture of the eyes, nose, and mouth, wrinkles, and skin, can be restored according to each restoration technique. In addition, a step of synthesizing a restored image for the texture of each part of the age-converted face (eyes, nose, mouth, chin, forehead, wrinkles, skin, etc.), and the age-converted image of the synthesized image. It may include a warping step in combination with the shape of the face.
이상에서, 본 발명의 실시 예를 구성하는 모든 구성 요소들이 하나로 결합하거나 결합하여 동작하는 것으로 설명되었다고 해서, 본 발명이 반드시 이러한 실시 예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성 요소들이 하나 이상으로 선택적으로 결합하여 동작할 수도 있다. 또한, 이상에서 기재된 '포함하다', '구성하다' 또는 '가지다' 등의 용어는, 특별히 반대되는 기재가 없는 한, 해당 구성 요소가 내재할 수 있음을 의미하는 것이므로, 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것으로 해석되어야 한다. 기술적이거나 과학적인 용어를 포함한 모든 용어들은, 다르게 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미가 있다. 사전에 정의된 용어와 같이 일반적으로 사용되는 용어들은 관련 기술의 문맥상의 의미와 일치하는 것으로 해석되어야 하며, 본 발명에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.In the above, even though all the components constituting the embodiment of the present invention have been described as being combined or operated in combination, the present invention is not necessarily limited to this embodiment. That is, as long as it is within the scope of the purpose of the present invention, all of the components may be operated by selectively combining one or more of them. In addition, terms such as 'include', 'comprise', or 'have' described above mean that the corresponding component may be present, unless specifically stated to the contrary, and therefore do not exclude other components. Rather, it should be interpreted as being able to include other components. All terms, including technical or scientific terms, unless otherwise defined, have the same meaning as generally understood by a person of ordinary skill in the technical field to which the present invention pertains. Commonly used terms, such as terms defined in a dictionary, should be interpreted as consistent with the contextual meaning of the related technology and, unless explicitly defined in the present invention, should not be interpreted in an idealized or overly formal sense.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.The above description is merely an illustrative explanation of the technical idea of the present invention, and various modifications and variations will be possible to those skilled in the art without departing from the essential characteristics of the present invention. Accordingly, the embodiments disclosed in the present invention are not intended to limit the technical idea of the present invention, but rather to explain it, and the scope of the technical idea of the present invention is not limited by these embodiments. The scope of protection of the present invention should be interpreted in accordance with the claims below, and all technical ideas within the equivalent scope should be construed as being included in the scope of rights of the present invention.
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220164245AKR20240080687A (en) | 2022-11-30 | 2022-11-30 | Real-time face special makeup device and method through one-shot face swap |
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220164245AKR20240080687A (en) | 2022-11-30 | 2022-11-30 | Real-time face special makeup device and method through one-shot face swap |
| Publication Number | Publication Date |
|---|---|
| KR20240080687Atrue KR20240080687A (en) | 2024-06-07 |
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020220164245APendingKR20240080687A (en) | 2022-11-30 | 2022-11-30 | Real-time face special makeup device and method through one-shot face swap |
| Country | Link |
|---|---|
| KR (1) | KR20240080687A (en) |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20160091402A (en) | 2013-11-27 | 2016-08-02 | 매직 립, 인코포레이티드 | Virtual and augmented reality systems and methods |
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20160091402A (en) | 2013-11-27 | 2016-08-02 | 매직 립, 인코포레이티드 | Virtual and augmented reality systems and methods |
| Publication | Publication Date | Title |
|---|---|---|
| CN109558864B (en) | Face key point detection method, device and storage medium | |
| US10936919B2 (en) | Method and apparatus for detecting human face | |
| US11238272B2 (en) | Method and apparatus for detecting face image | |
| US10599914B2 (en) | Method and apparatus for human face image processing | |
| US11615516B2 (en) | Image-to-image translation using unpaired data for supervised learning | |
| EP4030381B1 (en) | Artificial-intelligence-based image processing method and apparatus, and device and storage medium | |
| CN109242789B (en) | Image processing method, image processing apparatus, and storage medium | |
| JP6694504B2 (en) | Age conversion method based on age of each face part and environmental factors, recording medium for performing the same, and device | |
| US11734823B2 (en) | Digital imaging systems and methods of analyzing pixel data of an image of a user's body for determining a user-specific skin irritation value of the user's skin after removing hair | |
| US10438258B2 (en) | Method and apparatus for generating graphical chromophore maps | |
| WO2021036314A1 (en) | Facial image processing method and apparatus, image device, and storage medium | |
| JP7479507B2 (en) | Image processing method and device, computer device, and computer program | |
| US11455747B2 (en) | Digital imaging systems and methods of analyzing pixel data of an image of a user's body for determining a user-specific skin redness value of the user's skin after removing hair | |
| CN114187624A (en) | Image generation method, image generation device, electronic equipment and storage medium | |
| CN114239717A (en) | Model training method, image processing method and device, electronic device and medium | |
| WO2022227765A1 (en) | Method for generating image inpainting model, and device, medium and program product | |
| KR102495889B1 (en) | Method for detecting facial wrinkles using deep learning-based wrinkle detection model trained according to semi-automatic labeling and apparatus for the same | |
| JP2014203353A (en) | Image processor, image processing method, control program, and recording medium | |
| US20240331344A1 (en) | Method and system for anonymizing facial images | |
| CN114049290A (en) | Image processing method, device, device and storage medium | |
| WO2020119058A1 (en) | Micro-expression description method and device, computer device and readable storage medium | |
| CN114360015B (en) | Liveness detection method, device, equipment and storage medium | |
| KR102389457B1 (en) | Image Transformation Apparatus, Method and Computer Readable Recording Medium Thereof | |
| CN106067167A (en) | Image processing method and device | |
| CN111814738A (en) | Artificial intelligence-based face recognition method, device, computer equipment and medium |
| Date | Code | Title | Description |
|---|---|---|---|
| PA0109 | Patent application | Patent event code:PA01091R01D Comment text:Patent Application Patent event date:20221130 | |
| PG1501 | Laying open of application |