KR20140087956A

Movatterモバイル変換

Info

Publication number: KR20140087956A
Application number: KR1020130000022A
Authority: KR
Inventors: 주홍찬
Original assignee: 주홍찬
Priority date: 2013-01-01
Filing date: 2013-01-01
Publication date: 2014-07-09

Abstract

Translated fromKorean

본 발명은 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법에 관한 것으로서 파닉스 데이터, 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 단어 및 문장 데이터, 이미지 데이터, 원어민 발음 영상 및 음성 파형 데이터, 음절구분 음원 데이터가 저장된 저장부; 파닉스 데이터 선택 및 파닉스 데이터 입력을 위한 입력부; 선정된 파닉스 데이터의 학습이 시작되면 파닉스 데이터와 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 그리고 이미지 데이터가 표시되는 표시부; 학습자가 파닉스 학습 시 표시된 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장을 발음할 경우에 학습자의 음성을 입력받기 위한 오디오 처리부; 상기 오디오 처리부를 통해 입력된 음성을 분석하고, 파형으로 변환하며, 입력된 음성에 대해 원어민 음성의 파형과 유사도를 비교 분석하기 위한 음성 분석 모듈부 및 음성 파형 처리부; 학습자의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상을 수집하기 위한 카메라부; 상기 카메라부로부터 입력된 학습자의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상 데이터의 포커스와 사이즈를 규격화하기 위한 영상 처리부; 및 상기 영상 처리부를 통해 규격화된 학습자의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상과 상기 저장부에 저장된 원어민의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 영상을 비교하여 표시하고, 상기 음성 분석 모듈부와 음성 파형 처리부를 통해 처리된 파형과 저장된 원어민의 음성 파형을 표시하고, 유사도를 비교하여 50% 이상 유사 시 “good”, 50% 미만 유사 시 ”bad”를 표시하도록 제어하는 제어부를 포함하는 것을 특징으로 하는 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치를 제공한다.The present invention relates to a phonics learning apparatus and method using word, sentence, image data, and pronunciation data of a native speaker, and more particularly, to a phonics learning apparatus and method using phonics data, data expressed in a language of a country learning pronunciation of phonics data, A native speech image and sound waveform data, and a syllable classification sound source data; An input unit for selecting phonics data and inputting phonics data; When the learning of the selected phonics data starts, data displayed in a language of a country learning phonics data and pronunciation of phonics data, a word and a sentence provided to remind phonics data, and image data are displayed; An audio processing unit for receiving a learner's voice when a learner sounds a word and a sentence so as to associate phonics data and phonics data displayed at the time of phonics learning; A voice analysis module for analyzing the voice inputted through the audio processor and converting the voice into a waveform and comparing and analyzing the waveform of the native voice with the similarity of the native voice; A camera unit for collecting a positional image of a tooth and a tongue of a face muscle change, a shape of a lip, and a word and a sentence so as to associate phonics data of a learner with phonics data; An image processing unit for normalizing the focus and size of the positional image data of the teeth and the tongue of the facial muscles, the shape of the lips and the changes of the facial muscles when pronouncing the phonics data and the phonics data inputted from the camera unit; And a phonemic data of a native speaker stored in the storage unit and a phoneme data of a phonemic data of the phonemic data stored in the storage unit when the phonemic data and the phonics data of the learner normalized through the image processing unit are provided, And displays the waveforms processed by the speech analysis module and the speech waveform processor and the speech waveforms of the native speakers stored in the speech analysis module, And a control unit for controlling the display unit to display " bad " when the similarity is less than 50%, and a control unit for controlling the phonics learning apparatus to use words, sentences, image data and native pronunciation data.

Description

Translated fromKorean

단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법 {Apparatus and method for learning Phonics by using native speaker’s pronunciation data and word and sentence and image data}BACKGROUND OF THEINVENTION 1. Field of the Invention The present invention relates to a phonics learning apparatus and method using phonics learning data using vocabulary and sentence and image data and pronunciation data of a native speaker,

본 발명은 파닉스 학습법칙에 따라 표시되는 여러 음운과 표시된 음운을 연상 시킬 수 있고, 음절 세기 학습도 할 수 있는 단어 및 문장과 이미지 데이터 그리고 원어민의 "알파벳 발음과 파닉스 학습법을 통한 여러 음운의 고유 소리 값 발음과 단어 및 문장 발음 시 얼굴 정면과 측면 영상, 알파벳 발음과 파닉스 학습법을 통한 여러 음운의 고유 소리 값 발음과 단어 및 문장 발음 시 음성, 알파벳 발음과 파닉스 학습법을 통한 여러 음운의 고유 소리 값 단어 및 문장 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 모양”(이하 “발음 데이터”라고 함)을 이용한 파닉스 학습장치 및 방법에 관한 것으로, 보다 상세하게는 학습하고자 하는 파닉스 학습법칙에 따라 “알파벳 또는 단모음 음운 또는 장모음 음운 또는 이중모음 음운 또는 이중자음 음운 또는 혼합자음 음운”(이하 “파닉스 데이터”라고 함)중 하나를 표시하고, 표시된 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터를 표시하고, 표시된 파닉스 데이터를 연상시킬 수 있는 단어 및 문장과 “이미지 또는 애니메이션 또는 영상”(이하 “이미지 데이터”라고 함)을 함께 제공하며, 표시된 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장에 대한 원어민의 발음 시 영상이 재생되도록 하고, 원어민 발음 영상이 재생될 때 단어 및 문장에 대해선 음절마다 다른 색깔을 표시하고, “음절을 구분하기 위한 전자음이나 박수소리 같은 표시 음원”(이하 “음절구분 음원 데이터“라고 함)이 출력되며, 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장에 대한 학습자의 발음 음성과 영상을 입력받아 원어민 발음의 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 재생 및 학습자 발음의 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 재생 화면을 표시하고, 음성 파형 비교 화면을 표시하여 효과적인 파닉스 학습을 하기 위한, 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법에 관한 것이다.The present invention relates to words and phrases and image data that can remind phonemes and phonemes displayed in accordance with the phonics rules of learning, and which can also learn syllable intensity, and a plurality of phonemes Value Phoneme, Word and Sentence Phonetic pronoun Pronunciation of different phonemes through phonics and phonics pronunciation Face and face images, phonics Phonics, phonics, phonics, phonics, (Hereinafter, referred to as " pronunciation data "), and more particularly, to a phonics learning apparatus and method using a phonics learning rule to be learned Followed by "alphabetic or short-vowel phonemes or long vowel phonemes or double vowel phonemes or (Hereinafter referred to as " phonics data ") and displays data in a language of a country learning the pronunciation of the displayed phonics data, Words and sentences and an "image or animation or image" (hereinafter referred to as "image data") are provided together with a phonemic data such that phonetic data of a native speaker about the provided words and sentences are reproduced When a native pronunciation image is reproduced, a different color is displayed for each syllable in terms of words and sentences, and a " display sound source such as an electronic sound or an applause sound for distinguishing syllables " (hereinafter referred to as " syllable- , Phonics data and phonics data provided to remind you of words and sentences A learner's pronunciation, a voice and an image are inputted, and a face image of the facial muscle change and lip shape of a native pronunciation, a position of a tooth and a tongue are reproduced, a face muscle change of a learner's pronunciation, To a phonics learning apparatus and method using word and sentence, image data, and pronunciation data of a native speaker for displaying an audio waveform comparison screen to perform effective phonics learning.

글로벌 시대가 되면서 영어에 대한 관심이 나날이 높아지고 있다. 이에 따라 어린이들을 위한 영어 교육 장치들이 개발되고 있다.
In the global age, interest in English is increasing day by day. Accordingly, English teaching devices for children are being developed.

어린이들을 위한 영어 교육 장치로 가장 널리 사용되는 것은 파닉스 학습이며, 알파벳 음운의 발음에 대한 학습이 중심 시스템이다.
The most widely used English teaching device for children is phonics learning, and learning about pronunciation of alphabetic phonemes is the central system.

기존의 파닉스 학습은 단순히 나열된 알파벳 표기와 소리를 반복시켜 암기 위주의 학습을 제공해왔다. 이러한 단순 반복 학습은 지루함을 일으켜 영어 학습에 흥미를 떨어뜨리는 문제점이 발생된다.
Traditional phonics learning has provided memorization-based learning by simply repeating the alphabetical notation and sound. Such simple repetitive learning causes boredom, which causes interest in learning English.

또, 실제 원어민이 어떻게 발음을 하는지 모른체 문자와 음성만에만 의존하여 언어 학습을 하다보니 오랜 시간을 투자했음에도 불구하고, 정확한 영어 발음을 구사할 수 없는 문제점 또한 있다.In addition, there is also a problem that it is not possible to pronounce correct English pronunciation despite having invested a long time because I do language learning by relying only on the text and voice which do not know how the native speaker is pronounced.

따라서, 상기한 문제점을 해결하기 위한 본 발명의 목적은, 학습하고자 하는 파닉스 데이터와 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장과 이미지 데이터를 함께 제공하여 시각적인 연상 학습을 통해 파닉스 학습에 흥미와 이해도를 높이는 도움을 주는 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법을 제공함에 있다.
SUMMARY OF THE INVENTION Accordingly, it is an object of the present invention to solve the above-mentioned problems, and an object of the present invention is to provide a phonemic data management system, The present invention also provides a phonics learning apparatus and method using words, sentences, image data, and pronunciation data of native speakers, which help to increase interest and understanding in phonics learning through visual association learning by providing data.

또한 본 발명의 목적은, 제공된 단어와 문장을 음운단위로 분리 시키고, 개별적인 음운을 청취할 수 있도록 하여 음운을 정확히 구별하는 학습이 가능한 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법을 제공함에 있다.
It is another object of the present invention to provide a phonics learning apparatus and a phonemic learning apparatus, which can separate words and sentences into phonemes and listen to individual phonemes so that words and phrases and image data capable of correctly distinguishing phonemes, And a method.

또한 본 발명의 목적은, 원어민의 발음 데이터가 재생될 때 음절마다 다른 색깔을 입히고, 음절구분 음원 데이터를 출력하여 음절을 정확히 구별하는 학습이 가능한, 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법을 제공함에 있다.
It is another object of the present invention to provide a speech recognition apparatus and a speech recognition method capable of generating words and sentence and image data in which a different color is applied to each syllable when pronunciation data of a native speaker is reproduced and a syllable- And to provide a phonics learning apparatus and method using the same.

또한 본 발명의 목적은, 원어민의 발음 데이터와 학습자의 발음 데이터의 비교를 통해 학습자가 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장을 발음함에 있어 원어민의 발음과 유사해지도록 교정이 가능한, 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법을 제공함에 있다.
It is also an object of the present invention to provide a method and apparatus for correcting pronunciation of a word and a sentence so that a learner can associate phonics data and phonics data with pronunciation data of a native speaker by comparing pronunciation data of a learner with pronunciation data of a learner, , Phonics learning apparatus and method using word and sentence, image data, and pronunciation data of native speakers.

또한 본 발명의 목적은, 음성 파형의 비교를 통해 발음의 세기 및 강세의 위치를 세밀하게 체크할 수 있도록 하는 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법을 제공함에 있다.
It is also an object of the present invention to provide a phonics learning apparatus and method using words and sentences, image data, and pronunciation data of native speakers, which enable a user to precisely check the strength and strength of pronunciation through comparison of sound waveforms .

또한 본 발명의 목적은, 원어민의 발음 데이터를 여성, 남성, 미국식 발음, 영국식 발음, 호주식 발음 등 여러가지 종류로 제공하여 폭 넓게 언어 학습을 하도록 하는 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법을 제공함에 있다.
It is another object of the present invention to provide a method and apparatus for providing pronunciation data of a native speaker in various types such as a female, a male, an American pronunciation, an English pronunciation, a phonetic pronunciation, and the like, And to provide a phonics learning apparatus and method using the same.

본 발명에 의한 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치는 파닉스 데이터, 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 파닉스 데이터와 관련된 단어 및 문장 데이터, 이미지 데이터, 원어민 발음 영상 및 음성 파형 데이터, 음절구분 음원 데이터가 저장된 저장부;
The phonics learning apparatus using words, sentences, image data, and pronunciation data of native speakers according to the present invention can be applied to phonics data, data expressed in a language of a country that learns pronunciation of phonics data, words and sentence data related to phonics data, Data, native speech sound image and sound waveform data, and syllable-group sound source data;

파닉스 데이터 선택 및 파닉스 데이터 입력을 위한 입력부;
An input unit for selecting phonics data and inputting phonics data;

선정된 파닉스 데이터의 학습이 시작되면 파닉스 데이터와 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 그리고 이미지 데이터가 표시되는 표시부;
When the learning of the selected phonics data starts, data displayed in a language of a country learning phonics data and pronunciation of phonics data, a word and a sentence provided to remind phonics data, and image data are displayed;

학습자가 파닉스 학습 시 표시된 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장을 발음할 경우에 학습자의 음성을 입력받기 위한 오디오 처리부;
An audio processing unit for receiving a learner's voice when a learner sounds a word and a sentence so as to associate phonics data and phonics data displayed at the time of phonics learning;

상기 오디오 처리부를 통해 입력된 음성을 분석하고, 파형으로 변환하며, 입력된 음성에 대해 원어민 음성의 파형과 유사도를 비교 분석하기 위한 하기 위한 음성 분석 모듈부 및 음성 파형 처리부;
A voice analysis module for analyzing the voice inputted through the audio processor and converting the voice into a waveform and comparing and analyzing the waveform of the native voice with respect to the inputted voice;

학습자의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상을 수집하기 위한 카메라부;
A camera unit for collecting a positional image of a tooth and a tongue of a face muscle change, a shape of a lip, and a word and a sentence so as to associate phonics data of a learner with phonics data;

상기 카메라부로부터 입력된 학습자의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상 데이터의 포커스와 사이즈를 규격화하기 위한 영상 처리부; 및
An image processing unit for normalizing the focus and size of the positional image data of the teeth and the tongue of the facial muscles, the shape of the lips and the changes of the facial muscles when pronouncing the phonics data and the phonics data inputted from the camera unit; And

상기 영상 처리부를 통해 규격화된 학습자의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상과 상기 저장부에 저장된 원어민의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 영상을 비교하여 표시하고, 상기 음성 분석 모듈부와 음성 파형 처리부를 통해 처리된 파형과 저장된 원어민의 음성 파형을 표시하고, 유사도를 비교하여 50% 이상 유사 시 “good”, 50% 미만 유사 시 ”bad”를 표시하도록 제어하는 제어부를 포함하는 것을 특징으로 할 수 있다.
A face image of a tooth and a tongue of the lips, and a phonemic data of a native speaker stored in the storage unit when the words and sentences are provided to associate the learner's phonics data and phonics data standardized through the image processing unit, The waveforms processed by the speech analysis module and the sound waveform processor and the sound waveforms of the native speakers stored are displayed and the similarity is compared with each other to obtain a 50% And a control unit for controlling the display unit to display " good " in the case of abnormality, and " bad " in the case of less than 50%.

또한, 상기 제어부가 인터넷 웹 브라우저의 표시되는 단어 또는 문장 중 상기 저장부에 저장된 단어 또는 문장과 일치하는 것을 음운 단위로 분리시킨 형태로 표시할 수 있도록 하는 유무선 네트워크부를 더 포함하는 것을 특징으로 할 수 있다.
In addition, the control unit may further include a wired / wireless network unit for displaying a word or a sentence of the Internet web browser that matches the word or sentence stored in the storage unit, have.

또한, 상기 제어부가 DMB 영어방송에서 나오는 단어 중 상기 저장부에 저장된 단어 또는 문장과 일치하는 것을 음운 단위로 분리시킨 형태로 표시할 수 있도록 하는 DMB 모듈부를 더 포함하는 것을 특징으로 할 수 있다.
The controller may further include a DMB module for displaying a word or sentence stored in the storage unit of the words in the DMB English broadcast in a form separated by phonemes.

또한 상기 표시부의 레이어(layer)는 Home, Dic 및 Option 텝으로 구분되는 것을 특징으로 할 수 있다.
In addition, the layer of the display unit may be divided into Home, Dic, and Option tabs.

또한, 상기 Home 텝에는 학습자가 선택한 파닉스 데이터가 순차적으로 표시되며, 표시된 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 표시된 파닉스 데이터와 관련된 단어 및 문장 데이터, 이미지 데이터, 원어민의 단어 발음 시 얼굴, 원어민의 파닉스 데이터 발음 시 입술의 모양 그리고 치아와 혀의 위치 모양, 학습자의 파닉스 데이터 발음 시 얼굴 또는 입술의 모양 그리고 치아와 혀의 위치 모양, 원어민의 음성 파형 및 학습자의 음성 파형, 음절구분 음원 데이터 중 적어도 어느 하나를 표시하는 것을 특징으로 할 수 있다.
In addition, the Home tab displays sequentially the phonics data selected by the learner, and displays data in the language of the country learning the pronunciation of the displayed phonics data, words and sentence data related to the displayed phonics data, image data, The phonics data of the native speaker, the voice waveform of the native speaker and the voice waveform of the learner, the shape of the lips, the position of the teeth and the tongue when pronouncing the phonics data of the native speaker, the shape of the face of the learner, And syllable-segment sound source data.

또한 상기 Option 텝은 파닉스 데이터를 연상시킬 수 있는 이미지 데이터 표시 여부 선택과, 알파벳 발음 및 음운 발음 재생 여부 선택과, 음절단위 색깔표시 여부 선택과, 음절구분 음원 데이터 재생 여부 선택과, 액센트 표기 여부 선택과, 발음 기호 표기 여부 선택과, 음성 출력의 성별 선택과, 국가별 발음 음성 출력 선택과, 발음 교정 테스트 모드 선택 중 적어도 어느 하나를 포함하는 것을 특징으로 할 수 있다.
The option tab is used to select whether to display image data capable of associating phonics data, to select whether alphabet pronunciation and phonogram pronunciation are to be played, to select whether syllable unit color is displayed, to select whether to reproduce syllable classification sound source data, And selecting at least one of a phonetic symbol selection, a gender selection of a phonetic output, a pronunciation phonetic output selection by a country, and a pronunciation correction test mode selection.

또한 상기 제어부는 음운, 단어 암기 및 음절 세기 테스트에서 텍스트, 음성 출력 및 이미지 데이터 중 어느 하나로 문제를 제시하고 객관식 또는 주관식으로 답을 선택할 수 있도록 표시하도록 제어하는 것을 특징으로 할 수 있다.
In addition, the control unit may control the display unit to display a problem in any one of text, voice output, and image data in a phonological, word memorization, and syllable strength test, and to display the answer in a selective or subjective manner.

본 발명에 의한 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습방법은 학습자로부터 학습할 파닉스 데이터의 선택 명령이 입력되는 단계;
A phonics learning method using words, sentences, image data, and pronunciation data of a native speaker according to the present invention comprises: inputting a selection instruction of phonics data to be learned from a learner;

상기 선택된 파닉스 데이터와 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 그리고 이미지 데이터가 표시되는 단계;
Displaying phonics data and phonics data in a language of a country that learns pronunciation of the phonics data, words and phrases and image data provided to remind phonics data;

상기 선택된 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장의 원어민 발음 시 영상이 표시되는 단계;
Displaying an image in a native pronunciation state of words and sentences provided so as to associate the selected phonics data and phonics data;

상기 선택된 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장의 원어민 발음 시 음절마다 다른 색깔을 입히고, 음절구분 음원 데이터가 출력되는 단계;
A step of outputting syllable classification sound source data by applying a different color to each syllable in native pronunciation of words and sentences provided to remind the selected phonics data;

상기 표시된 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장에 따른 학습자의 파닉스 데이터와 단어 및 문장 발음 시 음성 및 영상이 입력되는 단계;
Inputting phonics data of a learner according to a word and a sentence provided so as to associate the displayed phonics data and phonics data with voice and image in word and sentence pronunciation;

원어민의 파닉스 데이터와 단어 및 문장 발음 시 영상 및 학습자의 파닉스 데이터와 단어 및 문장 발음 시 영상이 표시되어 재생되는 단계;
The phonics data of the native speaker and the phonics data of the learner and the word and sentence are displayed and reproduced when the word and sentence are pronounced;

원어민 음성 파형과 학습자 음성 파형의 비교 화면이 표시되는 단계; 및
A step of displaying a comparison screen of a native speech waveform and a learner speech waveform; And

원어민 음성 파형과 학습자 음성 파형의 비교 유사도가 50% 이상이면 “good” 50% 미만이면 “bad”를 표시하는 단계를 포함하는 것을 특징으로 할 수 있다.And displaying "bad" if the similarity degree between the native speech waveform and the learner speech waveform is "good" if the similarity is 50% or more and "bad" if the similarity is less than 50%.

본 발명의 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습방법에 의하면, 파닉스 데이터와 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 파닉스 데이터와 관련된 이미지 데이터, 단어 및 문장 데이터를 표시하여 파닉스 학습에 대한 흥미와 이해도를 높이는 언어학습이 가능하며, 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장에 대한 원어민의 발음 데이터가 재생될 때 음절마다 다른 색깔을 입히고, 음절구분 음원 데이터를 출력하여 음절을 정확히 구별하는 학습이 가능하고, 원어민의 발음 데이터와 학습자의 발음 데이터의 비교를 통해 학습자가 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장를 발음함에 있어 원어민의 발음과 유사해지도록 교정이 가능하며, 음성 파형의 비교를 통해 발음의 세기 및 강세의 위치를 세밀하게 체크할 수 있고, 원어민의 발음 데이터를 여성, 남성, 미국식 발음, 영국식 발음, 호주식 발음 등 여러가지 종류로 제공하여 폭 넓게 언어 학습을 하도록 하는 효과가 있다.According to the phonics learning method using words, sentences, image data, and pronunciation data of native speakers of the present invention, data expressed in a language of a country learning phonics data and phonics data, image data related to phonics data, It is possible to learn a language that enhances interest and understanding of phonics learning by displaying sentence data. When the pronunciation data of a native speaker about words and sentences provided for associating phonics data are reproduced, a different color is applied to each syllable, In the pronunciation of the provided words and sentences so that the learner can associate the phonics data and the phonics data by comparing the pronunciation data of the native speaker with the pronunciation data of the learner, Calibration to be similar to It is possible to check the strength and intensity of the pronunciation by comparing the waveforms of the voice and it is possible to provide the pronunciation data of the native speaker in various kinds such as female, male, American, English, It is effective to make language learning widely.

도 1은 본 발명의 실시 예에 따른 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치의 구성을 나타낸 블록도.
도 2는 본 발명의 실시 예에 따른 학습하고자 하는 파닉스 데이터 선택 화면의 예를 나타낸 도면.
도 3은 본 발명의 실시 예에 따른 선택한 파닉스 데이터 학습의 레벨 선택 화면의 예를 나타낸 도면.
도 4는 본 발명의 실시 예에 따른 선택한 파닉스 데이터의 학습 화면의 예를 나타낸 도면.
도 5는 본 발명의 실시 예에 따른 Dic 텝에서의 단어의 사전 정보를 표시한 예를 나타낸 도면.
도 6는 본 발명의 실시 예에 따른 Option 텝에서의 단어학습 옵션 선택목록의 예를 나타낸 도면.
도 7은 본 발명의 실시 예에 따른 객관식과 주관식 형태의 파닉스 학습 테스트 방식의 예를 나타낸 도면.
도 8은 본 발명의 실시 예에 따른 객관식과 주관식 형태의 파닉스 학습 테스트 문제에서 학습자가 맞추지 못한 단어가 체크되어 리스트로 표시되는 예를 나타낸 도면.
도 9는 본 발명의 실시 예에 따른 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습방법의 흐름도.1 is a block diagram showing the configuration of a phonics learning apparatus using word and sentence, image data, and pronunciation data of a native speaker according to an embodiment of the present invention.
2 is a view showing an example of a phonics data selection screen to be studied according to an embodiment of the present invention;
3 is a diagram illustrating an example of a level selection screen of a selected phoneme data learning according to an embodiment of the present invention;
4 is a view showing an example of a learning screen of selected phonics data according to an embodiment of the present invention;
5 is a diagram showing an example of displaying dictionary information of a word in a Dic tab according to an embodiment of the present invention;
6 is a diagram illustrating an example of a word learning option selection list in an Option tab according to an embodiment of the present invention;
FIG. 7 is a view showing an example of a phonics learning test method in the form of a multiple choice and a subjective type according to an embodiment of the present invention; FIG.
FIG. 8 is a diagram illustrating an example in which a word that is not matched by a learner is checked and displayed as a list in a multiple-choice phonics learning test of a multiple choice and double-entry type according to an embodiment of the present invention.
9 is a flowchart of a phonics learning method using words and sentences, image data, and pronunciation data of native speakers according to an embodiment of the present invention.

이하 첨부된 도면을 참조하여 본 발명의 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 및 방법에 대해 설명하도록 한다.
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a phonics learning apparatus and method using words, sentences, image data, and pronunciation data of native speakers according to the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명의 실시 예에 따른 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치의 구성을 나타낸 블록도이다.
1 is a block diagram showing the configuration of a phonics learning apparatus using words, sentences, image data, and pronunciation data of native speakers according to an embodiment of the present invention.

도 1을 참조하면, 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치(100)는 파닉스 데이터, 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 단어 및 문장 데이터, 이미지 데이터, 원어민 발음 영상 및 음성 파형 데이터, 음절구분 음원 데이터가 저장된 저장부(104)와, 파닉스 데이터 선택 및 파닉스 데이터 입력을 위한 입력부(102)와, 학습자가 선택한 파닉스 데이터의 학습이 시작되면 파닉스 데이터와 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 그리고 이미지 데이터가 표시되는 표시부 (114)와, 학습자가 파닉스 학습 시 표시된 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장을 발음할 경우에 학습자의 음성을 입력받기 위한 오디오 처리부 (106)와, 상기 오디오 처리부(106)를 통해 입력된 음성을 분석하고, 파형으로 변환하며, 입력된 음성에 대해 원어민 음성의 파형과 유사도를 비교 분석하기 위한 음성 분석 모듈부(108) 및 음성 파형 처리부(110)와, 학습자의 단어 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상을 수집하기 위한 카메라부(112)와, 상기 카메라부(112)로부터 입력된 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상의 포커스와 사이즈를 규격화하기 위한 영상 처리부(116)와, 상기 영상 처리부(116)를 통해 규격화된 학습자의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치 영상과 상기 저장부(104)에 원어민의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 영상을 비교하여 표시하고, 상기 음성 분석 모듈부(108) 와 음성 파형 처리부(110)를 통해 처리된 파형과 저장된 원어민의 음성 파형을 표시하고, 유사도를 비교하여 50% 이상 유사 시 “good”, 50% 미만 유사 시 ”bad”를 표시하도록 제어하는 제어부(122)와, 상기 제어부(122)가 인터넷 웹 브라우저의 화면에 표시되는 단어 또는 문장 중 상기 저장부(104)에 저장된 단어 또는 문장과 일치하는 것을 음운 단위로 분리시킨 형태로 표시할 수 있도록 하는 유무선 네트워크부(118)와, 상기 제어부(122)가 DMB 영어 방송에서 나오는 단어 또는 문장 중 상기 저장부(104)에 저장된 단어 또는 문장과 일치하는 것을 음운 단위로 분리시킨 형태로 표시할 수 있도록 하는 DMB 모듈부(120)로 구성된다.
1, aphonics learning apparatus 100 using words, sentences, image data, and pronunciation data of native speakers includes data written in a language of a country that learns pronunciation of phonics data, phonics data, word and sentence data, Astorage unit 104 for storing syllable classification sound source data, aninput unit 102 for phonics data selection and phonics data input, and aninput unit 102 for inputting phonics data selected by the learner, Adisplay unit 114 displaying words and phrases provided to remind phonics data, image data, and phonemic data displayed at the time of phonics learning; Words and sentences provided to remind phonics data Anaudio processing unit 106 for receiving a learner's voice in the event of sounding; asound analyzing unit 106 for analyzing the sound input through theaudio processing unit 106, converting the sound into a waveform, comparing the waveform of the native sound with the similarityA camera module 112 for collecting a position image of a tooth and a tongue of a lips and a change of facial muscles when a learner pronounces a word, asound analyzing module 108 for analyzing the sound waveform, Animage processing unit 116 for normalizing the face muscle change and the shape of the lip inputted from thecamera unit 112 and the focus and size of the position image of the teeth and the tongue of the learner; In order to associate data and phonics data, the words and phrases provided in the pronunciation of the facial muscles and the shape of the lips, teeth and tongue position images and the above stored Thespeech analysis module 108 and thespeech waveform processor 110 compare the phonemic data of the native speaker and the phonemic data provided by thespeech analysis module 108 and thespeech waveform processor 110, Acontrol section 122 for displaying a voice waveform of a stored native speaker and comparing the similarities to display "good" in 50% or more similarity and "bad" in case of less than 50% A wired /wireless network unit 118 for displaying a word or a sentence displayed on the screen of thedisplay unit 104 in a form in which words or phrases stored in thestorage unit 104 are matched with phonemes, A DMB module for displaying a word or a sentence in the DMB English broadcast, which corresponds to a word or sentence stored in thestorage unit 104, (120).

도시되진 않았지만, 상기 표시부(114)의 화면을 좌/우로 구분하여 좌측에 인터넷 웹 브라우저의 화면 또는 DMB 방송 영상을 표시하고, 우측에 상기 저장부(104)에 저장된 단어 또는 문장과 일치하는 단어 또는 문장을 표시하여 학습자가 학습을 원하는 단어 또는 문장을 선택하면 상기 저장부(104)에 저장된 파닉스 데이터, 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 이미지 데이터, 원어민 발음 시 영상이 재생되도록 하는 것이 바람직하다.
Although not shown, the screen of thedisplay unit 114 is divided into left and right sides to display a screen of the Internet web browser or a DMB broadcast image on the left side, and a word or sentence matching the word or sentence stored in thestorage unit 104 When a learner selects a word or a sentence desired to be learned by displaying a sentence, the phonemic data stored in thestorage unit 104, data written in a language of a country learning pronunciation of the phonics data, image data, It is preferable to reproduce it.

이는, 학습자가 인터넷 웹 브라우저의 화면 또는 DMB 영어 방송을 통해 단어 및 문장의 학습 상태를 확인해볼 수 있으며, 알아듣지 못했던 단어와 문장을 체크하고 복습할 수 있는 효과가 있다.
This enables the learner to check the learning status of the words and sentences through the screen of the Internet web browser or the DMB English broadcast, and to check and review the words and sentences that have not been heard.

도시되진 않았지만, 외국어 학습서적 또는 컴퓨터, 스마트폰, 테블릿pc, pmp 등 디스플레이를 통해 출력되는 외국어 학습프로그램에 증강 현실을 구현하기 위한 마커를 표기하고, 상기 카메라부(112)를 통해 해당 마커를 수집하여, 저장부(104)에 저장된 파닉스 데이터, 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 단어 및 문장 데이터, 이미지 데이터, 원어민 발음 영상 및 음성 파형 데이터, 음절구분 음원 데이터 중 해당 마커와 관련된 각각의 데이터가 화면을 통해 재생되도록 하는 것이 바람직하다.
Although not shown, a marker for implementing an augmented reality is written in a foreign language learning book or a foreign language learning program output through a display such as a computer, a smart phone, a tablet pc, or a pmp, and the marker is displayed through thecamera unit 112 The phonemic data stored in thestorage unit 104, data expressed in a language of a country learning phonics data, word and sentence data, image data, native pronunciation images and sound waveform data, and syllable- It is preferable that each piece of data related to the marker is played back on the screen.

이는, 학습자가 학습 시 즉각적으로 학습과 관련된 데이터를 제공받고, 발음학습에도 도움이 되는 효과가 있다.
This has the effect that the learner is immediately provided with the data related to the learning at the time of learning and also helps the pronunciation learning.

단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치 (100)는 컴퓨터 단말기, 테블릿 PC, 어학기 및 스마트폰을 포함하며, 상기 입력부(102)는 상기 단어 학습장치(100)의 키 패드 또는 터치 스크린 모듈 및 터치 팬을 포함한다.
The phonicslearning apparatus 100 includes a computer terminal, a tablet PC, a learner, and a smartphone. Theinput unit 102 inputs a key of theword learning apparatus 100, Pad or touch screen module and touch pan.

상기 오디오 처리부(106)는 음성 입력 및 출력과 미디어 출력이 가능하도록 마이크(microphone)와 스피커를 포함한다.
Theaudio processing unit 106 includes a microphone and a speaker to enable audio input, output, and media output.

도 2,3은 본 발명의 실시 예에 따른 학습하고자 하는 파닉스 데이터 선택 및 학습 레벨 선택의 예를 나타낸 도면이고, 도 4은 본 발명의 실시 예에 따른 파닉스 데이터 학습 화면의 예를 나타낸 도면이다.
FIGS. 2 and 3 are views showing examples of phonics data selection and learning level selection for learning according to an embodiment of the present invention, and FIG. 4 is a diagram illustrating an example of a phonics data learning screen according to an embodiment of the present invention.

도 2,3,4에 도시된 바와 같이, 학습자는 먼저 학습하고자 하는 파닉스 데이터를 선택한다.
As shown in FIGS. 2, 3 and 4, the learner first selects the phonics data to be learned.

학습자의 파닉스 데이터 선택방식은 도 2,3에서와 같이 원하는 파트와 학습 레벨을 선택하는 것이 가능하며, 그 방식을 제한하는 것은 아니다.
The learner's phonics data selection method can select a desired part and a learning level as shown in FIGS. 2 and 3, and does not limit the method.

학습자가 학습하고자 하는 파닉스 데이터의 선택이 완료되고 학습이 시작되면, 도 4에서와 같이, Home 텝(10)에 파닉스 데이터에 관련된 단어 및 문장과 이미지 데이터(11), 원어민의 단어 발음 시 얼굴(12), 파닉스 데이터 및 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, (13), 원어민의 단어 발음 시 입술의 모양 그리고 치아와 혀의 위치 모양 (14), 학습자의 단어 발음 시 얼굴 또는 입술의 모양 그리고 치아와 혀의 위치 모양(15), 원어민의 음성 파형(16) 및 학습자의 음성 파형(17)이 표시되고 하단에 Next, Repeat, Slow 버튼과 녹음 및 재생 버튼이 표시된다.
When the learner selects the phonics data to be learned and the learning starts, as shown in Fig. 4, thehome tab 10 stores words and sentences related to phonics data andimage data 11, 12), data written in the language of the country learning phonics data and phonics data, (13), the shape of the lips at the pronunciation of the native speaker's words, the shape of the tooth and tongue position (14) (15), a native speech waveform (16) and a learner's speech waveform (17) are displayed, and a Next, Repeat, Slow button and a recording and playback button are displayed at the bottom .

우선, 파닉스 데이터와 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 파닉스 데이터에 관련된 이미지 데이터, 단어 및 문장 데이터가 함께 표시됨과 동시에 해당 단어를 발음하는 원어민의 단어 발음 시 동영상이 재생된다.
First, data displayed in a language of a country learning phonics data and phonics data, image data related to phonics data, and word and sentence data are displayed together. At the same time, when a word of a native speaker who pronounces the word is pronounced, do.

이후, 표시되진 않았지만 학습자의 음성을 입력받을 수 있도록 팝업메뉴를 띄워 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치(100)에 구비된 카메라를 바라보며 해당 언어를 발음하도록 한다.
Thereafter, a pop-up menu is displayed so that the learner's voice can be input, so that thephonics learning apparatus 100 using words, sentences, image data, and native pronunciation data of the learner looks at the camera and sounds the corresponding language.

음성 녹음 및 영상 촬영이 완료되면, 해당 파닉스 데이터와 파닉스 데이터에 관련된 단어 및 문장 데이터에 대한 원어민의 발음 시 입 부분이 확대된 발음 동영상과 학습자의 녹화된 발음 동영상이 재생 되도록 한다.
When the voice recording and the video recording are completed, the pronunciation video and the recorded pronunciation video of the learner are enlarged so that the mouth part of the native speaker's pronunciation of the word and sentence data related to the phonics data and phonics data is reproduced.

영상 처리부(116)는 해당 화면의 프레임에 입 모양이 표시될 수 있도록 영상을 가공하여 규격화할 수 있는 프로그램이 탑재되는 것이 바람직하며, 녹화된 영상이 데이터로 활용될 수 없는 경우 재녹화될 수 있도록 학습자에게 요구사항을 팝업메뉴 형태로 표시하는 것이 바람직하다.
Preferably, theimage processing unit 116 includes a program that can process and standardize an image so that a mouth shape can be displayed on a frame of the corresponding screen. If the recorded image can not be utilized as data, It is desirable to display the requirements to the learner in the form of a pop-up menu.

또한, 학습자의 발음 영상 재생은 녹화방식이 아닌 현재 학습자의 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치가 카메라를 통해 실시간으로 입력되어 표시되도록 함으로써, 학습자가 본인의 얼굴 근육 변화 및 입술의 모양 그리고 치아와 혀의 위치를 직접 화면을 통해 확인하면서 원어민의 발음과 같아지도록 연습할 수 있도록 하는 것이 바람직하다.
In addition, the pronunciation video reproduction of the learner allows the learner's facial muscle change, lips shape, and tooth and tongue position to be inputted and displayed in real time through the camera, not by the recording method, Shape, and location of the teeth and tongue directly on the screen, so that they can practice the pronunciation of the native speaker.

이때, 음성 분석 모듈부(108)에서 학습자의 음성을 분석하고, 분석된 데이터를 토대로 음성 파형 처리부(110)를 통해 파형으로 변환시켜 원어민 음성 파형과 비교할 수 있도록 표시한다.
At this time, thevoice analysis module 108 analyzes the learner's voice and converts the learner's voice to a waveform through thevoice waveform processor 110 based on the analyzed data, so that the voice waveform can be compared with the native voice waveform.

도 5는 본 발명의 실시 예에 따른 Dic 텝에서의 단어의 사전 상 정보를 표시한 예를 나타낸 도면이다.
5 is a diagram showing an example of displaying dictionary information of a word in a Dic tab according to an embodiment of the present invention.

도 5에 도시된 바와 같이, 단어가 재생되고 있을 때, Dic 텝(20)을 선택하면 해당 단어의 사전적 의미와 예문 등을 확인할 수 있다.
As shown in FIG. 5, when the word is being reproduced, thedictionary step 20 can be selected to confirm the dictionary meaning and example sentence of the word.

도 6는 본 발명의 실시 예에 따른 Option 텝에서의 파닉스 학습 옵션 선택목록의 예를 나타낸 도면이다.
6 is a view showing an example of a phonics learning option selection list in the Option tab according to the embodiment of the present invention.

도 6에 도시된 바와 같이, 상기 Option 텝(30)은 파닉스 데이터를 연상시킬 수 있는 이미지 데이터 표시 여부 선택과, 알파벳 발음 및 음운 발음 재생 여부 선택과, 음절단위 색깔표시 여부 선택과, 음절구분 음원 데이터 재생 여부 선택과, 액센트 표기 여부 선택과, 발음 기호 표기 여부 선택과, 음성 출력의 성별 선택과, 국가별 발음 음성 출력 선택과, 발음 교정 테스트 모드 선택 메뉴로 구성되며 표시되는 방식을 학습자가 선택할 수 있도록 하여 학습자가 자신에게 가장 적합한 방식으로 조절할 수 있도록 한다.
As shown in FIG. 6, theOption tab 30 includes selection of whether or not to display image data capable of associating phonics data, selection of whether alphabet pronunciation and phonological pronunciation are reproduced, selection of whether a syllable unit color is displayed, Selection of whether to reproduce data, selection of accent marking, selection of pronunciation symbol marking, selection of gender of voice output, selection of pronunciation voice output by country, and selection of a pronunciation correction test mode. So that the learners can adjust themselves in the way that best suits them.

도 7은 본 발명의 실시 예에 따른 객관식과 주관식 형태의 파닉스 학습 테스트 방식의 예를 나타낸 도면이다.
FIG. 7 is a view showing an example of a phonics learning test method in the form of a multiple choice and a subjective expression according to an embodiment of the present invention.

도 7에 도시된 바와 같이, 음운, 단어 암기 및 음절 세기 테스트에서 텍스트, 음성 출력 및 이미지 데이터 중 어느 하나로 문제를 제시하고 객관식 또는 주관식으로 답을 선택할 수 있도록 하는 방식을 사용할 수 있다.
As shown in FIG. 7, in a phonological, word memorizing, and syllable strength test, a method of presenting a problem by using either text, voice output, or image data and selecting an answer by a questionnaire or a questionnaire can be used.

학습자가 단어를 입력하는 방식은 객관식인 경우 손가락이나 터치펜으로 번호를 선택하거나 키패드로 번호를 입력할 수 있으며, 직접 입력하는 경우에는 손가락 또는 터치펜으로 직접 단어를 적거나 키패드로 입력할 수 있다.
If the learner enters a word in a multiple choice, you can use the finger or touch pen to select the number, or you can enter the number with the keypad. If you type directly, you can write the word directly with your finger or touch pen .

도 8은 본 발명의 실시 예에 따른 객관식과 주관식 형태의 파닉스 학습 테스트 문제에서 학습자가 맞추지 못한 단어가 체크되어 리스트로 표시되는 예를 나타낸 도면이다.
FIG. 8 is a diagram illustrating an example in which a word that is not matched by a learner is checked and displayed in a list in a multiple-choice phonics learning test according to an embodiment of the present invention.

도 8에 도시된 바와 같이, 파닉스 학습 테스트 문제에서 학습자가 맞추지 못한 문제에 대해서는 저장부(104)에 저장하여 다시 학습할 수 있도록 리스트에 체크하고, 다시 학습하거나 종료할 수 있도록 한다.
As shown in FIG. 8, a problem that the learner can not match in the phonics learning test problem may be stored in thestorage unit 104, checked in the list so that the learner can learn again, and can be learned or terminated again.

도 9는 본 발명의 실시 예에 따른 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습방법의 흐름도이다.
9 is a flowchart of a phonics learning method using word and sentence, image data, and pronunciation data of a native speaker according to an embodiment of the present invention.

도 9를 참조하면, 먼저 입력부(102)를 통해 학습자는 학습하고자 하는 파닉스 데이터를 선택한다(S200).
Referring to FIG. 9, the learner selects phonetic data to be learned through the input unit 102 (S200).

상기 입력부(102)를 통한 파닉스 데이터 선택이 완료되면, 표시부(114)의 Home(10)에 선택된 파닉스 데이터와 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장과 이미지 데이터 및 원어민 발음 시 영상이 표시 및 재생된다(S202).
When the phonics data selection through theinput unit 102 is completed, the phonics data selected in theHome 10 of thedisplay unit 114 and the phonics data represented in the language of the country learning the phonics data are reminded And the image data and the native-sounding image are displayed and reproduced (S202).

이후, 오디오 처리부(106)를 통해 학습자의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 음성을 입력받고, 카메라부(112)를 통해 학습자의 발음 시 얼굴 영상을 취득한다(S204).
Thereafter, the user inputs phonetic data of the learner's phonics data and phonics data so as to associate the learner's phonics data with the phonics data, and acquires the face image during pronunciation of the learner through the camera unit 112 (S204 ).

저장부(104)에 저장된 원어민의 발음 시 영상이 재생되고, 영상 처리부(116)를 통해 포커스와 사이즈가 규격화된 학습자의 발음 시 영상이 재생되도록 한다(S206).
(Step S206). In this way, the learner's pronunciated image of the learner, whose focus and size are standardized, is reproduced through the image processing unit 116 (S206).

학습자의 발음 시 영상에 있어서는 학습자마다 발음할 때 카메라와의 거리, 학습자마다 영상에서 차지하는 얼굴 사이즈 등이 달라지게 되는 것이 일반적이다.
In the case of the learner's pronunciations, the distance from the camera to the learner, the size of the face occupied by the learner for each learner, and the like are generally changed.

따라서, 상기 영상 처리부(116)는 학습자의 얼굴 형태를 인식하고 프레임에서 얼굴 형태가 차지하는 사이즈로 확대 또는 축소하여 규격화된 포커스와 사이즈로 학습자의 발음 시 영상이 보여질 수 있도록 하는 것이 바람직하다.
Accordingly, theimage processing unit 116 preferably recognizes the learner's face shape and enlarges or reduces the size of the learner's face in the frame so that the learner's pronunciation image can be displayed with the normalized focus and size.

이때, 학습자의 발음 시 영상 재생은 녹화 재생 또는 실시간 재생 방식을 적용할 수 있다.
At this time, the learner can apply the recording reproduction or the real time reproduction method to the image reproduction upon pronunciation.

그리고, 상기 오디오 처리부(106)를 통해 입력된 학습자의 음성 데이터를 음성 분석 모듈부(108)에서 분석하여 음성 파형 처리부(100)를 통해 파형으로 변환하여 표시될 수 있도록 한다(S208).
The learner's voice data input through theaudio processor 106 is analyzed by thevoice analysis module 108 and converted into a waveform through thevoice waveform processor 100 so as to be displayed (S208).

학습자의 음성 파형은 저장부(104)에 저장된 원어민의 음성 파형과 비교될 수 있도록 나란히 표시하고, 원어민이 어느 음절에서 강하게 발음하는지를 학습자가 확인할 수 있도록 한다.
The learner's voice waveform is displayed side by side so as to be compared with the voice waveform of the native speaker stored in thestorage unit 104 so that the learner can confirm which syllable is strong in the syllable.

파형은 음의 진동 모양을 시간 차이로 나누어 표시할 때 생기는 파장의 형태로써, 음성 파형은 단어를 발음할 때의 액센트와 리듬을 확인할 수 있는 중요한 요소가 된다.
A waveform is a type of wavelength that occurs when the waveform of a sound is divided by time difference. The waveform is an important factor for confirming the accent and rhythm when pronouncing a word.

상기와 같이, 학습자가 원하는 학습을 원하는 파닉스 데이터를 선택하여 학습을 시작하면, 해당 선택된 파닉스 데이터와 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 그리고 이미지 데이터가 표시되고, 원어민의 발음 시 동영상이 표시되고, 학습자의 파닉스 데이터와 파닉스 데이터를 연상시킬 수 있도록 제공된 단어 및 문장 발음 시 음성과 영상을 입력받아 원어민의 발음 시 영상과 비교할 수 있도록 하며, 원어민의 음성 파형과 학습자의 음성 파형을 비교할 수 있도록 하여 정확한 발음 교정 및 정확한 액센트를 익힐 수 있는 효과가 있다.As described above, when the learner selects the desired phonics data to start learning, he or she learns the pronunciation of the selected phonics data and the phonics data in the language of the country learning the phonics data, And sentence and image data are displayed. When video of the native speaker is displayed, the voice and the image are inputted when the word and sentence pronunciation are provided so as to associate the learner's phonics data and phonics data. And it is possible to compare the voice waveform of the native speaker with the voice waveform of the learner, so that it is possible to acquire accurate pronunciation correction and accurate accent.

100 : 언어 학습 장치 102 : 입력부
104 : 저장부 106 : 오디오 처리부
108 : 음성 분석 모듈부 110 : 음성 파형 처리부
112 : 카메라부 114 :표시부
116 : 영상 처리부 118 : 유무선 네트워크부
120 : DMB 모듈부 122 : 제어부100: language learning apparatus 102: input unit
104: storage unit 106: audio processing unit
108: Voice analysis module 110: Voice waveform processor
112: camera section 114: display section
116: image processing unit 118: wired / wireless network unit
120: DMB module unit 122:

Claims

Translated fromKorean

제 1항에 있어서, 상기 제어부가 인터넷 웹 브라우저의 표시되는 단어 또는 문장 중 상기 저장부에 저장된 단어 또는 문장과 일치하는 것을 음운 단위로 분리시킨 형태로 표시할 수 있도록 하는 유무선 네트워크부를 더 포함하는 것을 특징으로 하는 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치.The mobile communication terminal according to claim 1, further comprising a wired / wireless network unit for allowing the control unit to display, in a phonetic unit, a word or a sentence of the Internet web browser that matches a word or a sentence stored in the storage unit A phonics learning device using characteristic words and sentences, image data, and pronunciation data of native speakers.

제 1항에 있어서, 상기 제어부가 DMB 영어방송에서 나오는 표시되는 단어 또는 문장 중 상기 저장부에 저장된 단어 또는 문장과 일치하는 것을 음운 단위로 분리시킨 형태로 표시할 수 있도록 하는 DMB 모듈부를 더 포함하는 것을 특징으로 하는 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치.The apparatus of claim 1, further comprising a DMB module for displaying the words or sentences of the displayed words or sentences in the DMB English broadcast, And a phonics learning device using sentence and image data and pronunciation data of a native speaker.

제 1항에 있어서, 상기 표시부의 레이어(layer)는 Home, Dic 및 Option 텝으로 구분되는 것을 특징으로 하는 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치.2. The phonics learning apparatus according to claim 1, wherein the layer of the display unit is divided into Home, Dic and Option tabs, and the phonics learning apparatus using sentence and image data and pronunciation data of a native speaker.

제 4항에 있어서, 상기 Home 텝에는 학습자가 선택한 파닉스 데이터가 순차적으로 표시되며, 표시된 파닉스 데이터에 대한 발음을 학습하는 국가의 언어로 표기하는 데이터, 표시된 파닉스 데이터 관련 단어 및 문장 데이터, 이미지 데이터, 원어민의 단어 발음 시 얼굴, 원어민의 파닉스 데이터 발음 시 입술의 모양 그리고 치아와 혀의 위치 모양, 학습자의 파닉스 데이터 발음 시 얼굴 또는 입술의 모양 그리고 치아와 혀의 위치 모양, 원어민의 음성 파형 및 학습자의 음성 파형, 음절구분 음원 데이터 중 적어도 어느 하나를 표시하는 것을 특징으로 하는 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치.The method according to claim 4, wherein the Home tab displays phonics data selected by the learner in sequence and includes data represented in a language of a country learning phonics data displayed, phonics data related words and sentence data displayed, In the pronunciation of the native speaker's words, the phonics data of the native speaker, the shape of the lips, the position of the teeth and the tongue in pronunciation, the shape of the face or lip in pronouncing the learner's phonics data, the shape of the teeth and tongue, A sound waveform, and syllable-segment sound source data. The phonics learning apparatus using word, sentence, image data, and pronunciation data of a native speaker.

제 4항에 있어서, 상기 Option 텝은 파닉스 데이터를 연상시킬 수 있는 이미지 데이터 표시 여부 선택과, 알파벳 발음 및 음운 발음 재생 여부 선택과, 음절단위 색깔표시 여부 선택과, 음절구분 음원 데이터 재생 여부 선택과, 액센트 표기 여부 선택과, 발음 기호 표기 여부 선택과, 음성 출력의 성별 선택과, 국가별 발음 음성 출력 선택과, 발음 교정 테스트 모드 선택 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치.The method according to claim 4, wherein the Option tab comprises a selection of whether to display image data capable of associating phonics data, a selection of whether alphabet pronunciation and phonological pronunciation are reproduced, whether or not syllable unit color is displayed, , A selection of accent marking, a selection of pronunciation marking selection, a selection of gender of voice output, a selection of pronunciation voice output by country, and a selection of a pronunciation correction test mode. Data and phonics learning device using pronunciation data of native speakers.

제 1항에 있어서, 상기 제어부는 음운, 단어 암기 및 음절 세기 테스트에서 텍스트, 음성 출력 및 이미지 데이터 중 어느 하나로 문제를 제시하고 객관식 또는 주관식으로 답을 선택할 수 있도록 표시하도록 제어하는 것을 특징으로 하는 단어 및 문장과 이미지 데이터 그리고 원어민의 발음 데이터를 이용한 파닉스 학습장치.The method according to claim 1, wherein the control unit controls the display unit to display a question in a phonological, word memorizing, and syllable strength test, And a phonics learning device using sentence and image data and pronunciation data of a native speaker.