JP2012242785A - Signal processing device, signal processing method, and program - Google Patents

Abstract

PROBLEM TO BE SOLVED: To generate an alternative signal of an audio signal for concealing an error of a transmission line, at low computational complexity.SOLUTION: A low-frequency spectrum extractor extracts a part of a spectrum of an audio signal of a frame unit as a partial spectrum. An IMDCTtransformer inversely orthogonally transforms the partial spectrum. A concealed signal generator generates a concealed signal of the audio signal on the basis of the partial audio signal obtained as a result of the inverse orthogonal transformation. This technique can be applied to, for example, an audio signal decoding device.

Description

Translated fromJapanese

本技術は、信号処理装置、信号処理方法、およびプログラムに関し、特に、オーディオ信号の代替信号を低演算量で生成することができるようにした信号処理装置、信号処理方法、およびプログラムに関する。  The present technology relates to a signal processing device, a signal processing method, and a program, and more particularly, to a signal processing device, a signal processing method, and a program that can generate a substitute signal for an audio signal with a low amount of computation.

オーディオ信号を符号化する符号化装置は、オーディオ信号を直交変換してスペクトル信号を生成し、そのスペクトル信号を量子化して符号化することにより、符号化データを生成する。このような符号化データを復号する復号装置は、伝送路のエラーなどにより正確に符号化データを受信できなかった場合、そのエラーを隠蔽するために代替信号を生成する必要があるが（例えば、特許文献１参照）、代替信号の生成は難しい。  An encoding device that encodes an audio signal generates a spectral signal by orthogonally transforming the audio signal, and generates encoded data by quantizing and encoding the spectral signal. A decoding device that decodes such encoded data needs to generate an alternative signal in order to conceal the error when the encoded data cannot be received correctly due to an error in the transmission path (for example, It is difficult to generate a substitute signal.

代替信号を生成する方法としては、過去に復号されたオーディオ信号のピッチ周期やピッチ利得を検出し、そのピッチ周期やピッチ利得に応じたオーディオ信号を代替信号として生成する方法が考えられている。  As a method of generating a substitute signal, a method of detecting a pitch period or pitch gain of an audio signal decoded in the past and generating an audio signal corresponding to the pitch period or pitch gain as a substitute signal is considered.

特許４６０３０９１号公報Japanese Patent No. 4603091

しかしながら、上述した方法では、特にサンプリング周波数の高いオーディオ信号の符号化データを復号する復号装置において、ピッチ周期やピッチ利得を検出するために、多くの演算量が必要とされる。  However, in the above-described method, a large amount of calculation is required to detect the pitch period and the pitch gain in a decoding apparatus that decodes encoded data of an audio signal having a high sampling frequency.

本技術は、このような状況に鑑みてなされたものであり、オーディオ信号の代替信号を低演算量で生成することができるようにするものである。  The present technology has been made in view of such a situation, and makes it possible to generate a substitute signal for an audio signal with a low calculation amount.

本技術の一側面の信号処理装置は、フレーム単位のオーディオ信号のスペクトルの一部を部分スペクトルとして抽出するスペクトル抽出部と、前記スペクトル抽出部により抽出された前記部分スペクトルを逆直交変換する部分逆直交変換部と、前記部分逆直交変換部による逆直交変換の結果得られる部分オーディオ信号に基づいて、前記オーディオ信号の第１の代替信号を生成する第１の代替信号生成部とを備える信号処理装置である。  A signal processing device according to an aspect of the present technology includes a spectrum extraction unit that extracts a part of a spectrum of an audio signal in frame units as a partial spectrum, and a partial inverse that performs inverse orthogonal transform on the partial spectrum extracted by the spectrum extraction unit. Signal processing comprising: an orthogonal transform unit; and a first substitute signal generation unit that generates a first substitute signal of the audio signal based on a partial audio signal obtained as a result of the inverse orthogonal transform by the partial inverse orthogonal transform unit Device.

本技術の一側面の信号処理方法およびプログラムは、本技術の一側面の信号処理装置に対応する。  The signal processing method and program according to one aspect of the present technology correspond to the signal processing device according to one aspect of the present technology.

本技術の一側面においては、フレーム単位のオーディオ信号のスペクトルの一部が部分スペクトルとして抽出され、抽出された前記部分スペクトルが逆直交変換され、逆直交変換の結果得られる部分オーディオ信号に基づいて、前記オーディオ信号の第１の代替信号が生成される。  In one aspect of the present technology, a part of the spectrum of the audio signal in units of frames is extracted as a partial spectrum, the extracted partial spectrum is subjected to inverse orthogonal transformation, and based on the partial audio signal obtained as a result of the inverse orthogonal transformation. , A first alternative signal of the audio signal is generated.

本技術の一側面によれば、オーディオ信号の代替信号を低演算量で生成することができる。  According to one aspect of the present technology, a substitute signal for an audio signal can be generated with a low amount of computation.

本技術を適用した復号装置の第１実施の形態の構成例を示すブロック図である。It is a block diagram which shows the structural example of 1st Embodiment of the decoding apparatus to which this technique is applied.エラー状態変数errStatusの遷移図である。It is a transition diagram of error status variable errStatus.符号化対象のオーディオ信号を示す図である。It is a figure which shows the audio signal to be encoded.長期時間信号x_Pの例を示す図である。Is a diagram showing an example of a long-time signal x_P.図１の復号装置の復号処理を説明するフローチャートである。It is a flowchart explaining the decoding process of the decoding apparatus of FIG.図１の復号装置の復号処理を説明するフローチャートである。It is a flowchart explaining the decoding process of the decoding apparatus of FIG.IMDCT_ｗ変換器により復元されるオーディオ信号x_ｗの例を示す図である。It is a diagram showing an example of an audio signal x_w which is restored by IMDCT_w converter.隠蔽信号の例を示す図である。It is a figure which shows the example of a concealment signal.出力オーディオ信号x_ｏｕｔの例を示す図である。It is a figure which shows the example of the output audio signal_xout .本技術を適用した復号装置の第２実施の形態の構成例を示すブロック図である。It is a block diagram which shows the structural example of 2nd Embodiment of the decoding apparatus to which this technique is applied.符号化データＲ_Ｘと復号されたオーディオ信号を説明する図である。Is a diagram illustrating an audio signal decoded encoded data R_X.図１０の復号装置による復号前処理を説明するフローチャートである。It is a flowchart explaining the pre-decoding process by the decoding apparatus of FIG.コンピュータの一実施の形態の構成例を示す図である。It is a figure which shows the structural example of one Embodiment of a computer.

＜第１実施の形態＞
［復号装置の第１実施の形態の構成例］
図１は、本技術を適用した復号装置の第１実施の形態の構成例を示すブロック図である。<First embodiment>
[Configuration Example of Decoding Device in First Embodiment]
FIG. 1 is a block diagram illustrating a configuration example of a first embodiment of a decoding device to which the present technology is applied.

図１の復号装置１０は、逆多重化器１１、パラメータ解釈器１２、エラー制御器１３、逆量子化器１４、スイッチ１５、IMDCT_ｗ変換器１６、乗算器１７、スイッチ１８、加算器１９、二値変換器２０、低域スペクトル抽出器２１、IMDCT_Ｎ変換器２２、乗算器２３、加算器２４、スイッチ２５、メモリ２６、V/UV検出器２７、ピッチ・利得抽出器２８、隠蔽信号生成器２９、アップサンプリング器３０、乗算器３１、論理積器３２、メモリ３３、極性操作器３４、スイッチ３５、および乗算器３６により構成される。1 includes ademultiplexer 11, aparameter interpreter 12, anerror controller 13, aninverse quantizer 14, aswitch 15, an IMDCT_w converter 16, amultiplier 17, aswitch 18, anadder 19,Binary converter 20, low-frequency spectrum extractor 21, IMDCT_N converter 22,multiplier 23,adder 24,switch 25,memory 26, V /UV detector 27, pitch /gain extractor 28, concealment signal generation Theunit 29, theupsampling unit 30, themultiplier 31, thelogical product 32, thememory 33, thepolarity operator 34, theswitch 35, and themultiplier 36.

復号装置１０は、時間信号であるオーディオ信号の符号化パラメータPARを含むビットストリームＢＳが多重化された符号化データＲ_Ｘを復号する。なお、符号化パラメータPARは、オーディオ信号が比較的短いフレーム長ＬでMDCT（Modified Discrete Cosine Transform）変換され、量子化されたものである。Decoder 10 decodes the encoded data R_X bitstream BS is multiplexed comprising encoding parameters PAR of the audio signal is a time signal. Note that the encoding parameter PAR is an audio signal that has been quantized by MDCT (Modified Discrete Cosine Transform) conversion with a relatively short frame length L.

具体的には、復号装置１０の逆多重化器１１は、外部の符号化装置から伝送路を介して伝送されてくるフレーム単位の符号化データＲ_Ｘを受信する。逆多重化器１１は、受信された符号化データＲ_ＸからビットストリームＢＳを逆多重化（分離）する。また、逆多重化器１１は、符号化データＲ_Ｘが受信でき、かつ、逆多重化の際にエラーが発生していないかどうかを判定する。Specifically,demultiplexer 11 of thedecoding device 10 receives the encoded data R_X units of frames transmitted via the transmission path from the outside of the encoding apparatus. Demultiplexer 11 demultiplexes (separates) the bit stream BS from the received encoded data R_X. Furthermore,demultiplexer 11 may receive encoded data R_X is, and determines whether or not an error has occurred during demultiplexing.

なお、本明細書では、特に断りのない限り、符号化データＲ_Ｘの破損や消失などにより、正常に受信した符号化データＲ_Ｘから情報を取得できない状態をエラーという。In the present specification, unless otherwise specified, due damage or loss of the encoded data R_X, is called error condition that can not obtain information from the encoded data R_X received normally.

逆多重化器１１は、符号化データＲ_Ｘが受信できなかったか、または、逆多重化の際にエラーが発生したと判定した場合、エラーフラグerrFlag_０を1に設定する。一方、逆多重化器１１は、符号化データＲ_Ｘが受信でき、かつ、逆多重化の際にエラーが発生していないと判定した場合、エラーフラグerrFlag_０を0に設定する。逆多重化器１１は、エラーフラグerrFlag_０をエラー制御器１３に供給する。また、逆多重化器１１は、逆多重化の結果得られるビットストリームＢＳをパラメータ解釈器１２(Parameter Parser)に供給する。Demultiplexer 11, whether or not received encoded data R_X is or, if it is determined that an error has occurred during the demultiplexing, an error flag is set ErrFlag₀ to 1. On the other hand, thedemultiplexer 11 can receive encoded data R_X is and if an error is determined not to occur during demultiplexing, error flag ErrFlag₀ is set to 0. Thedemultiplexer 11 supplies an error flag errFlag₀ to theerror controller 13. Further, thedemultiplexer 11 supplies the bit stream BS obtained as a result of the demultiplexing to the parameter interpreter 12 (Parameter Parser).

パラメータ解釈器１２は、逆多重化器１１から供給されるビットストリームＢＳから符号化パラメータPARを分解する。また、パラメータ解釈器１２は、符号化パラメータPARを分解する際にエラーが発生していないかどうかを判定する。パラメータ解釈器１２は、エラーが発生したと判定した場合、エラーフラグerrFlag_１を1に設定する。また、パラメータ解釈器１２は、エラーが発生していないと判定した場合にエラーフラグerrFlag_１を0に設定する。パラメータ解釈器１２は、エラーフラグerrFlag_１をエラー制御器１３に供給する。また、パラメータ解釈器１２は、分解された符号化パラメータPARを逆量子化器１４に供給する。Theparameter interpreter 12 decomposes the encoding parameter PAR from the bit stream BS supplied from thedemultiplexer 11. Further, theparameter interpreter 12 determines whether or not an error has occurred when decomposing the encoding parameter PAR. If theparameter interpreter 12 determines that an error has occurred, it sets the error flag errFlag₁ to 1. Theparameter interpreter 12 sets the error flag errFlag₁ to 0 when it is determined that no error has occurred. The parameter interpreter 12 supplies an error flag errFlag₁ to theerror controller 13. Theparameter interpreter 12 also supplies the decomposed encoding parameter PAR to theinverse quantizer 14.

エラー制御器１３は、エラーフラグerrFlag_０およびエラーフラグerrFlag_１に基づいて、以下の式（１）により、統合エラーフラグerrFlagを決定する。Theerror controller 13 determines the integrated error flag errFlag by the following equation (1) based on the error flag errFlag₀ and the error flag errFlag₁ .

errFlag=errFlag_０|errFlag_１
・・・（１）errFlag = errFlag₀ | errFlag₁
... (1)

式（１）によれば、エラーフラグerrFlag_０またはエラーフラグerrFlag_１が1のとき、統合エラーフラグerrFlagは1となり、エラーフラグerrFlag_０が0でかつエラーフラグerrFlag_１が0のとき統合エラーフラグerrFlagは0となる。According to equation (1), when the error flag errFlag₀ or the error flag errFlag₁ is 1, the integrated error flag errFlag is 1, and when the error flag errFlag₀ is 0 and the error flag errFlag₁ is 0, the integrated error flag errFlag Becomes 0.

なお、以下では、統合エラーフラグerrFlagが1である状態を、復号エラーが発生している状態という。  In the following, a state where the integrated error flag errFlag is 1 is referred to as a state where a decoding error has occurred.

また、エラー制御器１３は、統合エラーフラグerrFlagに基づいてエラー状態変数errStatusを設定し、エラー状態変数errStatusをスイッチ１５と二値変換器２０に供給する。  Theerror controller 13 sets an error state variable errStatus based on the integrated error flag errFlag, and supplies the error state variable errStatus to theswitch 15 and thebinary converter 20.

ここで、エラー状態変数errStatusの設定方法について、図２を参照して説明する。図２は、エラー状態変数errStatusの遷移図である。なお、図２において、円は、円の中に付された数字のエラー状態変数errStatusを表し、矢印近傍に付された数字は、その矢印が表す遷移が行われる場合の統合エラーフラグerrFlagの値を示す。  Here, a setting method of the error state variable errStatus will be described with reference to FIG. FIG. 2 is a transition diagram of the error state variable errStatus. In FIG. 2, the circle represents the numerical error state variable errStatus attached to the circle, and the number attached to the vicinity of the arrow represents the value of the integrated error flag errFlag when the transition represented by the arrow is performed. Indicates.

エラー状態変数errStatusの初期値は0である。図２に示すように、エラー状態変数errStatusが0である場合、統合エラーフラグerrFlagが1に設定されるまで、エラー状態変数errStatusは0のままである。統合エラーフラグerrFlagが1に設定されると、統合エラーフラグerrFlagが連続して1に設定されるたびに、エラー状態変数errStatusが順に1ずつ加算されSまで増加する。エラー状態変数errStatusがSに設定された後も、統合エラーフラグerrFlagが連続して1に設定される場合、エラー状態変数errStatusは、統合エラーフラグerrFlagが1に設定されなくなるまでSとなる。  The initial value of the error status variable errStatus is 0. As shown in FIG. 2, when the error state variable errStatus is 0, the error state variable errStatus remains 0 until the integrated error flag errFlag is set to 1. When the integrated error flag errFlag is set to 1, each time the integrated error flag errFlag is continuously set to 1, the error state variable errStatus is incremented by 1 in order and increased to S. If the integrated error flag errFlag is continuously set to 1 even after the error status variable errStatus is set to S, the error status variable errStatus remains S until the integrated error flag errFlag is no longer set to 1.

また、エラー状態変数errStatusが1以上である場合、即ち、統合エラーフラグerrFlagが1回以上連続して1に設定された場合、統合エラーフラグerrFlagが0に設定されると、エラー状態変数errStatusは-1に設定される。そして、統合エラーフラグerrFlagが再度0に設定されると、エラー状態変数errStatusは-2に設定され、さらに再度0に設定されると、エラー状態変数errStatusは0となる。  Also, if the error status variable errStatus is 1 or more, that is, if the integrated error flag errFlag is set to 1 continuously, the error status variable errStatus is set when the integrated error flag errFlag is set to 0. Set to -1. When the integrated error flag errFlag is set to 0 again, the error status variable errStatus is set to -2, and when it is set to 0 again, the error status variable errStatus is set to 0.

一方、エラー状態変数errStatusが0より小さい場合、即ち、統合エラーフラグerrFlagが1回以上1に設定された後、１回または２回連続して0に設定された場合、再び統合エラーフラグerrFlagが1に設定されると、エラー状態変数errStatusは1に設定される。その後、統合エラーフラグerrFlagが連続して1に設定されると、連続するたびに、エラー状態変数errStatusは順にSまで増加する。  On the other hand, if the error status variable errStatus is smaller than 0, that is, if the integration error flag errFlag is set to 1 once or more and then set to 0 once or twice in succession, the integration error flag errFlag is set again. If set to 1, the error status variable errStatus is set to 1. Thereafter, when the integrated error flag errFlag is continuously set to 1, the error state variable errStatus is sequentially increased to S each time it is consecutive.

以上により、1回も統合エラーフラグerrFlagが1に設定されていないか、または、統合エラーフラグerrFlagが1に設定された後、3回以上連続して0に設定された場合、エラー状態変数errStatusは0になる。一方、統合エラーフラグerrFlagが1回以上連続して1に設定された場合、エラー状態変数errStatusは1以上となる。また、統合エラーフラグerrFlagが1に設定された後、3回未満連続して0に設定された場合、エラー状態変数errStatusは0より小さくなる。  As a result, if the integration error flag errFlag has never been set to 1, or if the integration error flag errFlag has been set to 1 continuously after being set to 0, the error status variable errStatus Becomes 0. On the other hand, when the integrated error flag errFlag is set to 1 continuously one or more times, the error state variable errStatus is 1 or more. If the integrated error flag errFlag is set to 1 and then set to 0 continuously for less than three times, the error state variable errStatus becomes smaller than 0.

逆量子化器１４は、パラメータ解釈器１２から供給される符号化パラメータPARを逆量子化してスペクトル信号X_Ｗ[i]（0≦i≦L-1）を復元し、スイッチ１５に供給する。ここで、スペクトル信号のフレーム長Ｌは、IMDCT_Ｗ変換器１６の逆MDCT変換における変換ブロック長に等しい。Theinverse quantizer 14 inversely quantizes the encoding parameter PAR supplied from theparameter interpreter 12 to restore the spectrum signal X_W [i] (0 ≦ i ≦ L−1) and supplies it to theswitch 15. Here, the frame length L of the spectrum signal is equal to the transform block length in the inverse MDCT transform of the IMDCT_W converter 16.

スイッチ１５は、エラー制御器１３から供給されるエラー状態変数errStatusに応じて、逆量子化器１４から供給されるスペクトル信号X_Ｗ、または、スイッチ３５から供給される変形スペクトル信号X_ｗ’[i](0≦i≦L-1)を選択し、IMDCT_ｗ変換器１６に供給する。Theswitch 15 corresponds to the error state variable errStatus supplied from theerror controller 13, or the spectrum signal X_W supplied from theinverse quantizer 14 or the modified spectrum signal X_w ′ [i supplied from the switch 35. ] (0 ≦ i ≦ L−1) is selected and supplied to the IMDCT_w converter 16.

具体的には、スイッチ１５は、エラー状態変数errStatusが0以下である場合、スペクトル信号X_ＷをIMDCT_ｗ変換器１６、低域スペクトル抽出器２１、およびメモリ３３に供給する。一方、エラー状態変数errStatusが0より大きい場合、変形スペクトル信号X_ｗ'をIMDCT_ｗ変換器１６、低域スペクトル抽出器２１、およびメモリ３３に供給する。Specifically, theswitch 15, when the error state variable errStatus is less than or equal to 0, and supplies the spectral signal X_W IMDCT_w converter 16, the low band spectrum extractor 21, and amemory 33. On the other hand, when the error state variable errStatus is larger than 0, the modified spectrum signal X_w ′ is supplied to the IMDCT_w converter 16, the low-frequency spectrum extractor 21, and thememory 33.

IMDCT_ｗ変換器１６は、通常の広帯域用の逆MDCT変換器である。IMDCT_ｗ変換器１６は、スイッチ１５から供給されるスペクトル信号X_Ｗまたは変形スペクトル信号X_ｗ'を逆MDCT変換し、時間信号であるオーディオ信号x_ｗ[i](0≦i≦L-1)を復元する。IMDCT_ｗ変換器１６は、復元されたオーディオ信号x_ｗを乗算器１７に供給するとともに、スイッチ１８に供給する。The IMDCT_w converter 16 is a normal wideband inverse MDCT converter. The IMDCT_w converter 16 performs inverse MDCT conversion on the spectrum signal_XW or the modified spectrum signal_Xw ′ supplied from theswitch 15, and the audio signal_xw [i] (0 ≦ i ≦ L−1) which is a time signal. To restore. The IMDCT_w converter 16 supplies the restored audio signal x_w to themultiplier 17 and also supplies it to theswitch 18.

乗算器１７は、以下の式（２）により、IMDCT_ｗ変換器１６から供給されるオーディオ信号x_ｗに、エラー状態変数errStatusによって異なる補間係数g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}’（0≦i≦L-1）を乗算し、乗算の結果得られるオーディオ信号x_ｗ'[i](0≦i≦L-1)をスイッチ１８に供給する。Themultiplier 17, by the following equation (2), IMDCT_w converter 16 into an audio signal_{x w} which is supplied from the interpolation coefficients differ by theerror state variables^{_{errStatus g i (errStatus) '(}} 0 ≦ i ≦ L-1 ) And the audio signal x_w ′ [i] (0 ≦ i ≦ L−1) obtained as a result of the multiplication is supplied to theswitch 18.

x_ｗ'[i]=g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}’・x_ｗ[i]（0≦i≦L-1）
・・・（２）^{_{x w '[i] = g}} i (errStatus)' · x w [i] (0 ≦ i ≦ L-1)
... (2)

スイッチ１８は、論理積器３２から供給される演算値に基づいて、IMDCT_ｗ変換器１６から供給されるオーディオ信号x_ｗ、または、乗算器１７から供給されるオーディオ信号x_ｗ'を選択し、加算器１９に供給する。具体的には、スイッチ１８は、演算値が0である場合、オーディオ信号x_ｗを加算器１９に供給し、演算値が1である場合、オーディオ信号x_ｗ'を加算器１９に供給する。Switch 18, based on the calculated value supplied from thelogical product unit 32, an audio signal x_w supplied from the IMDCT_w converter_16, or to select an audio signal x_{w 'supplied} from themultiplier 17, This is supplied to theadder 19. Specifically, theswitch 18 supplies the audio signal_xw to theadder 19 when the calculated value is 0, and supplies the audio signal_xw ′ to theadder 19 when the calculated value is 1.

加算器１９は、スイッチ１８から供給されるオーディオ信号x_ｗまたはオーディオ信号x_ｗ'と、乗算器３６から供給される乗算信号を加算し、加算の結果得られる信号を、出力オーディオ信号x_ｏｕｔとして出力する。Theadder 19 adds the audio signal_xw or the audio signal_xw ′ supplied from theswitch 18 and the multiplication signal supplied from themultiplier 36, and uses the signal obtained as a result of the addition as an output audio signal_xout. Output.

例えば、スイッチ１８からオーディオ信号x_ｗ'が供給される場合、加算器１９は、以下の式（３）により、J番目のフレームのビットストリームＢＳに対応する出力オーディオ信号x_ｏｕｔ[J・L+i]を生成する。For example, when the audio signal x_w ′ is supplied from theswitch 18, theadder 19 outputs the output audio signal x_out [J · L +] corresponding to the bit stream BS of the J-th frame according to the following equation (3). i].

x_ｏｕｔ[J・L+i]=g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}・cx_Ｗ[i]＋x_ｗ'[i]（0≦i≦L-1）
・・・（３）x_out [J · L + i] = g_i^(errStatus) · cx_W [i] + x_w '[i] (0 ≦ i ≦ L−1)
... (3)

なお、式（３）において、g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}・cx_Ｗ[i]は、乗算器３６から供給される乗算信号である。In Equation (3), g_i^(errStatus) · cx_W [i] is a multiplication signal supplied from themultiplier 36.

二値変換器２０は、エラー制御器１３から供給されるエラー状態変数errStatusが0である場合、変数errBinaryを0に設定する。一方、二値変換器２０は、エラー状態変数errStatusが0以外である場合変数errBinaryを1に設定する。二値変換器２０は、変数errBinaryを論理積器３２に供給する。  When the error state variable errStatus supplied from theerror controller 13 is 0, thebinary converter 20 sets the variable errBinary to 0. On the other hand, thebinary converter 20 sets the variable errBinary to 1 when the error state variable errStatus is other than 0. Thebinary converter 20 supplies the variable errBinary to thelogical product unit 32.

低域スペクトル抽出器２１は、スイッチ１５から供給されるスペクトル信号X_Ｗまたは変形スペクトル信号X_ｗ’の低域成分を、低域スペクトル信号X_Ｗ[i](0≦i≦L/M-1)として抽出する。そして、低域スペクトル抽出器２１は、以下の式（４）により、抽出された低域スペクトル信号X_Ｗに所定の重み係数w_ｉを掛けることで狭帯域スペクトル信号X_Ｎ[i](0≦i≦L/M-1)を生成し、IMDCT_Ｎ変換器２２に供給する。The low-frequency spectrum extractor 21 converts the low-frequency component of the spectrum signal_XW or the modified spectrum signal_Xw ′ supplied from theswitch 15 into the low-frequency spectrum signal X_W [i] (0 ≦ i ≦ L / M−1). ). Then, the low-frequency spectrum extractor 21 multiplies the extracted low-frequency spectrum signal_XW by a predetermined weighting coefficient w_i by the following equation (4), thereby narrow-band spectrum signal X_N [i] (0 ≦ i ≦ L / M−1) is generated and supplied to the IMDCT_N converter 22.

X_Ｎ[i]=w_ｉX_ｗ[i](0≦i≦L/M-1)
・・・（４）_{X N [i] = w i} X w [i] (0 ≦ i ≦ L / M-1)
... (4)

なお、重み係数w_ｉは、例えば、高域であるL/M-1付近で0に向けて、周波数が高いほど減少していき、それ以外は1となる係数である。Note that the weighting coefficient w_i is a coefficient that decreases as the frequency increases toward 0 in the vicinity of L / M−1, which is a high frequency, and becomes 1 otherwise.

IMDCT_Ｎ変換器２２は、変換ブロック長がIMDCT_Ｗ変換器１６における変換ブロック長Ｌの1/Mである狭帯域用の逆MDCT変換器であり、部分逆直交変換部として機能する。IMDCT_Ｎ変換器２２は、低域スペクトル抽出部２１から供給される狭帯域スペクトル信号X_Ｎに対して逆MDCT変換を行う。これにより、スペクトル信号X_Ｗまたは変形スペクトル信号X_ｗ’に対応する時間信号をダウンサンプリングした時間信号であるオーディオ信号x_Ｎ[i](0≦i≦L/M-1)が生成される。IMDCT_Ｎ変換器２２は、このオーディオ信号x_Ｎを乗算器２３およびスイッチ２５に供給する。The IMDCT_N converter 22 is a narrowband inverse MDCT converter whose transform block length is 1 / M of the transform block length L in the IMDCT_W converter 16, and functions as a partial inverse orthogonal transform unit. IMDCT_N converter 22 performs inverse MDCT transform for narrowband spectrum signal X_N supplied from the low-band spectrum extracting section 21. As a result, an audio signal x_N [i] (0 ≦ i ≦ L / M−1), which is a time signal obtained by down-sampling the time signal corresponding to the spectrum signal_XW or the modified spectrum signal X_w ′, is generated. IMDCT_N converter 22 supplies the audio signal_{x N} inmultiplier 23 and aswitch 25.

乗算器２３は、以下の式（５）により、IMDCT_Ｎ変換器２２から供給されるオーディオ信号x_Ｎに、エラー状態変数errStatusによって異なる補間係数h_ｉ^{(ｅｒｒＳｔａｔｕｓ)}'を乗算し、乗算信号x_Ｎ'[i](0≦i≦L/M-1)を加算器２４に供給する。Themultiplier 23, by the following equation (5), the audio signal_{x N} supplied from the IMDCT_N converter 22, is multiplied by a different interpolation coefficients_{h i}^(errStatus) 'by the error state variables ErrStatus, multiplication signal_{x N} '[i] (0 ≦ i ≦ L / M−1) is supplied to theadder 24.

x_Ｎ'[i]=h_ｉ^{(ｅｒｒＳｔａｔｕｓ)}'・x_Ｎ[i](0≦i≦L/M-1)
・・・（５）_{x N '[i] = h} i (errStatus)' · x N [i] (0 ≦ i ≦ L / M-1)
... (5)

加算器２４は、以下の式（６）により、乗算器２３から供給される乗算信号と、乗算器３１から供給される乗算信号を加算し、その結果得られる変形狭帯域信号x_Ｎ''[i](0≦i≦L/M-1)をスイッチ２５に供給する。Theadder 24 adds the multiplication signal supplied from themultiplier 23 and the multiplication signal supplied from themultiplier 31 according to the following equation (6), and the resulting modified narrowband signal x_N ″ [ i] (0 ≦ i ≦ L / M−1) is supplied to theswitch 25.

x_Ｎ''[i]=h_ｉ^{(ｅｒｒＳｔａｔｕｓ)}・cx_Ｎ[i]+ x_Ｎ'[i](0≦i≦L/M-1)
・・・（６）_{x N '' [i] =} h i (errStatus) · cx N [i] + x N '[i] (0 ≦ i ≦ L / M-1)
... (6)

なお、式（６）において、h_ｉ^{(ｅｒｒＳｔａｔｕｓ)}・cx_Ｎ[i]は、乗算器３１から供給される乗算信号である。In Expression (6), h_i^(errStatus) · cx_N [i] is a multiplication signal supplied from themultiplier 31.

スイッチ２５は、論理積器３２から供給される演算値に応じて、IMDCT_Ｎ変換器２２から供給されるオーディオ信号x_Ｎまたは加算器２４から供給される変形狭帯域信号x_Ｎ''を選択し、メモリ２６に供給する。具体的には、スイッチ２５は、論理積器３２から供給される演算値が0である場合、IMDCT_Ｎ変換器２２から供給されるオーディオ信号x_Ｎをメモリ２６に供給する。一方、論理積器３２から供給される演算値が1である場合、スイッチ２５は、加算器２４から供給される変形狭帯域信号x_Ｎ''をメモリ２６に供給する。Switch 25, thelogical product circuit 32 in accordance with the calculated value supplied from, select IMDCT_N transducer audio signals supplied from the 22 x_N or modified narrowband signal x_N supplied from theadder 24_'' To thememory 26. Specifically, theswitch 25, if the calculated value supplied from thelogical product circuit 32 is zero, and supplies the audio signal x_N supplied from the IMDCT_N converter 22 into thememory 26. On the other hand, when the operation value supplied from the ANDcircuit 32 is 1, theswitch 25 supplies the modified narrowband signal x_N ″ supplied from theadder 24 to thememory 26.

メモリ２６は、記憶部として機能し、以下の式（７）または式（８）により、スイッチ２５から供給される直近のNフレーム分のオーディオ信号x_Ｎまたは変形狭帯域信号x_Ｎ''を、長期時間信号x_P[i](0≦i≦N・L/M-1)として保持する。Memory 26 functions as the storage unit, the following equation (7) or formula (8), the most recent N frames of the audio signal x_N or modified narrowband signal x_{N ''} supplied from theswitch 25, Hold as a long-term signal x_P [i] (0 ≦ i ≦ N · L / M−1).

x_P[i]=x_P[i+L/M]（0≦i≦（N-1）L/M−１）
x_P[i+(N-1)L/M-1]=x_Ｎ[i]（0≦i≦L/M−１）
・・・（７）x_P [i] = x_P [i + L / M] (0 ≦ i ≦ (N−1) L / M−1)
_{x P [i + (N-} 1) L / M-1] = x N [i] (0 ≦ i ≦ L / M-1)
... (7)

x_P[i]=x_P[i+L/M]（0≦i≦（N-1）L/M−１）
x_P[i+(N-1)L/M-1]=x_Ｎ''[i]（0≦i≦L/M−１）
・・・（８）x_P [i] = x_P [i + L / M] (0 ≦ i ≦ (N−1) L / M−1)
_{x P [i + (N-} 1) L / M-1] = x N '' [i] (0 ≦ i ≦ L / M-1)
... (8)

V/UV検出器２７は、メモリ２６から長期時間信号x_Pを読み出す。V/UV検出器２７は、判定部として機能し、長期時間信号x_Pを分析し、長期時間信号に対応する音声が、有声音（V）であるか、または、無声音(UV)であるかを検出する。V/UV検出器２７は、長期時間信号に対応する音声が有声音であることを検出した場合、有声音フラグvuvFlagを1に設定し、無声音であることを検出した場合、有声音フラグvuvFlagを0に設定する。V/UV検出器２７は、有声音フラグvuvFlagをピッチ・利得抽出器２８、論理積器３２、およびスイッチ３５に供給する。V /UV detector 27 reads the long time signal x_P from thememory 26. Or V /UV detector 27 functions as a determination unit analyzes the long time signal x_P, audio corresponding to the long time signal, whether it is voiced (V), or a unvoiced (UV) Is detected. The V /UV detector 27 sets the voiced sound flag vuvFlag to 1 when detecting that the sound corresponding to the long-time signal is a voiced sound, and sets the voiced sound flag vuvFlag to 1 when detecting that it is an unvoiced sound. Set to 0. The V /UV detector 27 supplies the voiced sound flag vuvFlag to the pitch /gain extractor 28, the ANDcircuit 32, and theswitch 35.

ピッチ・利得抽出器２８は、メモリ２６から長期時間信号x_Pを読み出す。ピッチ・利得抽出器２８は、ピッチ抽出部として機能し、V/UV検出器２７から供給される有声音フラグvuvFlagに基づいて、長期時間信号x_Pからピッチ周期pitchおよびピッチ利得pch_gを抽出する。具体的には、有声音フラグvuvFlagが1である場合、ピッチ・利得抽出器２８は、ピッチ周期pitchおよびピッチ利得pch_gを抽出し、有声音フラグvuvFlagが0である場合、ピッチ周期pitchおよびピッチ利得pch_gを0とする。ピッチ・利得抽出器２８は、ピッチ周期pitchおよびピッチ利得pch_gを隠蔽信号生成器２９に供給する。The pitch /gain extractor 28 reads the long time signal x_P from thememory 26.Pitch gain extractor 28 functions as a pitch extraction unit, based on the voiced flag vuvFlag supplied from V /UV detector 27, extracts the pitch period pitch and pitch gain pch_g from a long time signal x_P. Specifically, when the voiced sound flag vuvFlag is 1, the pitch /gain extractor 28 extracts the pitch period pitch and pitch gain pch_g, and when the voiced sound flag vuvFlag is 0, the pitch period pitch and pitch gain. Set pch_g to 0. The pitch /gain extractor 28 supplies the pitch period pitch and the pitch gain pch_g to theconcealment signal generator 29.

隠蔽信号生成器２９とアップサンプリング器３０は、第１の代替信号生成部として機能する。隠蔽信号生成器２９は、メモリ２６から長期時間信号x_Pを読み出す。隠蔽信号生成器２９は、ピッチ・利得抽出器２８から供給されるピッチ周期pitchおよびピッチ利得pch_gに基づいて、以下の式（９）により、長期時間信号x_Ｐから隠蔽信号cx_Ｎ[i](0≦i≦L/M−1)を生成する。隠蔽信号生成器２９は、隠蔽信号cx_Ｎをアップサンプリング器３０と乗算器３１に供給する。Theconcealment signal generator 29 and theupsampler 30 function as a first alternative signal generation unit. Theconcealment signal generator 29 reads the long time signal x_P from thememory 26.Concealment signal generator 29, based on the pitch period pitch and pitch gain pch_g supplied from the pitch-gain extractor 28, by the following equation (9), long time signal x_P from the concealment signal cx_{N [i]} ( 0 ≦ i ≦ L / M−1) is generated. Theconcealment signal generator 29 supplies the concealment signal cx_N to theupsampler 30 and themultiplier 31.

cx_Ｎ＝pch_g・x_Ｐ[N・L/M−pitch+i]（0≦i≦L/M−１）
・・・（９）cx_N = pch_g · x_P [N · L / M−pitch + i] (0 ≦ i ≦ L / M−1)
... (9)

アップサンプリング器３０は、隠蔽信号生成器２９から供給される隠蔽信号cx_Ｎ[i](0≦i≦L/M−1)をM倍にアップサンプリングし、アップサンプリングされた隠蔽信号cx_Ｗ[i](0≦i≦L-1)（第１の代替信号）をスイッチ３５に供給する。Theupsampler 30 upsamples the concealment signal cx_N [i] (0 ≦ i ≦ L / M−1) supplied from the concealment signal generator 29 M times, and the upsampled concealment signal cx_W [ i] (0 ≦ i ≦ L−1) (first substitute signal) is supplied to theswitch 35.

乗算器３１は、隠蔽信号生成器２９から供給される隠蔽信号cx_Ｎに、エラー状態変数errStatusによって異なる補間係数h_ｉ^{（ｅｒｒＳｔａｔｕｓ）}(0≦i≦L/M−1)を乗算し、乗算信号を加算器２４に供給する。Themultiplier 31 multiplies the concealment signal cx_N supplied from theconcealment signal generator 29 by an interpolation coefficient h_i^(errStatus) (0 ≦ i ≦ L / M−1) that varies depending on the error state variable errStatus. Is supplied to theadder 24.

論理積器３２は、二値変換器２０から供給される変数errBinaryと、V/UV検出器２７から供給される有声音フラグvuvFlagの論理積を演算し、その結果得られる演算値をスイッチ１８およびスイッチ２５に供給する。即ち、論理積器３２は、変数errBinaryまたは有声音フラグvuvFlagの少なくとも一方が0である場合、演算値として0をスイッチ１８およびスイッチ２５に供給し、変数errBinaryと有声音フラグvuvFlagの両方が1である場合、演算値として1をスイッチ１８およびスイッチ２５に供給する。  The ANDcircuit 32 calculates the logical product of the variable errBinary supplied from thebinary converter 20 and the voiced sound flag vuvFlag supplied from the V /UV detector 27, and sets the calculated value as theswitch 18 and Supply to switch 25. That is, when at least one of the variable errBinary or the voiced sound flag vuvFlag is 0, the ANDcircuit 32supplies 0 as the operation value to theswitch 18 and theswitch 25, and both the variable errBinary and the voiced sound flag vuvFlag are 1. In some cases, 1 is supplied to theswitch 18 and theswitch 25 as a calculation value.

メモリ３３は、スイッチ１５から供給されるスペクトル信号X_Ｗまたは変形スペクトル信号X_ｗ’を記憶する。Thememory 33 stores the spectrum signal_XW or the modified spectrum signal_Xw ′ supplied from theswitch 15.

極性操作器３４は、メモリ３３に記憶されている、直近のエラー状態変数errStatusが0以下である場合のスペクトル信号X_Ｗを、スペクトル信号X_Ｗ^（Ｐ）[i](0≦i≦L-1)として読み出す。極性操作器３４は、第２の代替信号生成部として機能し、以下の式（１０）により、スペクトル信号X_Ｗ^（Ｐ）の極性を操作して、変形スペクトル信号X_ｗ’[i](0≦i≦L-1)を生成する。そして、極性操作器３４は、変形スペクトル信号X_ｗ’（第２の代替信号）をスイッチ３５に供給する。Thepolarity controller 34 stores the spectrum signal X_W stored in thememory 33 when the latest error state variable errStatus is 0 or less as the spectrum signal X_W^(P) [i] (0 ≦ i ≦ L− Read as 1). Thepolarity controller 34 functions as a second alternative signal generation unit, and operates the polarity of the spectrum signal X_W^(P) by the following equation (10) to change the modified spectrum signal X_w ′ [i] (0 ≦ i ≦ L-1) is generated. Then, thepolarity controller 34 supplies the deformed spectrum signal X_w ′ (second alternative signal) to theswitch 35.

X_ｗ’[i]=rnd(-1,1)X_Ｗ^（Ｐ）[i](0≦i≦L-1)
・・・（１０）X_w '[i] = rnd (-1,1) X_W^(P) [i] (0 ≦ i ≦ L-1)
... (10)

なお、式（１０）において、rnd(-1,1)は、-1または1をランダムにとる関数である。変形スペクトル信号X_ｗ’の演算は、式（１０）の演算に限定されない。In equation (10), rnd (-1,1) is a function that takes -1 or 1 at random. The calculation of the deformed spectrum signal X_w ′ is not limited to the calculation of Expression (10).

スイッチ３５は、出力部として機能する。スイッチ３５は、V/UV検出部２７から供給される有声音フラグvuvFlagに基づいて、アップサンプリング器３０からの隠蔽信号cx_Ｗを乗算器３６に供給するか、または、極性操作器３４からの変形スペクトル信号X_ｗ’をスイッチ１５に供給する。具体的には、スイッチ３５は、有声音フラグvuvFlagが1である場合、隠蔽信号cx_Ｗを乗算器３６に供給し、有声音フラグvuvFlagが0である場合、極性操作器３４からの変形スペクトル信号X_ｗ’をスイッチ１５に供給する。Theswitch 35 functions as an output unit. Theswitch 35 supplies the concealment signal cx_W from theupsampler 30 to themultiplier 36 based on the voiced sound flag vuvFlag supplied from the V /UV detection unit 27, or a modification from thepolarity controller 34. The spectrum signal X_w ′ is supplied to theswitch 15. Specifically, when the voiced sound flag vuvFlag is 1, theswitch 35 supplies the concealed signal cx_W to themultiplier 36, and when the voiced sound flag vuvFlag is 0, the modified spectrum signal from thepolarity operator 34 is supplied. X_w ′ is supplied to theswitch 15.

乗算器３６は、スイッチ３５から供給される隠蔽信号cx_Ｗに、エラー状態変数errStatusによって異なる補間係数g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}[i](0≦i≦L-1)を乗算し、乗算信号を加算器１９に供給する。なお、補間係数g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}は、エラー状態変数errStatusが0であるとき0である。Themultiplier 36 multiplies the concealment signal cx_W supplied from theswitch 35 by an interpolation coefficient g_i^(errStatus) [i] (0 ≦ i ≦ L−1) that differs depending on the error state variable errStatus, and adds the multiplication signal. Supply to thecontainer 19. The interpolation coefficient g_i^(errStatus) is 0 when the error state variable errStatus is 0.

[ピッチ利得の算出方法]
図３は、符号化データＲ_Ｘを伝送してくる符号化装置における符号化対象のオーディオ信号を示す図である。[Pitch gain calculation method]
Figure 3 is a diagram showing an audio signal to be encoded in the encoder transmitted along the coded data R_X.

なお、図３において、横軸は、サンプル単位の時刻を表し、縦軸は、オーディオ信号の振幅を表す。このことは、後述する図４および図７乃至図９においても同様である。また、図３の例では、サンプリング周波数は48kHzである。  In FIG. 3, the horizontal axis represents time in sample units, and the vertical axis represents the amplitude of the audio signal. This also applies to FIGS. 4 and 7 to 9 described later. In the example of FIG. 3, the sampling frequency is 48 kHz.

図３に示すオーディオ信号が符号化された符号化データＲ_Ｘを復号する場合に、図３の区間（Ａ）に対応するブロックで復号エラーが発生している場合、区間（Ａ）だけでなく、逆MDCT変換において区間（Ａ）とオーバーラップされる、区間（Ａ）の直後のブロックに対応する区間（Ｂ）に対しても、復号エラーの隠蔽を行う必要がある。When the audio signal shown in FIG. 3 decodes the encoded data encoded R_X, when a decoding error in a block corresponding to the section of FIG. 3 (A) is occurring, not only the section (A) Also, it is necessary to conceal the decoding error for the section (B) corresponding to the block immediately after the section (A), which overlaps the section (A) in the inverse MDCT conversion.

図４は、図３の区間（Ａ）に対応するブロックに対して、メモリ２６に記憶される長期時間信号x_Pの例を示す図である。4, for the block corresponding to the section of FIG. 3 (A), is a diagram showing an example of a long-time signal x_P stored in thememory 26.

なお、図４の例では、Mは4である。即ち、長期時間信号x_Pのサンプリング周波数は、12kHzである。Note that M is 4 in the example of FIG. That is, the sampling frequency of the long time signal x_P is 12 kHz.

図３の区間（Ａ）に対応するブロックでエラーが検出され、有声音フラグvuvFlagが1である場合、ピッチ・利得抽出器２８は、図４に示す長期時間信号x_Pの周期性からピッチ周期pitchを抽出する。An error is detected in the corresponding block to the section (A) of FIG. 3, when the voiced sound flag vuvFlag is 1,pitch gain extractor 28, the pitch period from the period of the long-time signal x_P shown in FIG. 4 Extract pitch.

また、ピッチ・利得抽出器２８は、長期時間信号x_Ｐの直近サンプルから1ピッチ周期の区間である区間（Ｄ）と、区間（Ｄ）より前の1ピッチ周期の区間である区間（Ｃ）の振幅比を、以下の式（１１）により、ピッチ利得pch_gとして求める。The pitch-gain extractor 28, long time signal x_P most recent sample from one pitch period interval in which interval (D) and the section (D) than the previous one pitch period interval in which interval (C) Is obtained as pitch gain pch_g by the following equation (11).

[復号装置の処理の説明]
図５および図６は、図１の復号装置１０の復号処理を説明するフローチャートである。この復号処理は、例えば、外部の符号化装置から伝送路を介してフレーム単位の符号化データＲ_Ｘが伝送されてきたとき、開始される。[Description of Decryption Device Processing]
5 and 6 are flowcharts for explaining the decoding process of thedecoding device 10 of FIG. The decoding process is, for example, when the encoded data R_X frame units via a transmission path from the outside of the encoding apparatus have been transmitted, is started.

ステップＳ１１において、逆多重化器１１は、フレーム単位の符号化データＲ_Ｘを受信して、その符号化データＲ_ＸからビットストリームＢＳを逆多重化し、パラメータ解釈器１２に供給する。In step S11, thedemultiplexer 11 receives the encoded data R_X in units of frames, demultiplexes the bit stream BS from the encoded data R_X, and supplies theparameter interpreter 12.

ステップＳ１２において、逆多重化器１１は、符号化データＲ_Ｘが受信でき、かつ、逆多重化の際にエラーが発生していないかどうかを判定する。ステップＳ１２で符号化データＲ_Ｘが受信でき、かつ、逆多重化の際にエラーが発生していないと判定された場合、逆多重化器１１は、エラーフラグerrFlag_０を0に設定し、エラー制御器１３に供給する。In step S12, thedemultiplexer 11 can receive the encoded data R_X, and determines whether or not an error has occurred during demultiplexing. Encoded data R_X can be received in step S12, and, if it is determined that the error has not occurred during the demultiplexing, thedemultiplexer 11 sets theerror flag ErrFlag₀ 0 Error This is supplied to thecontroller 13.

そして、ステップＳ１３において、パラメータ解釈器１２は、逆多重化器１１から供給されるビットストリームＢＳから符号化パラメータPARを分解し、逆量子化器１４に供給する。  In step S <b> 13, theparameter interpreter 12 decomposes the encoding parameter PAR from the bit stream BS supplied from thedemultiplexer 11 and supplies it to theinverse quantizer 14.

ステップＳ１４において、パラメータ解釈器１２は、符号化パラメータPARを分解する際にエラーが発生していないかどうかを判定する。ステップＳ１４で符号化パラメータPARを分解する際にエラーが発生していないと判定された場合、パラメータ解釈器１２は、エラーフラグerrFlag_１を0に設定してエラー制御器１３に供給する。これにより、エラー制御器１３は、上述した式（１）にしたがって、統合エラーフラグerrFlagを0に設定する。In step S14, theparameter interpreter 12 determines whether or not an error has occurred when decomposing the encoding parameter PAR. If it is determined in step S14 that no error has occurred when decomposing the encoding parameter PAR, theparameter interpreter 12 sets the error flag errFlag₁ to 0 and supplies it to theerror controller 13. Thereby, theerror controller 13 sets the integrated error flag errFlag to 0 according to the above-described equation (1).

そして、ステップＳ１５において、逆量子化器１４は、パラメータ解釈器１２から供給される符号化パラメータPARを逆量子化してスペクトル信号X_Ｗを復元し、スイッチ１５に供給する。このとき、エラーフラグerrFlag_０とエラーフラグerrFlag_１は0であり、エラー状態変数errStatusは0以下であるため、スイッチ１５は、スペクトル信号X_ＷをIMDCT_ｗ変換器１６、低域スペクトル抽出器２１、およびメモリ３３に供給する。Then, in step S15, theinverse quantizer 14, restores the spectral signal X_W inversely quantizes the encoding parameters PAR supplied from theparameter interpreter 12 is supplied to theswitch 15. In this case, error flag ErrFlag₀ and the error flag ErrFlag₁ is 0, since the error state variable errStatus is 0 or less, theswitch 15, IMDCT_w converter 16 spectral signal X_W, low band spectrum extractor 21, And supplied to thememory 33.

ステップＳ１６において、メモリ３３は、スイッチ１５から供給されるスペクトル信号X_Ｗを記憶する。In step S16, thememory 33 stores the spectral signal_{X W} supplied from theswitch 15.

ステップＳ１７において、IMDCT_ｗ変換器１６は、スイッチ１５から供給されるスペクトル信号X_Ｗに対して逆MDCT変換を行い、時間信号であるオーディオ信号x_ｗを復元する。そして、IMDCT_ｗ変換器１６は、オーディオ信号x_ｗを乗算器１７とスイッチ１８に供給する。In step S17, IMDCT_w converter 16 performs an inverse MDCT transformation on the spectral signal X_W supplied from theswitch 15, to restore the audio signal x_w which is a time signal. Then, the IMDCT_w converter 16 supplies the audio signal x_w to themultiplier 17 and theswitch 18.

ステップＳ１８において、低域スペクトル抽出器２１は、スイッチ１５から供給されるスペクトル信号X_Ｗの低域成分を、低域スペクトル信号X_Ｗとして抽出する。そして、低域スペクトル抽出器２１は、上述した式（４）により、抽出された低域スペクトル信号X_Ｗに所定の重み係数w_ｉを掛けることで狭帯域スペクトル信号X_Ｎを生成し、IMDCT_Ｎ変換器２２に供給する。In step S18, the low band spectrum extractor 21, a low-frequency component of the spectral signal X_W supplied from theswitch 15 is extracted as the low band spectrum signal X_W. Then, a low frequency band spectrum extractor 21, by the above-mentioned formula (4), extracted to produce a low-band spectrum signal X_W narrowband spectrum signal by multiplying a predetermined weight coefficient w_i to X_N, IMDCT_N This is supplied to the converter 22.

ステップＳ１９において、IMDCT_Ｎ変換器２２は、低域スペクトル抽出部２１から供給される狭帯域スペクトル信号X_Ｎに対して逆MDCT変換を行うことにより、ダウンサンプリングされた時間信号であるオーディオ信号x_Ｎを生成する。IMDCT_Ｎ変換器２２は、そのオーディオ信号x_Ｎを乗算器２３およびスイッチ２５に供給する。In step S19, IMDCT_N converter 22, by performing an inverse MDCT transform for narrowband spectrum signal X_N supplied from the low-band spectrum extracting unit 21, an audio signal x_N is downsampled time signal Is generated. IMDCT_N converter 22 supplies the audio signal_{x N} inmultiplier 23 and aswitch 25.

ステップＳ２０において、エラー制御器１３は、エラー状態変数errStatusが0であるかどうかを判定する。統合エラーフラグerrFlagが0であるので、ステップＳ２０でエラー状態変数errStatusが0であると判定された場合、エラー制御器１３は、エラー状態変数errStatusを0のままとし、スイッチ１５と二値変換器２０に供給する。  In step S20, theerror controller 13 determines whether or not the error state variable errStatus is 0. Since the integrated error flag errFlag is 0, if it is determined in step S20 that the error state variable errStatus is 0, theerror controller 13 keeps the error state variable errStatus at 0, theswitch 15 and the binary converter. 20 is supplied.

これにより、二値変換器２０は、変数errBinaryとして0を論理積器３２に供給し、論理積器３２は、演算値として0をスイッチ１８およびスイッチ２５に供給する。その結果、スイッチ２５は、IMDCT_Ｎ変換器２２から供給されるオーディオ信号x_Ｎをメモリ２６に供給する。また、スイッチ１８は、IMDCT_ｗ変換器１６から供給されるオーディオ信号x_ｗを加算器１９に供給する。Thereby, thebinary converter 20supplies 0 as the variable errBinary to thelogical product 32, and thelogical product 32supplies 0 as the operation value to theswitch 18 and theswitch 25. As a result, theswitch 25 supplies the audio signal_{x N} supplied from the IMDCT_N converter 22 into thememory 26. Theswitch 18 supplies the audio signal_{x w} which is supplied from the IMDCT_w converter 16 to theadder 19.

このとき、補間係数g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}は0であるため、加算器１９は、オーディオ信号x_ｗに0を加算し、オーディオ信号x_ｗを出力オーディオ信号x_ｏｕｔとして出力する。その結果、J番目のフレームのビットストリームＢＳに対応する出力オーディオ信号x_ｏｕｔ[J・L+i]は、以下の式（１１）で表される。At this time, since the interpolation coefficients^{_g i_(errStatus)} is 0, theadder 19 adds 0 to the audio signal_{x w,} and outputs an audio signal_{x w} as an output audio signal_{x out.} As a result, the output audio signal x_out [J · L + i] corresponding to the bit stream BS of the J-th frame is expressed by the following equation (11).

x_ｏｕｔ[J・L+i]=x_ｗ[i]（0≦i≦L-1）
（１１）x_out [J · L + i] = x_w [i] (0 ≦ i ≦ L-1)
(11)

そして、図６のステップＳ２１において、メモリ２６は、スイッチ２５からのオーディオ信号x_Ｎを用いて、上述した式（７）により、長期時間信号x_Pを更新し、処理を終了する。Then, in step S21 in FIG. 6, amemory 26, using an audio signal x_N from theswitch 25, by the above-mentioned equation (7), and updates the long time signal x_P, the process ends.

以上のように、統合エラーフラグerrFlagおよびエラー状態変数errStatusが0である場合、即ち、まだ１度も復号エラーが発生していないか、過去３フレーム以上復号エラーが発生しておらず、現在のフレームでも復号エラーが発生していない場合、符号化パラメータPARに対応するオーディオ信号x_ｗがそのまま出力される。また、符号化パラメータPARに対応するダウンサンプリングされたオーディオ信号x_ｗが、メモリ２６に保持される。As described above, when the integrated error flag errFlag and the error state variable errStatus are 0, that is, no decoding error has occurred yet, or no decoding error has occurred in the past three frames or more, and the current If a decoding error in the frame does not occur, an audio signal x_w corresponding to the encoding parameters PAR are output as it is. The audio signal is down-sampled corresponding to the encoding parameters PAR x_w is held in thememory 26.

一方、ステップＳ２０でエラー状態変数errStatusが0ではないと判定された場合、ステップＳ２２において、エラー制御器１３は、エラー状態変数errStatusが0より大きいかどうかを判定する。  On the other hand, if it is determined in step S20 that the error state variable errStatus is not 0, in step S22, theerror controller 13 determines whether the error state variable errStatus is greater than 0.

統合エラーフラグerrFlagが0であるので、ステップＳ２２でエラー状態変数errStatusが0より大きいと判定された場合、ステップＳ２３において、エラー制御器１３は、エラー状態変数errStatusを-1に設定し、スイッチ１５と二値変換器２０に供給する。そして、処理はステップＳ２７に進む。  Since the integrated error flag errFlag is 0, if it is determined in step S22 that the error state variable errStatus is greater than 0, in step S23, theerror controller 13 sets the error state variable errStatus to −1, and theswitch 15 To thebinary converter 20. Then, the process proceeds to step S27.

また、ステップＳ２２でエラー状態変数errStatusが0より大きくはないと判定された場合、即ちエラー状態変数errStatusが0より小さい場合、ステップＳ２４において、エラー制御器１３は、エラー状態変数errStatusが-1であるかどうかを判定する。  If it is determined in step S22 that the error state variable errStatus is not larger than 0, that is, if the error state variable errStatus is smaller than 0, in step S24, theerror controller 13 sets the error state variable errStatus to -1. Determine if it exists.

統合エラーフラグerrFlagが0であるので、ステップＳ２４でエラー状態変数errStatusが-1であると判定した場合、ステップＳ２５において、エラー制御器１３は、エラー状態変数errStatusを-2に設定し、スイッチ１５と二値変換器２０に供給する。そして、処理はステップＳ２７に進む。  Since the integrated error flag errFlag is 0, if it is determined in step S24 that the error state variable errStatus is -1, in step S25, theerror controller 13 sets the error state variable errStatus to -2, and theswitch 15 To thebinary converter 20. Then, the process proceeds to step S27.

ステップＳ２４でエラー状態変数errStatusが-1ではないと判定された場合、即ちエラー状態変数errStatusが-2である場合、処理はステップＳ２６に進む。統合エラーフラグerrFlagが0であるので、ステップＳ２６において、エラー制御器１３は、エラー状態変数errStatusを0に設定し、スイッチ１５と二値変換器２０に供給する。そして、処理はステップＳ２７に進む。  If it is determined in step S24 that the error state variable errStatus is not -1, that is, if the error state variable errStatus is -2, the process proceeds to step S26. Since the integrated error flag errFlag is 0, in step S <b> 26, theerror controller 13 sets the error state variable errStatus to 0 and supplies it to theswitch 15 and thebinary converter 20. Then, the process proceeds to step S27.

ステップＳ２７において、スイッチ３５は、V/UV検出器２７から供給される有声音フラグvuvFlagが1であるかどうかを判定する。ステップＳ２７で有声音フラグvuvFlagが1であると判定された場合、スイッチ３５は、アップサンプリング器３０と乗算器３６を接続し、論理積器３２は、演算値として1をスイッチ１８およびスイッチ２５に供給する。  In step S <b> 27, theswitch 35 determines whether the voiced sound flag vuvFlag supplied from the V /UV detector 27 is “1”. When it is determined in step S27 that the voiced sound flag vuvFlag is 1, theswitch 35 connects theupsampler 30 and themultiplier 36, and the ANDcircuit 32sets 1 as the operation value to theswitch 18 and theswitch 25. Supply.

これにより、スイッチ１８は、乗算器１７により、上述した式（２）を用いて、IMDCT_ｗ変換器１６からのオーディオ信号x_ｗに補間係数g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}’が乗算された結果得られるオーディオ信号x_ｗ'を加算器１９に供給する。Thus, theaudio switch 18, to themultiplier 17, using equation (2) above, obtained as a result of the audio signal_{x w} interpolation coefficients from IMDCT_w converter¹⁶_g^{i (errStatus)} 'is multiplied by The signal x_w ′ is supplied to theadder 19.

そして、ステップＳ２８において、隠蔽信号生成器２９は、メモリ２６から長期時間信号x_Pを読み出し、ピッチ・利得抽出器２８からのピッチ周期pitchおよびピッチ利得pch_gに基づいて、上述した式（９）により、長期時間信号x_Ｐから隠蔽信号cx_Ｎを生成する。隠蔽信号生成器２９は、隠蔽信号cx_Ｎをアップサンプリング器３０と乗算器３１に供給する。Instep S 28, theconcealment signal generator 29 reads the long-term signal x_P from thememory 26, and based on the pitch period pitch and pitch gain pch_g from the pitch /gain extractor 28, the above equation (9) is used. , it generates the concealment signals cx_N from a long time signal x_P. Theconcealment signal generator 29 supplies the concealment signal cx_N to theupsampler 30 and themultiplier 31.

ステップＳ２９において、アップサンプリング器３０は、隠蔽信号生成器２９から供給される隠蔽信号cx_ＮをM倍にアップサンプリングし、アップサンプリングされた隠蔽信号cx_Ｗをスイッチ３５に供給する。ここで、スイッチ３５は、アップサンプリング器３０と乗算器３６を接続しているので、アップサンプリング器３０からの隠蔽信号cx_Ｗはスイッチ３５を介して乗算器３６に供給される。In step S29,upsampler 30, a concealment signal cx_N supplied from theconcealment signal generator 29 upsampling M times, and supplies the upsampled concealment signal cx_W to switch 35. Here, since theswitch 35 connects theupsampler 30 and themultiplier 36, the concealment signal cx_W from theupsampler 30 is supplied to themultiplier 36 via theswitch 35.

ステップＳ３０において、乗算器３６は、スイッチ３５から供給される隠蔽信号cx_Ｗに補間係数g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}を乗算する。そして、乗算器３６は、乗算の結果得られる乗算信号を加算器１９に供給する。In step S30, themultiplier 36 multiplies the concealment signal cx_W supplied from theswitch 35 by an interpolation coefficient g_i^(errStatus) . Then, themultiplier 36 supplies a multiplication signal obtained as a result of the multiplication to theadder 19.

ステップＳ３１において、加算器１９は、上述した式（３）に示すように、スイッチ１８から供給されるオーディオ信号x_ｗ'と乗算器３６から供給される乗算信号を加算し、その結果得られる出力オーディオ信号x_ｏｕｔを出力する。In step S31, theadder 19 adds the audio signal x_w ′ supplied from theswitch 18 and the multiplication signal supplied from themultiplier 36, as shown in the above-described equation (3), and an output obtained as a result. Audio signal_xout is output.

ステップＳ３２において、乗算器３１は、隠蔽信号生成器２９から供給される隠蔽信号cx_Ｎに補間係数h_ｉ^{（ｅｒｒＳｔａｔｕｓ）}を乗算し、乗算信号を加算器２４に供給する。In step S32, themultiplier 31 multiplies the interpolation coefficient concealment signal cx_N supplied from the concealment signal generator²⁹_h^{i (errStatus),} and supplies the multiplied signal to theadder 24.

ステップＳ３３において、加算器２４は、上述した式（６）により、乗算器２３から供給される乗算信号と、乗算器３１から供給される乗算信号を加算し、その結果得られる変形狭帯域信号x_Ｎ''をスイッチ２５に供給する。論理積器３２から供給される演算値が1であるため、スイッチ２５は、加算器２４から供給される変形狭帯域信号x_Ｎ''[0,…,L/M-1]をメモリ２６に供給する。In step S33, theadder 24 adds the multiplication signal supplied from themultiplier 23 and the multiplication signal supplied from themultiplier 31 according to the above-described equation (6), and the resulting modified narrowband signal x_N '' is supplied to theswitch 25. Since the operation value supplied from the ANDcircuit 32 is 1, theswitch 25 sends the modified narrowband signal x_N ″ [0,..., L / M−1] supplied from theadder 24 to thememory 26. Supply.

そして、処理はステップＳ２１に進み、メモリ２６は、スイッチ２５から供給される変形狭帯域信号x_Ｎ''を用いて、上述した式（８）により長期時間信号x_Pを更新し、処理を終了する。Then, the process proceeds to step S21, thememory 26, using the modified narrowband signal x_{N ''} supplied from theswitch 25, and updates the long time signal x_P by the above-mentioned equation (8), the process ends To do.

以上のように、統合エラーフラグerrFlagが0であり、エラー状態変数errStatusが0以外である場合、即ち、現在のフレームまで連続する復号エラーが発生していないフレームが３フレーム未満であり、現在のフレームにおいても復号エラーが発生していない場合、かつ、有声音フラグvuvFlagが1である場合、符号化パラメータPARに対応するオーディオ信号x_ｗ'と、アップサンプリングされた隠蔽信号cx_Ｗに対応する乗算信号g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}・cx_Ｗとが加算されて、出力される。また、符号化パラメータPARに対応するダウンサンプリングされた乗算信号h_ｉ^{(ｅｒｒＳｔａｔｕｓ)}'・x_Ｎと、隠蔽信号cx_Ｎに対応する乗算信号h_ｉ^{(ｅｒｒＳｔａｔｕｓ)}・cx_Ｎの加算結果である変形狭帯域信号x_Ｎ''が、メモリ２６に保持される。即ち、ダウンサンプリングされた出力オーディオ信号x_ｏｕｔに対応する変形狭帯域信号x_Ｎ''がメモリ２６に保持される。As described above, when the integrated error flag errFlag is 0 and the error state variable errStatus is other than 0, that is, there are less than 3 frames in which no decoding error continues until the current frame, When no decoding error has occurred in the frame and the voiced sound flag vuvFlag is 1, the multiplication corresponding to the audio signal x_w ′ corresponding to the encoding parameter PAR and the upsampled concealment signal cx_W Signals g_i^(errStatus) · cx_W are added and output. Further, the multiplied signal^{_{h i (errStatus) '· x}} N , which is down-sampled corresponding to the encoding parameters PAR, which is narrow modification is the addition result of the multiplication signal_{^h i^(errStatus)} · cx_N corresponding to the concealment signal cx_N The band signal x_N ″ is held in thememory 26. That is, the modified narrowband signal x_N ″ corresponding to the down-sampled output audio signal x_out is held in thememory 26.

一方、ステップＳ２７でV/UV検出器２７から供給される有声音フラグvuvFlagが1ではないと判定された場合、即ち有声音フラグvuvFlagが0である場合、スイッチ３５は、極性操作器３４とスイッチ１５を接続する。また、論理積器３２は、二値変換器２０から供給される変数errBinaryが1であり、有声音フラグvuvFlagが0であるので、演算値として0をスイッチ１８およびスイッチ２５に供給する。  On the other hand, when it is determined in step S27 that the voiced sound flag vuvFlag supplied from the V /UV detector 27 is not 1, that is, when the voiced sound flag vuvFlag is 0, theswitch 35 is connected to thepolarity controller 34 and the switch. 15 is connected. Further, since the variable errBinary supplied from thebinary converter 20 is 1 and the voiced sound flag vuvFlag is 0, thelogical product 32supplies 0 as an operation value to theswitch 18 and theswitch 25.

これにより、スイッチ１８は、IMDCT_ｗ変換器１６から供給されるオーディオ信号x_ｗを加算器１９に供給する。ここで、乗算器３６は、アップサンプリング器３０に接続されていないので、加算器１９に何の信号も供給しない。従って、加算器１９は、スイッチ１８から供給されるオーディオ信号x_ｗを、そのまま出力オーディオ信号x_ｏｕｔとして出力する。また、スイッチ２５は、IMDCT_Ｎ変換器２２から供給されるオーディオ信号x_Ｎをメモリ２６に供給する。Thus, theswitch 18 supplies the audio signal_{x w} which is supplied from the IMDCT_w converter 16 to theadder 19. Here, since themultiplier 36 is not connected to theupsampler 30, it does not supply any signal to theadder 19. Accordingly, theadder 19, the audio signal_{x w} which is supplied from theswitch 18, and outputs it as an output audio signal_{x out.} Theswitch 25 supplies the audio signal_{x N} supplied from the IMDCT_N converter 22 into thememory 26.

そして、ステップＳ２１において、メモリ２６は、スイッチ２５からのオーディオ信号x_Ｎを用いて、上述した式（７）により、長期時間信号x_Pとして保持している直近のNフレーム分のオーディオ信号x_Ｎを更新し、処理を終了する。Then, in step S21, thememory 26 uses the audio signal x_N from theswitch 25, by the above-mentioned equation (7), the audio signal of the last N frames held as long time signal x_P x_N Is updated and the process is terminated.

以上のように、統合エラーフラグerrFlagが0であり、エラー状態変数errStatusが0以外である場合、即ち、現在のフレームまで連続する復号エラーが発生していないフレームが３フレーム未満であり、現在のフレームにおいても復号エラーが発生していない場合、かつ、有声音フラグvuvFlagが0である場合、符号化パラメータPARに対応するオーディオ信号x_ｗがそのまま出力される。また、符号化パラメータPARに対応するダウンサンプリングされたオーディオ信号x_Ｎが、メモリ２６に保持される。As described above, when the integrated error flag errFlag is 0 and the error state variable errStatus is other than 0, that is, there are less than 3 frames in which no decoding error continues until the current frame, If a decoding error has not occurred even in the frame, and, if the voiced sound flag vuvFlag is 0, an audio signal x_w corresponding to the encoding parameters PAR are output as it is. The audio signal is down-sampled corresponding to the encoding parameters PAR x_N is held in thememory 26.

一方、ステップＳ１２で符号化データＲ_Ｘが受信できなかったか、または、逆多重化の際にエラーが発生したと判定された場合、逆多重化器１１は、エラーフラグerrFlag_０を0に設定してエラー制御器１３に供給する。そして、エラー制御器１３は、上述した式（１）により、統合エラーフラグerrFlagを1に設定し、処理をステップＳ３４に進める。On the other hand, if the encoded data R_X can not be received in step S12, or, if it is determined that an error has occurred during the demultiplexing, thedemultiplexer 11 sets theerror flag ErrFlag₀ 0 To theerror controller 13. Then, theerror controller 13 sets the integrated error flag errFlag to 1 by the above-described equation (1), and advances the process to step S34.

また、ステップＳ１４で符号化パラメータPARを分解する際にエラーが発生したと判定された場合、パラメータ解釈器１２は、エラーフラグerrFlag_１を0に設定してエラー制御器１３に供給する。そして、エラー制御器１３は、上述した式（１）により、統合エラーフラグerrFlagを1に設定し、処理をステップＳ３４に進める。If it is determined in step S14 that an error has occurred when decomposing the encoding parameter PAR, theparameter interpreter 12 sets the error flag errFlag₁ to 0 and supplies it to theerror controller 13. Then, theerror controller 13 sets the integrated error flag errFlag to 1 by the above-described equation (1), and advances the process to step S34.

ステップＳ３４において、エラー制御器１３は、エラー状態変数errStatusが0以下であるかどうかを判定する。ステップＳ３４でエラー状態変数errStatusが0以下であると判定された場合、処理はステップＳ３５に進む。  In step S34, theerror controller 13 determines whether or not the error state variable errStatus is 0 or less. If it is determined in step S34 that the error state variable errStatus is 0 or less, the process proceeds to step S35.

統合エラーフラグerrFlagが1であるので、ステップ３５において、エラー制御器１３は、エラー状態変数errStatusを1に設定し、スイッチ１５と二値変換器２０に供給する。これにより、二値変換器２０は、変数errBinaryとして1を論理積器３２に供給する。  Since the integrated error flag errFlag is 1, instep 35, theerror controller 13 sets the error state variable errStatus to 1 and supplies it to theswitch 15 and thebinary converter 20. As a result, thebinary converter 20supplies 1 to thelogical product 32 as the variable errBinary.

ステップＳ３６において、V/UV検出器２７は、メモリ２６から長期時間信号x_Pを読み出し、長期時間信号x_Pを分析して、長期時間信号x_Pに対応する音声が、有声音（V）であるか、または、無声音(UV)であるかを検出する。In step S36, V /UV detector 27 reads out the long time signal x_P from thememory 26, it analyzes the long time signal x_P, audio corresponding to the long time signal x_P, in voiced (V) It detects whether it is unvoiced sound (UV).

ステップＳ３７において、V/UV検出器２７は、長期時間信号x_Pに対応する音声が有声音であるかどうかを判定する。ステップＳ３７で有声音であると判定された場合、ステップＳ３８において、V/UV検出器２７は、有声音フラグvuvFlagを1に設定し、ピッチ・利得抽出器２８、論理積器３２、およびスイッチ３５に供給する。In step S37, V /UV detector 27, audio corresponding to long time signal x_P determines whether a voiced sound. If it is determined in step S37 that the sound is a voiced sound, in step S38, the V /UV detector 27 sets the voiced sound flag vuvFlag to 1, and the pitch /gain extractor 28, thelogical product 32, and theswitch 35 are set. To supply.

これにより、論理積器３２は、二値変換器２０からの変数errBinaryとしての1と、V/UV検出器２７からの有声音フラグvuvFlagとしての1との論理積の演算値として1を、スイッチ１８およびスイッチ２５に供給する。その結果、スイッチ１８は、乗算器１７と加算器１９を接続し、スイッチ２５は、加算器２４とメモリ２６を接続する。また、有声音フラグvuvFlagが1であるので、スイッチ３５は、アップサンプリング器３０と乗算器３６を接続する。  As a result, the ANDcircuit 32switches 1 as the operation value of the logical product of 1 as the variable errBinary from thebinary converter 20 and 1 as the voiced sound flag vuvFlag from the V /UV detector 27. 18 andswitch 25. As a result, theswitch 18 connects themultiplier 17 and theadder 19, and theswitch 25 connects theadder 24 and thememory 26. Further, since the voiced sound flag vuvFlag is 1, theswitch 35 connects theupsampler 30 and themultiplier 36.

ステップＳ３９において、ピッチ・利得抽出器２８は、メモリ２６から長期時間信号x_Pを読み出し、長期時間信号x_Pからピッチ周期pitchおよびピッチ利得pch_gを抽出する。そして、ピッチ・利得抽出器２８は、ピッチ周期pitchおよびピッチ利得pch_gを隠蔽信号生成器２９に供給する。In step S39, thepitch gain extractor 28 reads out the long time signal x_P from thememory 26, extracts the pitch period pitch and pitch gain pch_g from a long time signal x_P. Then, the pitch /gain extractor 28 supplies the pitch period pitch and the pitch gain pch_g to theconcealment signal generator 29.

ステップＳ４０において、隠蔽信号生成器２９は、メモリ２６から長期時間信号x_Pを読み出し、ピッチ・利得抽出器２８からのピッチ周期pitchおよびピッチ利得pch_gに基づいて、上述した式（９）により、長期時間信号x_Ｐから隠蔽信号cx_Ｎを生成する。隠蔽信号生成器２９は、隠蔽信号cx_Ｎをアップサンプリング器３０と乗算器３１に供給する。In step S40, theconcealment signal generator 29 reads out the long time signal x_P from thememory 26, based on the pitch period pitch and pitch gain pch_g frompitch gain extractor 28, by the above-mentioned formula (9), long generating a concealment signal cx_N from time signal x_P. Theconcealment signal generator 29 supplies the concealment signal cx_N to theupsampler 30 and themultiplier 31.

ステップＳ４１において、アップサンプリング器３０は、隠蔽信号生成器２９から供給される隠蔽信号cx_ＮをM倍にアップサンプリングし、アップサンプリングされた隠蔽信号cx_Ｗをスイッチ３５に供給する。In step S41, theupsampler 30, a concealment signal cx_N supplied from theconcealment signal generator 29 upsampling M times, and supplies the upsampled concealment signal cx_W to switch 35.

ステップＳ４２において、スイッチ１５は、エラー制御器１３から供給されるエラー状態変数errStatusに基づいて、スイッチ３５とIMDCT_ｗ変換器１６を接続することにより、スペクトル信号X_Ｗをクリアする。即ち、スイッチ１５は、スイッチ３５とIMDCT_ｗ変換器１６を接続するが、上述したようにスイッチ３５は、アップサンプリング器３０と乗算器３６を接続し、極性操作器３４とスイッチ１５の接続を切断する。従って、スイッチ１５は、変形スペクトル信号X_ｗ’として0信号を、IMDCT_ｗ変換器１６および低域スペクトル抽出器２１に出力する。In step S42, theswitch 15 on the basis of the error state variables errStatus supplied from theerror controller 13, by connecting theswitch 35 and IMDCT_w converter 16, to clear the spectral signal X_W. That is, theswitch 15 connects theswitch 35 and the IMDCT_w converter 16, but as described above, theswitch 35 connects theupsampler 30 and themultiplier 36 and disconnects thepolarity controller 34 and theswitch 15. To do. Accordingly, theswitch 15 outputs a 0 signal as the modified spectrum signal X_w ′ to the IMDCT_w converter 16 and the low-frequency spectrum extractor 21.

これにより、低域スペクトル抽出器２１は、変形スペクトル信号X_ｗ’としての0信号の低域成分である0信号を、低域スペクトル信号X_Ｗ(0≦i≦L/M-1)として抽出する。そして、低域スペクトル抽出器２１は、上述した式（４）により、抽出された低域スペクトル信号X_Ｗに所定の重み係数w_ｉを掛けることで狭帯域スペクトル信号X_Ｎ[i](0≦i≦L/M-1)として0信号を生成し、IMDCT_Ｎ変換器２２に供給する。As a result, the low-frequency spectrum extractor 21 extracts the zero signal, which is the low-frequency component of the zero signal as the modified spectral signal X_w ′, as the low-frequency spectrum signal X_W (0 ≦ i ≦ L / M−1). To do. Then, the low-frequency spectrum extractor 21 multiplies the extracted low-frequency spectrum signal_XW by a predetermined weighting coefficient w_{i according} to the above-described equation (4), thereby narrow-band spectrum signal X_N [i] (0 ≦ 0 signal is generated as i ≦ L / M−1) and supplied to the IMDCT_N converter 22.

ステップＳ４３において、IMDCT_ｗ変換器１６は、スイッチ１５から供給される変形スペクトル信号X_ｗ’としての0信号に対して逆MDCT変換を行い、オーディオ信号x_ｗを復元する。IMDCT_ｗ変換器１６は、復元されたオーディオ信号x_ｗを乗算器１７に供給するとともに、スイッチ１８に供給する。In step S43, the IMDCT_w converter 16 performs inverse MDCT conversion on the 0 signal as the modified spectrum signal X_w ′ supplied from theswitch 15 to restore the audio signal x_w . The IMDCT_w converter 16 supplies the restored audio signal x_w to themultiplier 17 and also supplies it to theswitch 18.

ステップＳ４４において、IMDCT_Ｎ変換器２２は、低域スペクトル抽出部２１から供給される狭帯域スペクトル信号X_Ｎとしての0信号に対して逆MDCT変換を行うことにより、オーディオ信号x_Ｎを生成する。IMDCT_Ｎ変換器２２は、オーディオ信号x_Ｎを乗算器２３およびスイッチ２５に供給する。In step S44, IMDCT_N converter 22, by performing an inverse MDCT transformation on zero signal as the narrowband spectrum signal X_N supplied from the low-band spectrum extracting unit 21, and generates an audio signal x_N. IMDCT_N converter 22 supplies the audio signal_{x N} inmultiplier 23 and aswitch 25.

そして、処理は図６のステップＳ３０に進み、以降の処理が繰り返される。その結果、アップサンプリングされた隠蔽信号cx_Ｗに補間係数g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}を乗算した結果得られる乗算信号g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}・cx_Ｗが、乗算器１７から出力されるオーディオ信号x_ｗ'に加算され、出力オーディオ信号x_ｏｕｔとして出力される。また、隠蔽信号cx_Ｎに補間係数h_ｉ^{（ｅｒｒＳｔａｔｕｓ）}を乗算した結果得られる乗算信号が、乗算器２３から出力される乗算信号x_Ｎ'に加算されて、変形狭帯域信号x_Ｎ''としてメモリ２６に供給され、長期時間信号x_Pが更新される。And a process progresses to step S30 of FIG. 6, and subsequent processes are repeated. As a result, the multiplication signal g_i^(errStatus) · cx_W obtained as a result of multiplying the^upsampled concealment signal cx_W by the interpolation coefficient g_i^(errStatus) is^added to the audio signal x_w ′ output from themultiplier 17. The signals are added and output as an output audio signal_xout . In addition, a multiplication signal obtained as a result of multiplying the concealment signal cx_N by the interpolation coefficient h_i^(errStatus) is added to the multiplication signal x_N ′ output from themultiplier 23 to obtain a modified narrowband signal x_N ″. is supplied to thememory 26, long-time signal x_P is updated.

以上のように、統合エラーフラグerrFlagが1であり、エラー状態変数errStatusが0以下である場合、即ち、直前のフレームで復号エラーが発生しておらず、現在のフレームで復号エラーが発生した場合、かつ、有声音フラグvuvFlagが1である場合、アップサンプリングされた隠蔽信号cx_Ｗに対応する乗算信号g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}・cx_Ｗにオーディオ信号x_ｗ'が加算されて出力される。また、隠蔽信号cx_Ｎに対応する乗算信号h_ｉ^{(ｅｒｒＳｔａｔｕｓ)}・cx_Ｎが乗算信号x_Ｎ'と加算され、変形狭帯域信号x_Ｎ''としてメモリ２６に保持される。即ち、ダウンサンプリングされた出力オーディオ信号x_ｏｕｔに対応する変形狭帯域信号x_Ｎ''がメモリ２６に保持される。As described above, when the integrated error flag errFlag is 1 and the error status variable errStatus is 0 or less, that is, when no decoding error has occurred in the immediately preceding frame and a decoding error has occurred in the current frame When the voiced sound flag vuvFlag is 1, the audio signal x_w ′ is added to the multiplication signal g_i^(errStatus) · cx_W corresponding to the upsampled concealment signal cx_W and output. Further, the multiplication signal h_i^(errStatus) · cx_N corresponding to the concealment signal cx_N is added to the multiplication signal x_N ′, and held in thememory 26 as a modified narrowband signal x_N ″. That is, the modified narrowband signal x_N ″ corresponding to the down-sampled output audio signal x_out is held in thememory 26.

一方、ステップＳ３７で無声音であると判定された場合、ステップＳ４５において、V/UV検出器２７は、有声音フラグvuvFlagを0に設定し、ピッチ・利得抽出器２８、論理積器３２、およびスイッチ３５に供給する。  On the other hand, if it is determined in step S37 that the sound is unvoiced, in step S45, the V /UV detector 27 sets the voiced sound flag vuvFlag to 0, the pitch /gain extractor 28, thelogical product 32, and the switch. 35.

これにより、論理積器３２は、二値変換器２０からの変数errBinaryとしての1と、V/UV検出器２７からの有声音フラグvuvFlagとしての0との論理積の演算値として0を、スイッチ１８およびスイッチ２５に供給する。その結果、スイッチ１８は、IMDCT_Ｗ１６と加算器１９を接続し、スイッチ２５は、IMDCT_Ｎ２２とメモリ２６を接続する。また、有声音フラグvuvFlagが0であるので、スイッチ３５は、極性操作器３４とスイッチ１５とを接続する。As a result, the ANDcircuit 32switches 0 as the operation value of the logical product of 1 as the variable errBinary from thebinary converter 20 and 0 as the voiced sound flag vuvFlag from the V /UV detector 27. 18 andswitch 25. As a result, theswitch 18 connects theIMDCT_W 16 and theadder 19, and theswitch 25 connects the IMDCT_N 22 and thememory 26. Since the voiced sound flag vuvFlag is 0, theswitch 35 connects thepolarity controller 34 and theswitch 15.

ステップＳ４６において、極性操作器３４は、メモリ３３に記憶されている、直近のエラー状態変数errStatusが0である場合のフレームのスペクトル信号X_Ｗを、スペクトル信号X_Ｗ^（Ｐ）として読み出し、上述した式（１０）により、スペクトル信号X_Ｗ^（Ｐ）の極性を操作する。極性操作器３４は、その結果得られる変形スペクトル信号X_ｗ’をスイッチ３５に供給する。上述したように、スイッチ３５は、極性操作器３４とスイッチ１５を接続するので、変形スペクトル信号X_ｗ’は、スイッチ１５に供給される。そして、エラー状態変数errStatusが1であるので、スイッチ１５は、スイッチ３５から供給される変形スペクトル信号X_ｗ’をIMDCT_Ｗ変換器１６に供給する。In step S46, thepolarity operating device 34 is stored in thememory 33, a spectral signal X_W of the frame when the last error state variable errStatus is 0, read as a spectral signal X_W^(P), the aforementioned The polarity of the spectrum signal X_W^(P) is manipulated according to equation (10). Thepolarity manipulator 34 supplies the resulting deformed spectrum signal X_w ′ to theswitch 35. As described above, since theswitch 35 connects thepolarity controller 34 and theswitch 15, the modified spectrum signal X_w ′ is supplied to theswitch 15. Since the error status variable errStatus is 1, theswitch 15 supplies the modified spectrum signal X_w ′ supplied from theswitch 35 to the IMDCT_W converter 16.

ステップＳ４７において、IMDCT_Ｗ変換器１６は、変形スペクトル信号X_ｗ’に対して逆MDCT変換を行い、オーディオ信号x_ｗを復元する。IMDCT_ｗ変換器１６は、復元されたオーディオ信号x_ｗを乗算器１７に供給するとともに、スイッチ１８に供給する。そして、上述したように、スイッチ１８は、IMDCT_Ｗ変換器１６と加算器１９を接続するので、オーディオ信号x_ｗは加算器１９に供給される。また、上述したように、スイッチ３５は、極性操作器３４とスイッチ１５を接続し、アップサンプリング器３０と乗算器３６の接続を切断するので、加算器１９には乗算器３６からゼロ信号が供給される。従って、加算器１９は、オーディオ信号x_ｗをそのまま出力オーディオ信号x_ｏｕｔとして出力する。In step S47, the IMDCT_W converter 16 performs inverse MDCT conversion on the modified spectrum signal X_w ′ to restore the audio signal x_w . The IMDCT_w converter 16 supplies the restored audio signal x_w to themultiplier 17 and also supplies it to theswitch 18. As described above, since theswitch 18 connects the IMDCT_W converter 16 and theadder 19, the audio signal_xw is supplied to theadder 19. In addition, as described above, theswitch 35 connects thepolarity controller 34 and theswitch 15 and disconnects the connection between theupsampler 30 and themultiplier 36, so that a zero signal is supplied from themultiplier 36 to theadder 19. Is done. Accordingly, theadder 19 outputs the audio signal_{x w} as it is as the output audio signal_{x out.}

ステップＳ４８において、低域スペクトル抽出器２１は、スイッチ１５から供給される変形スペクトル信号X_ｗ’の低域成分を、低域スペクトル信号X_Ｗとして抽出する。そして、低域スペクトル抽出器２１は、上述した式（４）により、抽出された低域スペクトル信号X_Ｗに所定の重み係数w_ｉを掛けることで狭帯域スペクトル信号X_Ｎを生成し、IMDCT_Ｎ変換器２２に供給する。In step S48, the low band spectrum extractor 21, a low-frequency component of the deformed spectrum signal X_{w 'supplied} from theswitch 15 is extracted as the low band spectrum signal X_W. Then, a low frequency band spectrum extractor 21, by the above-mentioned formula (4), extracted to produce a low-band spectrum signal X_W narrowband spectrum signal by multiplying a predetermined weight coefficient w_i to X_N, IMDCT_N This is supplied to the converter 22.

ステップＳ４９において、IMDCT_Ｎ変換器２２は、低域スペクトル抽出部２１から供給される狭帯域スペクトル信号X_Ｎに対して逆MDCT変換を行うことにより、ダウンサンプリングされたオーディオ信号x_Ｎを生成する。IMDCT_Ｎ変換器２２は、そのオーディオ信号x_Ｎを乗算器２３およびスイッチ２５に供給する。上述したように、スイッチ２５は、IMDCT_Ｎ変換器２２とメモリ２６を接続するので、メモリ２６には、オーディオ信号x_Ｎがそのまま供給される。In step S49, IMDCT_N converter 22, by performing an inverse MDCT transform for narrowband spectrum signal X_N supplied from the low-band spectrum extracting unit 21, and generates a down-sampled audio signal x_N. IMDCT_N converter 22 supplies the audio signal_{x N} inmultiplier 23 and aswitch 25. As described above, theswitch 25, since the connecting IMDCT_N converter 22 and thememory 26, thememory 26, an audio signal x_N is supplied as it is.

そして、処理は、図６のステップＳ２１に進み、上述したように、メモリ２６は、オーディオ信号x_Ｎを用いて、上述した式（７）により長期時間信号x_Pを更新し、処理を終了する。Then, the process proceeds to step S21 in FIG. 6, as described above, thememory 26 uses the audio signal x_N, and updates the long time signal x_P by the above-mentioned equation (7), and ends the process .

以上のように、統合エラーフラグerrFlagが1であり、エラー状態変数errStatusが0以下である場合、即ち、直前のフレームで復号エラーが発生しておらず、現在のフレームで復号エラーが発生した場合、かつ、有声音フラグvuvFlagが0である場合、直近の復号エラーが発生していないフレームのスペクトル信号X_Ｗの極性を操作して逆MDCT変換した結果得られるオーディオ信号x_ｗが出力される。これにより、違和感の少ない出力オーディオ信号x_ｏｕｔを出力することができる。また、前の復号エラーが発生していないフレームのスペクトル信号X_Ｗの極性を操作した後、低域成分を抽出して逆MDCT変換した結果得られるダウンサンプリングされたオーディオ信号x_Ｎが、メモリ２６に保持される。As described above, when the integrated error flag errFlag is 1 and the error status variable errStatus is 0 or less, that is, when no decoding error has occurred in the immediately preceding frame and a decoding error has occurred in the current frame and, if the voiced sound flag vuvFlag is 0, an audio signal x_w obtained last decoding result error inverse MDCT transform by operating the polarity of the spectral signal X_W of the frame has not occurred is output. Thus, it is possible to output a low output audio signal x_out discomfort. Further, after the previous decoding error has operated the polarity of the spectral signal X_W of the frame does not occur, the low-frequency audio signal components extracted down to obtain inverse MDCT transformed result sampled x_N is, thememory 26 Retained.

一方、ステップＳ３４でエラー状態変数errStatusが0以下ではないと判定された場合、ステップＳ５０において、エラー制御器１３は、エラー状態変数errStatusが最大値Ｓであるかどうかを判定する。  On the other hand, if it is determined in step S34 that the error state variable errStatus is not 0 or less, theerror controller 13 determines whether or not the error state variable errStatus is the maximum value S in step S50.

ステップＳ５０でエラー状態変数errStatusが最大値Ｓではないと判定した場合、ステップＳ５１において、エラー制御器１３は、エラー状態変数errStatusを1だけインクリメントし、スイッチ１５と二値変換器２０に供給する。そして、処理はステップＳ５２に進む。  When it is determined in step S50 that the error state variable errStatus is not the maximum value S, in step S51, theerror controller 13 increments the error state variable errStatus by 1 and supplies it to theswitch 15 and thebinary converter 20. Then, the process proceeds to step S52.

一方、ステップＳ５０でエラー状態変数errStatusが最大値Ｓであると判定した場合、エラー制御器１３は、エラー状態変数errStatusを最大値Ｓのままにし、スイッチ１５と二値変換器２０に供給する。そして、処理はステップＳ５２に進む。  On the other hand, when it is determined in step S50 that the error state variable errStatus is the maximum value S, theerror controller 13 keeps the error state variable errStatus as the maximum value S and supplies it to theswitch 15 and thebinary converter 20. Then, the process proceeds to step S52.

ステップＳ５２において、エラー制御器１３は、有声音フラグvuvFlagが1であるかどうかを判定し、有声音フラグvuvFlagが1であると判定した場合、処理はステップＳ４０に進む。  In step S52, theerror controller 13 determines whether or not the voiced sound flag vuvFlag is 1, and if it is determined that the voiced sound flag vuvFlag is 1, the process proceeds to step S40.

即ち、統合エラーフラグerrFlagが1であり、エラー状態変数errStatusが0より大きい場合、即ち、直前のフレームおよび現在のフレームにおいて連続して復号エラーが発生した場合、かつ、有声音フラグvuvFlagが1である場合、エラー状態変数errStatusが0以下である場合と同様に、アップサンプリングされた隠蔽信号cx_Ｗに対応する乗算信号g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}・cx_Ｗにオーディオ信号x_ｗ'が加算されて出力される。また、隠蔽信号cx_Ｎに対応する乗算信号h_ｉ^{(ｅｒｒＳｔａｔｕｓ)}・cx_Ｎが乗算信号x_Ｎ'と加算され、変形狭帯域信号x_Ｎ''としてメモリ２６に保持される。That is, when the integrated error flag errFlag is 1 and the error state variable errStatus is greater than 0, that is, when a decoding error occurs continuously in the immediately preceding frame and the current frame, and the voiced sound flag vuvFlag is 1 In some cases, the audio signal x_w ′ is added to the multiplication signal g_i^(errStatus) · cx_W corresponding to the upsampled concealment signal cx_W and output, as in the case where the error state variable errStatus is 0 or less. The Further, the multiplication signal h_i^(errStatus) · cx_N corresponding to the concealment signal cx_N is added to the multiplication signal x_N ′, and held in thememory 26 as a modified narrowband signal x_N ″.

一方、ステップＳ５２で有声音フラグvuvFlagが1ではないと判定された場合、処理はステップＳ４６に進む。  On the other hand, if it is determined in step S52 that the voiced sound flag vuvFlag is not 1, the process proceeds to step S46.

即ち、統合エラーフラグerrFlagが1であり、エラー状態変数errStatusが0より大きい場合、即ち、直前のフレームおよび現在のフレームにおいて連続して復号エラーが発生した場合、かつ、有声音フラグvuvFlagが0である場合、エラー状態変数errStatusが0以下である場合と同様に、直近の復号エラーが発生していないフレームのスペクトル信号X_Ｗの極性を操作して逆MDCT変換した結果得られるオーディオ信号x_ｗが出力される。また、前の復号エラーが発生していないフレームのスペクトル信号X_Ｗの極性を操作した後、低域成分を抽出して逆MDCT変換した結果得られるダウンサンプリングされたオーディオ信号x_Ｎが、メモリ２６に保持される。That is, when the integrated error flag errFlag is 1 and the error state variable errStatus is greater than 0, that is, when a decoding error occurs continuously in the immediately preceding frame and the current frame, and the voiced sound flag vuvFlag is 0 in some cases, as with error state variables errStatus is less than or equal to 0, the spectral signal X_W audio signal x_w obtained inverse MDCT transform result by operating the polarity of the frame last decoded error has not occurred Is output. Further, after the previous decoding error has operated the polarity of the spectral signal X_W of the frame does not occur, the low-frequency audio signal components extracted down to obtain inverse MDCT transformed result sampled x_N is, thememory 26 Retained.

なお、図５および図６の復号処理では、説明の便宜上、スイッチ１５，１８，２５，３５により選択されない信号の生成に関する処理については適宜省略している。本実施の形態では、スイッチ１５，１８，２５，および３５により選択される信号だけでなく、選択されない信号も生成されるようにしているが、スイッチ１５，１８，２５，および３５により選択される信号だけが生成されるようにしてもよい。  In the decoding process of FIG. 5 and FIG. 6, for the convenience of explanation, the process related to the generation of signals that are not selected by theswitches 15, 18, 25, and 35 is omitted as appropriate. In the present embodiment, not only signals selected by theswitches 15, 18, 25, and 35 but also signals that are not selected are generated. However, the signals are selected by theswitches 15, 18, 25, and 35. Only the signal may be generated.

[復号結果の例]
図７は、IMDCT_ｗ変換器１６により復元されるオーディオ信号x_ｗの例を示す図である。[Example of decryption result]
FIG. 7 is a diagram illustrating an example of the audio signal x_w restored by the IMDCT_w converter 16.

なお、図７の例では、サンプル（Ｅ）からサンプル（Ｆ）までの区間が、統合エラーフラグerrFlagが1であり、エラー状態変数errStatusが0以下である区間である。また、図７の例では、有声音フラグが1に設定されている。  In the example of FIG. 7, a section from sample (E) to sample (F) is a section in which the integrated error flag errFlag is 1 and the error state variable errStatus is 0 or less. In the example of FIG. 7, the voiced sound flag is set to 1.

この場合、図７に示すように、サンプル（Ｅ）からサンプル（Ｆ）までの区間のスペクトル信号X_Ｗは、スイッチ１８によりクリアされるので、IMDCT_ｗ変換器１６により復元されるオーディオ信号x_ｗは略0信号である。In this case, as shown in FIG. 7, the spectral signal X_W of the section from the sample (E) to the sample (F), so is cleared by theswitch 18, the audio signal x_w which is restored by IMDCT_w converter 16 Is substantially zero signal.

図８は、隠蔽信号生成器２９により生成されるサンプル（Ｅ）からサンプル（Ｆ）までの区間に対応する隠蔽信号の例を示す図である。  FIG. 8 is a diagram illustrating an example of the concealment signal corresponding to the section from the sample (E) to the sample (F) generated by theconcealment signal generator 29.

図８に示すように、隠蔽信号生成器２９は、長期時間信号x_Ｐから、オーディオ信号x_ｗのサンプリング周波数に比べて1/M（図８の例ではM=4）倍にダウンサンプリングされた信号を隠蔽信号cx_Ｎとして生成する。そして、アップサンプリング器３０は、隠蔽信号cx_Ｎのサンプリング周波数をM倍にアップサンプリングし、アップサンプリングされた隠蔽信号cx_Ｗのサンプリング周波数をオーディオ信号x_ｗの周波数と同一にする。As shown in FIG. 8, theconcealment signal generator 29, a long-time signal x_P, (in the example of FIG. 8 M = 4) 1 / M as compared with the sampling frequency of the audio signal x_w downsampled doubled generating a signal as a concealment signal cx_N. Theupsampler 30, the sampling frequency of the concealment signal cx_N up-sampled M times, the sampling frequency of the up-sampled concealment signal cx_W equal to the frequency of the audio signal x_w.

また、図８に示すように、統合エラーフラグerrFlagが1である、サンプル（Ｅ）からサンプル（Ｆ）までの区間に対応するサンプル（Ｅ）’からサンプル（Ｆ）’までの区間以降も、統合エラーフラグerrFlagとして1が3回以上連続するまで、隠蔽信号cx_Ｎが生成される。Further, as shown in FIG. 8, the integrated error flag errFlag is 1, and the section from sample (E) ′ to sample (F) ′ corresponding to the section from sample (E) to sample (F) is also until 1 as an integrated error flag errFlag is more than three times consecutively, the concealment signal cx_N is generated.

図９は、図７のオーディオ信号x_ｗを図８の隠蔽信号cx_Ｎを用いて隠蔽した結果得られる出力オーディオ信号x_ｏｕｔの例を示す図である。Figure 9 is a diagram showing an example of the output audio signal x_out obtained as a result of the concealment using the concealment signals cx_N in FIG. 8 the audio signal x_w in FIG.

図９に示すように、統合エラーフラグerrFlagおよびエラー状態変数errStatusが0である、サンプル（Ｅ）までの出力オーディオ信号x_ｏｕｔは、図７のオーディオ信号x_ｗそのものとなる。また、サンプル（Ｅ）からサンプル（Ｆ）までの区間の出力オーディオ信号x_ｏｕｔは、アップサンプリングされた図８のサンプル（Ｅ）’からサンプル（Ｆ）’までの区間の隠蔽信号cx_Ｗに対応する乗算信号g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}・cx_Ｗとなる。As shown in FIG. 9, the output audio signal x_out up to the sample (E) in which the integrated error flag errFlag and the error state variable errStatus are 0 becomes the audio signal x_w itself in FIG. Further, the output audio signal x_{out in} the section from the sample (E) to the sample (F) corresponds to the concealed signal cx_W in the section from the sample (E) ′ to the sample (F) ′ in FIG. Multiplication signal g_i^(errStatus) · cx_W

さらに、サンプル（Ｆ）以降の、統合エラーフラグerrFlagとして1が3回以上連続するまでの区間の出力オーディオ信号x_ｏｕｔは、図７のオーディオ信号x_ｗに対応するオーディオ信号x_ｗ'と、アップサンプリングされた図８のサンプル（Ｆ）'以降の隠蔽信号cx_Ｗに対応する乗算信号g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}・cx_Ｗとが加算された信号となる。即ち、出力オーディオ信号x_ｏｕｔは、サンプル（Ｆ）において、アップサンプリングされた隠蔽信号cx_Ｗに対応する乗算信号g_ｉ^{（ｅｒｒＳｔａｔｕｓ）}・cx_Ｗとオーディオ信号x_ｗが滑らかに接続されるように、クロスフェードしている。Furthermore, the sample (F) and later, the output audio signal x_out of the section up successive 1 three times or more as the integration error flag errFlag includes an audio signal x_{w 'corresponding} to the audio signal x_w in FIG. 7, up A signal obtained by adding the multiplication signal g_i^(errStatus) · cx_W corresponding to the concealment signal cx_W after the sampled sample (F) ′ in FIG. 8 is added. That is, the output audio signal_{x out,} in a sample (F), as multiplied signal^{_g i_(errStatus)} · cx_W and audio signal_{x w} corresponding to up-sampled concealment signal cx_W is smoothly connected, Crossfading.

以上のように、復号装置１０は、スペクトル信号X_Ｗまたは変形スペクトル信号X_ｗ’の一部である低域成分を逆MDCT変換することにより、オーディオ信号x_ｗをダウンサンプリングし、そのオーディオ信号x_ｗに基づいて隠蔽信号を生成する。従って、ダウンサンプリングに必要な演算量が少なくて済む。As described above, thedecoding device 10 down-samples the audio signal x_w by performing inverse MDCT conversion on the low-frequency component that is a part of the spectrum signal X_W or the modified spectrum signal X_w ′, and the audio signal x_A concealment signal is generated based on_w . Therefore, the amount of calculation required for downsampling is small.

また、復号装置１０は、ダウンサンプリングされたオーディオ信号x_Ｎまたは変形狭帯域信号x_Ｎ''を、隠蔽信号を生成するためにメモリ２６に保持するので、隠蔽信号を生成するために必要なメモリ２６のサイズを比較的小さくすることができる。Further, thedecoding unit 10, the down-sampled audio signal x_N or modified narrowband signal x_{N '',} so to retain in thememory 26 to generate a concealment signal, the memory required to generate a concealment signal The size of 26 can be made relatively small.

＜第２実施の形態＞
[復号装置の第２実施の形態の構成例]
図１０は、本技術を適用した復号装置の第２実施の形態の構成例を示すブロック図である。<Second Embodiment>
[Configuration Example of Second Embodiment of Decoding Device]
FIG. 10 is a block diagram illustrating a configuration example of the second embodiment of the decoding device to which the present technology is applied.

図１０に示す構成のうち、図１の構成と同じ構成には同じ符号を付してある。重複する説明については適宜省略する。  Among the configurations shown in FIG. 10, the same reference numerals are given to the same configurations as those in FIG. 1. The overlapping description will be omitted as appropriate.

図１０の復号装置５０の構成は、主に、逆多重化器１１とエラー制御器１３の代わりに、逆多重化器５１、エラーカウンタ制御器５２、メモリ５３、スイッチ５４、およびエラー制御器５５が設けられている点が図１の構成と異なる。  10 mainly includes ademultiplexer 51, anerror counter controller 52, amemory 53, aswitch 54, and anerror controller 55 instead of thedemultiplexer 11 and theerror controller 13. 1 is different from the configuration of FIG.

復号装置５０には、所定のフレームのオーディオ信号の符号化パラメータPARのビットストリームＢＳと、そのフレームより後のＮフレーム分のオーディオ信号の符号化パラメータPARのビットストリームである冗長ビットストリームＢＳ（ｒ）からなる符号化データＲ_Ｘを復号する。Thedecoding apparatus 50 includes a bit stream BS of an encoding parameter PAR of an audio signal of a predetermined frame and a redundant bit stream BS (r that is a bit stream of an encoding parameter PAR of an audio signal for N frames after the frame. ) decodes the encoded data R_X consisting of.

具体的には、復号装置５０の逆多重化器５１は、受信部として機能し、外部の符号化装置から伝送路を介して伝送されてくる符号化データＲ_Ｘを受信する。逆多重化器５１は、受信された符号化データＲ_ＸからビットストリームＢＳと冗長ビットストリームＢＳ（ｒ）を逆多重化する。また、逆多重化器５１は、符号化データＲ_Ｘが受信でき、かつ、逆多重化の際にエラーが発生していないかどうかを判定する。Specifically,demultiplexer 51 of thedecoding device 50 functions as a receiving unit, for receiving the encoded data R_X transmitted via the transmission path from the outside of the encoding apparatus.Demultiplexer 51 demultiplexes the bit stream BS and the redundancy bit stream BS (r) from the received coded data R_X. Further, thedemultiplexer 51 can receive encoded data R_X is, and determines whether or not an error has occurred during demultiplexing.

逆多重化器５１は、符号化データＲ_Ｘが受信できなかったか、または、逆多重化の際にエラーが発生したと判定した場合、エラーフラグerrFlag_０を1に設定する。一方、逆多重化器５１は、符号化データＲ_Ｘが受信でき、かつ、逆多重化の際にエラーが発生していないと判定した場合、エラーフラグerrFlag_０を0に設定する。そして、逆多重化器５１は、逆多重化の結果得られるビットストリームＢＳをスイッチ５４に供給し、冗長ビットストリームＢＳ（ｒ）をメモリ５３に供給する。逆多重化器５１は、エラーフラグerrFlag_０をエラーカウンタ制御器５２に供給する。Demultiplexer 51, whether or not received encoded data R_X is or, if it is determined that an error has occurred during the demultiplexing, an error flag is set ErrFlag₀ to 1. On the other hand, thedemultiplexer 51 can receive encoded data R_X is and if an error is determined not to occur during demultiplexing, error flag ErrFlag₀ is set to 0. Then, thedemultiplexer 51 supplies the bit stream BS obtained as a result of the demultiplexing to theswitch 54 and supplies the redundant bit stream BS (r) to thememory 53. Thedemultiplexer 51 supplies the error flag errFlag₀ to theerror counter controller 52.

エラーカウンタ制御器５２は、逆多重化器５１から供給されるエラーフラグerrFlag_０とパラメータ解釈器１２から供給されるエラーフラグerrFlag_１に基づいて、エラーカウンタCNTを設定する。具体的には、エラーカウンタ制御器５２は、エラーフラグerrFlag_０およびエラーフラグerrFlag_１が0である場合、エラーカウンタCNTを0に設定する。一方、エラーカウンタ制御器５２は、エラーフラグerrFlag_０またはエラーフラグerrFlag_１が1である場合、エラーカウンタCNTを1だけインクリメントする。エラーカウンタ制御器５２は、エラーカウンタCNTを、メモリ５３およびスイッチ５４に供給する。Theerror counter controller 52 sets the error counter CNT based on the error flag errFlag₀ supplied from thedemultiplexer 51 and the error flag errFlag₁ supplied from theparameter interpreter 12. Specifically, theerror counter controller 52 sets the error counter CNT to 0 when the error flag errFlag₀ and the error flag errFlag₁ are 0. On the other hand, when the error flag errFlag₀ or the error flag errFlag₁ is 1, theerror counter controller 52 increments the error counter CNT by 1. Theerror counter controller 52 supplies the error counter CNT to thememory 53 and theswitch 54.

また、エラーカウンタ制御器５２は、エラーカウンタCNTがN以下である場合、統合エラーフラグerrFlagを0に設定し、エラーカウンタCNTがNより大きい場合、統合エラーフラグerrFlagを1に設定する。エラーカウンタ制御器５２は、統合エラーフラグerrFlagをエラー制御器５５に供給する。  Theerror counter controller 52 sets the integrated error flag errFlag to 0 when the error counter CNT is N or less, and sets the integrated error flag errFlag to 1 when the error counter CNT is greater than N. Theerror counter controller 52 supplies the integrated error flag errFlag to theerror controller 55.

メモリ５３は、エラーカウンタ制御器５２から供給されるエラーカウンタCNTが0である場合、逆多重化器５１から供給される冗長ビットストリームＢＳ（ｒ）を記憶する。また、メモリ５３は、エラーカウンタCNTが1以上N以下である場合、記憶している現在の復号対象のフレームよりCNTフレーム前のフレームのビットストリームＢＳに対応する冗長ビットストリームＢＳ（ｒ）のうちの、現在の復号対象のフレームの冗長ビットストリームＢＳ（ｒ）^(-cnt)を読み出す。メモリ５３は、読み出された冗長ビットストリームＢＳ（ｒ）^(-cnt)をスイッチ５４に供給する。Thememory 53 stores the redundant bit stream BS (r) supplied from thedemultiplexer 51 when the error counter CNT supplied from theerror counter controller 52 is 0. In addition, when the error counter CNT is 1 or more and N or less, thememory 53 stores the redundant bit stream BS (r) corresponding to the bit stream BS of the frame preceding the CNT frame from the stored current decoding target frame. The redundant bit stream BS (r)^(-cnt) of the current decoding target frame is read out. Thememory 53 supplies the read redundant bit stream BS (r)^(−cnt) to theswitch 54.

スイッチ５４は、エラーカウンタ制御器５２から供給されるエラーカウンタCNTに基づいて、逆多重化器５１から供給されるビットストリームＢＳまたはメモリ５３から供給される冗長ビットストリームＢＳ（ｒ）^(-cnt)を選択し、パラメータ解釈器１２に供給する。Based on the error counter CNT supplied from theerror counter controller 52, theswitch 54 uses the bit stream BS supplied from thedemultiplexer 51 or the redundant bit stream BS (r)^(-cnt) supplied from thememory 53. Is supplied to theparameter interpreter 12.

具体的には、スイッチ５４は、エラーカウンタCNTが0である場合、ビットストリームＢＳをパラメータ解釈器１２に供給し、エラーカウンタCNTが0ではない場合、冗長ビットストリームＢＳ（ｒ）^(-cnt)をパラメータ解釈器１２に供給する。Specifically, theswitch 54 supplies the bit stream BS to theparameter interpreter 12 when the error counter CNT is 0, and the redundant bit stream BS (r)^(−cnt) when the error counter CNT is not 0. Is supplied to theparameter interpreter 12.

エラー制御器５５は、エラーカウンタ制御器５２から供給される統合エラーフラグerrFlagに基づいて、図１のエラー制御器１３と同様に、エラー状態変数errStatusを設定し、エラー状態変数errStatusをスイッチ１５と二値変換器２０に供給する。  Theerror controller 55 sets an error state variable errStatus based on the integrated error flag errFlag supplied from theerror counter controller 52, and sets the error state variable errStatus to theswitch 15 in the same manner as theerror controller 13 of FIG. This is supplied to thebinary converter 20.

[符号化データとオーディオ信号の説明]
図１１は、符号化装置から伝送されてくる符号化データＲ_Ｘと、その符号化データの復号結果であるオーディオ信号を説明する図である。[Description of encoded data and audio signal]
Figure 11 is a diagram for explaining the encoded data R_X transmitted from the encoding apparatus, an audio signal which is decoded result of the coded data.

図１１の例では、Ｎは２であり、復号装置５０に伝送されてくる各フレームの符号化データＲ_Ｘは、そのフレームのビットストリームＢＳと、そのフレームより１フレーム後および２フレーム後の冗長ビットストリームＢＳ（ｒ）により構成される。例えば、n-1フレーム目の符号化データＲ_Ｘは、n-1フレーム目のビットストリームＢＳであるData[n-1]、n-1フレームより1フレーム後のnフレーム目の冗長ビットストリームＢＳ（ｒ）であるrData[n]、および2フレーム後のn+1フレーム目の冗長ビットストリームＢＳ（ｒ）であるrData[n+1]からなる。In the example of FIG. 11, N is 2, the coded data R_X for each frame that is transmitted to thedecoding device 50 includes a bit stream BS in the frame, redundant after 1 frame and after two frames from the frame It is composed of a bit stream BS (r). For example, n-1 th frame of encoded data R_X is n-1 th frame bitstream BS Data [n-1], n-1 after one frame from the frame n-th frame of the redundant bit stream BS (R) is rData [n], and rData [n + 1] is the redundant bit stream BS (r) of the (n + 1) th frame after 2 frames.

この場合、例えば、nフレーム目以降のフレームで復号エラーが発生すると、nフレーム目の復号時にエラーカウンタCNTは1となり、復号エラーが発生していないn-1フレーム目のData[n-1]とともに符号化データＲ_Ｘに含まれるnフレーム目のrData[n]が、メモリ５３から読み出される。そして、nフレーム目の復号結果は、読み出されたnフレーム目のrData[n]を復号することにより生成される。In this case, for example, if a decoding error occurs in the frames after the nth frame, the error counter CNT becomes 1 when decoding the nth frame, and Data [n-1] of the (n-1) th frame in which no decoding error has occurred. rData [n] of the n th frame included in the encoded data R_X together are read out from thememory 53. The decoding result of the nth frame is generated by decoding rData [n] of the read nth frame.

また、n+1フレーム目の復号時には、エラーカウンタCNTは2となり、エラーが発生していないn-1フレーム目のData[n-1]とともに符号化データＲ_Ｘに含まれるn+1フレーム目のrData[n+1]が、メモリ５３から読み出される。そして、n+1フレーム目の復号結果は、読み出されたn+1フレーム目のrData[n+1]を復号することにより生成される。Further, n + 1 th frame during decoding, the error counter CNT becomes 2, n + 1 th frame included in the encoded data R_X with Data [n-1] of the n-1 th frame error has not occurred RData [n + 1] is read from thememory 53. The decoding result of the (n + 1) th frame is generated by decoding rData [n + 1] of the read (n + 1) th frame.

一方、n+2フレーム目の復号時には、エラーカウンタCNTは3となり、Nである2より大きい。即ち、n+2フレーム目の冗長ビットストリームＢＳ（ｒ）は、n-1フレーム目の符号化データＲ_Ｘに含まれていない。従って、n+2フレーム目の復号結果は、隠蔽信号cx_Ｎなどを用いて生成される。On the other hand, at the time of decoding of the (n + 2) th frame, the error counter CNT is 3, which is larger than 2, which is N. That, n + 2-th frame of the redundant bit stream BS (r) is not included in the n-1 th frame of encoded data R_X. Therefore, n + 2 th frame decoded result is generated by using a concealment signal cx_N.

[復号装置の処理の説明]
図１０の復号装置５０の復号処理は、図５のステップＳ１１乃至Ｓ１４の処理の代わりに復号前処理が行われる点を除いて図５および図６の復号処理と同様であるので、以下では復号前処理についてのみ説明する。[Description of Decryption Device Processing]
The decoding process of thedecoding device 50 in FIG. 10 is the same as the decoding process in FIGS. 5 and 6 except that a pre-decoding process is performed instead of the processes in steps S11 to S14 in FIG. Only pre-processing will be described.

図１２は、図１０の復号装置５０による復号前処理を説明するフローチャートである。この復号前処理は、例えば、外部の符号化装置から伝送路を介してフレーム単位の符号化データＲ_Ｘが伝送されてきたとき、開始される。FIG. 12 is a flowchart for explaining pre-decoding processing by thedecoding device 50 of FIG. The decoding pretreatment, for example, when the encoded data R_X frame units via a transmission path from the outside of the encoding apparatus have been transmitted, is started.

図１２のステップＳ７０において、復号装置５０の逆多重化器５１は、外部の符号化装置から伝送路を介して伝送されてくる符号化データＲ_Ｘを受信し、その符号化データＲ_ＸからビットストリームＢＳと冗長ビットストリームＢＳ（ｒ）を逆多重化する。そして、逆多重化器５１は、逆多重化の結果得られるビットストリームＢＳをスイッチ５４に供給し、冗長ビットストリームＢＳ（ｒ）をメモリ５３に供給する。In step S70 of FIG. 12, thedemultiplexer 51 of thedecoding device 50 receives the encoded data R_X transmitted via the transmission path from the outside of the encoding apparatus, the bit from the encoded data R_X The stream BS and the redundant bit stream BS (r) are demultiplexed. Then, thedemultiplexer 51 supplies the bit stream BS obtained as a result of the demultiplexing to theswitch 54 and supplies the redundant bit stream BS (r) to thememory 53.

ステップＳ７１において、逆多重化器５１は、符号化データＲ_Ｘが受信でき、かつ、逆多重化の際にエラーが発生していないかどうかを判定する。In step S71, thedemultiplexer 51 can receive encoded data R_X is, and determines whether or not an error has occurred during demultiplexing.

ステップＳ７１で符号化データＲ_Ｘが受信でき、かつ、逆多重化の際にエラーが発生していないと判定した場合、逆多重化器５１は、エラーフラグerrFlag_０を0に設定してエラーカウンタ制御器５２に供給する。Encoded data R_X can be received in step S71, and, if an error is determined not to have occurred during the demultiplexing, thedemultiplexer 51, the error counter is set anerror flag ErrFlag₀ 0 This is supplied to thecontroller 52.

そして、ステップＳ７２において、エラーカウンタ制御器５２は、エラーカウンタCNTを0に設定し、スイッチ５４に供給する。スイッチ５４は、逆多重化器５１から供給されるビットストリームＢＳをパラメータ解釈器１２に供給する。  In step S72, theerror counter controller 52 sets the error counter CNT to 0 and supplies it to theswitch 54. Theswitch 54 supplies the bit stream BS supplied from thedemultiplexer 51 to theparameter interpreter 12.

ステップＳ７３において、パラメータ解釈器１２は、スイッチ５４から供給されるビットストリームＢＳから符号化パラメータPARを分解し、逆量子化器１４に供給する。  In step S <b> 73, theparameter interpreter 12 decomposes the encoding parameter PAR from the bit stream BS supplied from theswitch 54, and supplies it to theinverse quantizer 14.

ステップＳ７４において、パラメータ解釈器１２は、符号化パラメータPARを分解する際にエラーが発生していないかどうかを判定する。ステップＳ７４でエラーが発生していないと判定された場合、パラメータ解釈器１２は、エラーフラグerrFlag_１を0に設定し、エラーカウンタ制御器５２に供給する。エラーカウンタ制御器５２は、エラーカウンタCNTをステップＳ７２の処理前の値に変更する。In step S74, theparameter interpreter 12 determines whether or not an error has occurred when decomposing the encoding parameter PAR. If it is determined in step S74 that no error has occurred, theparameter interpreter 12 sets the error flag errFlag₁ to 0 and supplies it to theerror counter controller 52. Theerror counter controller 52 changes the error counter CNT to the value before the processing in step S72.

そして、ステップＳ７５において、メモリ５３は、逆多重化器５１から供給される冗長ビットストリームＢＳ（ｒ）を記憶し、処理をステップＳ８０に進める。  In step S75, thememory 53 stores the redundant bit stream BS (r) supplied from thedemultiplexer 51, and the process proceeds to step S80.

一方、ステップＳ７１で符号化データＲ_Ｘが受信できなかったか、または、逆多重化の際にエラーが発生したと判定された場合、逆多重化器５１は、エラーフラグerrFlag_０を1に設定する。そして、逆多重化器５１は、そのエラーフラグerrFlag_０をエラーカウンタ制御器５２に供給し、処理をステップＳ７６に進める。On the other hand, if the encoded data R_X can not be received in step S71, or, if it is determined that an error has occurred during the demultiplexing, thedemultiplexer 51 sets the error flag ErrFlag₀ to 1 . Then, thedemultiplexer 51 supplies the error flag errFlag₀ to theerror counter controller 52, and the process proceeds to step S76.

また、ステップＳ７４でエラーが発生したと判定された場合、パラメータ解釈器１２は、エラーフラグerrFlag_１を1に設定し、そのエラーフラグerrFlag_１をエラーカウンタ制御器５２に供給する。そして、処理はステップＳ７６に進む。If it is determined in step S 74 that an error has occurred, theparameter interpreter 12 sets the error flag errFlag₁ to 1 and supplies the error flag errFlag₁ to theerror counter controller 52. Then, the process proceeds to step S76.

ステップＳ７６において、エラー制御器５５は、エラーカウンタCNTを1だけインクリメントし、メモリ５３およびスイッチ５４に供給する。  In step S76, theerror controller 55 increments the error counter CNT by 1 and supplies it to thememory 53 and theswitch 54.

ステップＳ７７において、メモリ５３は、エラーカウンタCNTがＮ以下であるかどうかを判定する。ステップＳ７７でエラーカウンタCNTがＮ以下であると判定された場合、処理はステップＳ７８に進む。  In step S77, thememory 53 determines whether the error counter CNT is N or less. If it is determined in step S77 that the error counter CNT is equal to or smaller than N, the process proceeds to step S78.

ステップＳ７８において、メモリ５３は、記憶している現在の復号対象のフレームよりCNTフレーム前のフレームのビットストリームＢＳに対応する冗長ビットストリームＢＳ（ｒ）のうちの、現在の復号対象のフレームの冗長ビットストリームＢＳ（ｒ）^(-cnt)を読み出す。メモリ５３は、読み出された冗長ビットストリームＢＳ（ｒ）^(-cnt)をスイッチ５４に供給する。そして、スイッチ５４は、冗長ビットストリームＢＳ（ｒ）^(-cnt)を、ビットストリームＢＳとしてパラメータ解釈器１２に供給する。In step S78, thememory 53 stores the redundancy of the current decoding target frame in the redundant bit stream BS (r) corresponding to the bit stream BS of the frame before the CNT frame from the stored current decoding target frame.^Read bitstream BS (r)^(-cnt) . Thememory 53 supplies the read redundant bit stream BS (r)^(−cnt) to theswitch 54. Then, theswitch 54 supplies the redundant bit stream BS (r)^(−cnt) to theparameter interpreter 12 as the bit stream BS.

ステップＳ７９において、パラメータ解釈器１２は、スイッチ５４から供給されるビットストリームＢＳから符号化パラメータPARを分解し、逆量子化器１４に供給して、処理をステップＳ８０に進める。  In step S79, theparameter interpreter 12 decomposes the encoding parameter PAR from the bitstream BS supplied from theswitch 54, supplies the parameter PAR to theinverse quantizer 14, and proceeds to step S80.

ステップＳ８０において、エラーカウンタ制御器５２は、統合エラーフラグerrFlagを0に設定し、エラー制御器５５に供給して、処理は終了する。この後、図５のステップＳ１５以降の処理が行われる。  In step S80, theerror counter controller 52 sets the integrated error flag errFlag to 0 and supplies it to theerror controller 55, and the process ends. Thereafter, the processing after step S15 in FIG. 5 is performed.

一方、ステップＳ７７でエラーカウンタCNTがＮより大きいと判定された場合、処理はステップＳ８１に進む。ステップＳ８１において、エラーカウンタ制御器５２は、統合エラーフラグerrFlagを1に設定し、エラー制御器５５に供給する。そして、処理は終了し、この後、図５のステップＳ３４以降の処理が行われる。  On the other hand, if it is determined in step S77 that the error counter CNT is greater than N, the process proceeds to step S81. In step S <b> 81, theerror counter controller 52 sets the integrated error flag errFlag to 1 and supplies it to theerror controller 55. And a process is complete | finished and the process after step S34 of FIG. 5 is performed after this.

なお、本実施の形態におけるメモリは、リングバッファ構造を有するようにしてもよい。この場合、更新時の演算量を削減することができる。  Note that the memory in this embodiment may have a ring buffer structure. In this case, the amount of calculation at the time of update can be reduced.

[本技術を適用したコンピュータの説明]
次に、上述した一連の処理は、ハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。[Description of computer to which this technology is applied]
Next, the series of processes described above can be performed by hardware or software. When a series of processing is performed by software, a program constituting the software is installed in a general-purpose computer or the like.

そこで、図１３は、上述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示している。  Therefore, FIG. 13 shows a configuration example of an embodiment of a computer in which a program for executing the series of processes described above is installed.

プログラムは、コンピュータに内蔵されている記録媒体としての記憶部２０８やROM（Read Only Memory）２０２に予め記録しておくことができる。  The program can be recorded in advance in astorage unit 208 or a ROM (Read Only Memory) 202 as a recording medium built in the computer.

あるいはまた、プログラムは、リムーバブルメディア２１１に格納（記録）しておくことができる。このようなリムーバブルメディア２１１は、いわゆるパッケージソフトウエアとして提供することができる。ここで、リムーバブルメディア２１１としては、例えば、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)，MO(Magneto Optical)ディスク，DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリ等がある。  Alternatively, the program can be stored (recorded) in theremovable medium 211. Such aremovable medium 211 can be provided as so-called package software. Here, examples of theremovable medium 211 include a flexible disk, a CD-ROM (Compact Disc Read Only Memory), an MO (Magneto Optical) disk, a DVD (Digital Versatile Disc), a magnetic disk, and a semiconductor memory.

なお、プログラムは、上述したようなリムーバブルメディア２１１からドライブ２１０を介してコンピュータにインストールする他、通信網や放送網を介して、コンピュータにダウンロードし、内蔵する記憶部２０８にインストールすることができる。すなわち、プログラムは、例えば、ダウンロードサイトから、ディジタル衛星放送用の人工衛星を介して、コンピュータに無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータに有線で転送することができる。  The program can be installed on the computer from theremovable medium 211 as described above via the drive 210, or can be downloaded to the computer via the communication network or the broadcast network and installed in the built-instorage unit 208. That is, for example, the program is wirelessly transferred from a download site to a computer via a digital satellite broadcasting artificial satellite, or wired to a computer via a network such as a LAN (Local Area Network) or the Internet. be able to.

コンピュータは、CPU(Central Processing Unit)２０１を内蔵しており、CPU２０１には、バス２０４を介して、入出力インタフェース２０５が接続されている。  The computer includes a CPU (Central Processing Unit) 201, and an input /output interface 205 is connected to theCPU 201 via abus 204.

CPU２０１は、入出力インタフェース２０５を介して、ユーザによって、入力部２０６が操作等されることにより指令が入力されると、それに従って、ROM２０２に格納されているプログラムを実行する。あるいは、CPU２０１は、記憶部２０８に格納されたプログラムを、RAM(Random Access Memory)２０３にロードして実行する。  When a command is input by the user operating theinput unit 206 via the input /output interface 205, theCPU 201 executes a program stored in theROM 202 accordingly. Alternatively, theCPU 201 loads a program stored in thestorage unit 208 to a RAM (Random Access Memory) 203 and executes it.

これにより、CPU２０１は、上述したフローチャートにしたがった処理、あるいは上述したブロック図の構成により行われる処理を行う。そして、CPU２０１は、その処理結果を、必要に応じて、例えば、入出力インタフェース２０５を介して、出力部２０７から出力、あるいは、通信部２０９から送信、さらには、記憶部２０８に記録等させる。  Thereby, theCPU 201 performs processing according to the flowchart described above or processing performed by the configuration of the block diagram described above. Then, theCPU 201 outputs the processing result as necessary, for example, via the input /output interface 205, from theoutput unit 207, transmitted from thecommunication unit 209, and further recorded in thestorage unit 208.

なお、入力部２０６は、キーボードや、マウス、マイク等で構成される。また、出力部２０７は、LCD(Liquid Crystal Display)やスピーカ等で構成される。  Theinput unit 206 includes a keyboard, a mouse, a microphone, and the like. Theoutput unit 207 includes an LCD (Liquid Crystal Display), a speaker, and the like.

ここで、本明細書において、コンピュータがプログラムに従って行う処理は、必ずしもフローチャートとして記載された順序に沿って時系列に行われる必要はない。すなわち、コンピュータがプログラムに従って行う処理は、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含む。  Here, in the present specification, the processing performed by the computer according to the program does not necessarily have to be performed in time series in the order described as the flowchart. That is, the processing performed by the computer according to the program includes processing executed in parallel or individually (for example, parallel processing or object processing).

また、プログラムは、１のコンピュータ（プロセッサ）により処理されるものであっても良いし、複数のコンピュータによって分散処理されるものであっても良い。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであっても良い。  Further, the program may be processed by one computer (processor) or may be distributedly processed by a plurality of computers. Furthermore, the program may be transferred to a remote computer and executed.

本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。  Embodiments of the present technology are not limited to the above-described embodiments, and various modifications can be made without departing from the gist of the present technology.

なお、本技術は、以下のような構成もとることができる。
（１）
フレーム単位のオーディオ信号のスペクトルの一部を部分スペクトルとして抽出するスペクトル抽出部と、
前記スペクトル抽出部により抽出された前記部分スペクトルを逆直交変換する部分逆直交変換部と、
前記部分逆直交変換部による逆直交変換の結果得られる部分オーディオ信号に基づいて、前記オーディオ信号の第１の代替信号を生成する第１の代替信号生成部と
を備える信号処理装置。
（２）
前記第１の代替信号生成部は、複数フレームの前記部分オーディオ信号に基づいて前記第１の代替信号を生成する
前記（１）に記載の信号処理装置。
（３）
前記部分オーディオ信号に基づいて、前記オーディオ信号に対応する音声が有声音であるかどうかを判定する判定部と、
前記判定部により前記オーディオ信号に対応する音声が有声音であると判定された場合、前記部分オーディオ信号に基づいて、前記オーディオ信号のピッチ周期とピッチ利得を抽出するピッチ抽出部と
をさらに備え、
前記第１の代替信号生成部は、前記ピッチ抽出部により抽出された前記ピッチ周期と前記ピッチ利得に基づいて、前記部分オーディオ信号から前記第１の代替信号を生成する
前記（１）または(２)に記載の信号処理装置。
（４）
前記第１の代替信号生成部は、所定のフレームより前記ピッチ周期前の１フレーム分の前記部分オーディオ信号と前記ピッチ利得とに基づいて、前記所定のフレームの前記第１の代替信号を生成する
前記（３）に記載の信号処理装置。
（５）
前記スペクトル抽出部は、前記オーディオ信号のスペクトルの低域成分を前記部分スペクトルとして抽出する
前記（１）乃至（４）のいずれかに記載の信号処理装置。
（６）
前記スペクトル抽出部は、前記部分スペクトルのうちの高域のスペクトルを周波数が高いほど減衰させ、
前記部分逆直交変換部は、前記スペクトル抽出部により減衰された前記部分スペクトルを逆直交変換する
前記（１）乃至（５）のいずれかに記載の信号処理装置。
（７）
所定のフレームの直近のエラーが発生していないフレームの前記オーディオ信号のスペクトルを用いて、前記所定のフレームのオーディオ信号の第２の代替信号を生成する第２の代替信号生成部と、
前記所定のフレームのオーディオ信号のスペクトルにエラーが発生しており、前記所定のフレームのオーディオ信号に対応する音声が有声音である場合、前記第１の代替信号を前記所定のフレームのオーディオ信号として出力し、前記所定のフレームのオーディオ信号のスペクトルにエラーが発生しており、前記所定のフレームのオーディオ信号に対応する音声が無声音である場合、前記所定のフレームの前記第２の代替信号を前記所定のフレームのオーディオ信号として出力する出力部と
をさらに備える
前記（１）乃至（６）のいずれかに記載の信号処理装置。
（８）
複数フレームの前記部分オーディオ信号を記憶する記憶部
をさらに備え、
前記記憶部は、前記所定のフレームのオーディオ信号のスペクトルにエラーが発生しており、前記所定のフレームのオーディオ信号に対応する音声が無声音である場合、前記代替信号生成部により生成された前記所定のフレームの前記第２の代替信号のスペクトルの一部のオーディオ信号を前記所定のフレームの前記部分オーディオ信号として記憶し、
前記第１の代替信号生成部は、前記記憶部に記憶される前記複数フレームの前記部分オーディオ信号に基づいて、前記第１の代替信号を生成する
前記（７）に記載の信号処理装置。
（９）
複数フレームの前記部分オーディオ信号を記憶する記憶部
をさらに備え、
前記記憶部は、所定のフレームのオーディオ信号のスペクトルにエラーが発生しており、前記所定のフレームのオーディオ信号に対応する音声が有声音である場合、前記第１の代替信号のスペクトルの一部のオーディオ信号を前記所定のフレームの前記部分オーディオ信号として記憶し、
前記第１の代替信号生成部は、前記記憶部に記憶される前記複数フレームの前記部分オーディオ信号に基づいて、前記第１の代替信号を生成する
前記（１）乃至（７）のいずれかに記載の信号処理装置。
（１０）
所定のフレームの前記オーディオ信号のスペクトルを本スペクトルとして受信するとともに、そのフレームより後のフレームの前記オーディオ信号のスペクトルを冗長スペクトルとして受信する受信部
をさらに備え、
前記スペクトル抽出部は、前記本スペクトルにエラーが発生している場合、前記冗長スペクトルの一部を前記部分スペクトルとして抽出する
前記（１）乃至（９）のいずれかに記載の信号処理装置。
（１１）
信号処理装置が、
フレーム単位のオーディオ信号のスペクトルの一部を部分スペクトルとして抽出するスペクトル抽出ステップと、
前記スペクトル抽出ステップの処理により抽出された前記部分スペクトルを逆直交変換する部分逆直交変換ステップと、
前記部分逆直交変換ステップの処理による逆直交変換の結果得られる部分オーディオ信号に基づいて、前記オーディオ信号の第１の代替信号を生成する第１の代替信号生成ステップと
信号処理方法。
（１２）
コンピュータに、
フレーム単位のオーディオ信号のスペクトルの一部を部分スペクトルとして抽出するスペクトル抽出ステップと、
前記スペクトル抽出ステップの処理により抽出された前記部分スペクトルを逆直交変換する部分逆直交変換ステップと、
前記部分逆直交変換ステップの処理による逆直交変換の結果得られる部分オーディオ信号に基づいて、前記オーディオ信号の第１の代替信号を生成する第１の代替信号生成ステップと
を含む処理を実行させるためのプログラム。In addition, this technique can also take the following structures.
(1)
A spectrum extractor for extracting a part of the spectrum of the audio signal in frame units as a partial spectrum;
A partial inverse orthogonal transform unit that performs inverse orthogonal transform on the partial spectrum extracted by the spectrum extraction unit;
A signal processing apparatus comprising: a first alternative signal generation unit that generates a first alternative signal of the audio signal based on a partial audio signal obtained as a result of the inverse orthogonal transform performed by the partial inverse orthogonal transform unit.
(2)
The signal processing device according to (1), wherein the first alternative signal generation unit generates the first alternative signal based on the partial audio signals of a plurality of frames.
(3)
A determination unit that determines whether the sound corresponding to the audio signal is a voiced sound based on the partial audio signal;
A pitch extraction unit that extracts a pitch period and a pitch gain of the audio signal based on the partial audio signal when the determination unit determines that the voice corresponding to the audio signal is a voiced sound;
The first alternative signal generation unit generates the first alternative signal from the partial audio signal based on the pitch period and the pitch gain extracted by the pitch extraction unit. (1) or (2 ).
(4)
The first substitute signal generation unit generates the first substitute signal of the predetermined frame based on the partial audio signal and the pitch gain for one frame before the pitch period from a predetermined frame. The signal processing device according to (3).
(5)
The signal processing apparatus according to any one of (1) to (4), wherein the spectrum extraction unit extracts a low frequency component of a spectrum of the audio signal as the partial spectrum.
(6)
The spectrum extraction unit attenuates the higher frequency spectrum of the partial spectrum as the frequency increases,
The signal processing device according to any one of (1) to (5), wherein the partial inverse orthogonal transform unit performs inverse orthogonal transform on the partial spectrum attenuated by the spectrum extraction unit.
(7)
A second alternative signal generation unit that generates a second alternative signal of the audio signal of the predetermined frame by using a spectrum of the audio signal of a frame in which no error of the predetermined frame has occurred immediately;
When an error occurs in the spectrum of the audio signal of the predetermined frame and the sound corresponding to the audio signal of the predetermined frame is a voiced sound, the first alternative signal is used as the audio signal of the predetermined frame. An error occurs in the spectrum of the audio signal of the predetermined frame, and the voice corresponding to the audio signal of the predetermined frame is an unvoiced sound, the second alternative signal of the predetermined frame is The signal processing apparatus according to any one of (1) to (6), further including: an output unit that outputs an audio signal of a predetermined frame.
(8)
A storage unit for storing the partial audio signals of a plurality of frames;
In the case where an error has occurred in the spectrum of the audio signal of the predetermined frame and the sound corresponding to the audio signal of the predetermined frame is an unvoiced sound, the storage unit generates the predetermined signal generated by the alternative signal generation unit Storing an audio signal of a part of the spectrum of the second alternative signal of the frame as the partial audio signal of the predetermined frame;
The signal processing device according to (7), wherein the first substitute signal generation unit generates the first substitute signal based on the partial audio signals of the plurality of frames stored in the storage unit.
(9)
A storage unit for storing the partial audio signals of a plurality of frames;
When the error occurs in the spectrum of the audio signal of the predetermined frame and the voice corresponding to the audio signal of the predetermined frame is a voiced sound, the storage unit is a part of the spectrum of the first substitute signal And storing the audio signal as the partial audio signal of the predetermined frame,
The first alternative signal generation unit generates the first alternative signal based on the partial audio signals of the plurality of frames stored in the storage unit. Any one of (1) to (7) The signal processing apparatus as described.
(10)
A receiving unit that receives a spectrum of the audio signal of a predetermined frame as a main spectrum and receives a spectrum of the audio signal of a frame after the frame as a redundant spectrum;
The signal processing apparatus according to any one of (1) to (9), wherein the spectrum extraction unit extracts a part of the redundant spectrum as the partial spectrum when an error occurs in the main spectrum.
(11)
The signal processor
A spectral extraction step for extracting a part of the spectrum of the audio signal in frame units as a partial spectrum;
A partial inverse orthogonal transform step of performing an inverse orthogonal transform on the partial spectrum extracted by the processing of the spectrum extraction step;
A first alternative signal generating step for generating a first alternative signal of the audio signal based on a partial audio signal obtained as a result of the inverse orthogonal transform by the processing of the partial inverse orthogonal transform step, and a signal processing method.
(12)
On the computer,
A spectral extraction step for extracting a part of the spectrum of the audio signal in frame units as a partial spectrum;
A partial inverse orthogonal transform step of performing an inverse orthogonal transform on the partial spectrum extracted by the processing of the spectrum extraction step;
A first alternative signal generation step of generating a first alternative signal of the audio signal based on a partial audio signal obtained as a result of the inverse orthogonal transformation by the processing of the partial inverse orthogonal transformation step. Program.

１０ 復号装置, １６ IMDCT_Ｗ変換器， ２１ 低域スペクトル抽出器， ２２ IMDCT_Ｎ変換器， ２６ メモリ， ２７ V/UV検出器， ２８ ピッチ・利得抽出器， ２９ 隠蔽信号生成器， ３４ 極性操作器， ３５ スイッチ， ５０ 復号装置， ５１ 逆多重化器10 decoding device, 16 IMDCT_W converter, 21 low-frequency spectrum extractor, 22 IMDCT_N converter, 26 memory, 27 V / UV detector, 28 pitch / gain extractor, 29 concealed signal generator, 34 polarity controller , 35 switch, 50 decoding device, 51 demultiplexer

Claims (12)

Translated fromJapanese

フレーム単位のオーディオ信号のスペクトルの一部を部分スペクトルとして抽出するスペクトル抽出部と、
前記スペクトル抽出部により抽出された前記部分スペクトルを逆直交変換する部分逆直交変換部と、
前記部分逆直交変換部による逆直交変換の結果得られる部分オーディオ信号に基づいて、前記オーディオ信号の第１の代替信号を生成する第１の代替信号生成部と
を備える信号処理装置。A spectrum extractor for extracting a part of the spectrum of the audio signal in frame units as a partial spectrum;
A partial inverse orthogonal transform unit that performs inverse orthogonal transform on the partial spectrum extracted by the spectrum extraction unit;
A signal processing apparatus comprising: a first alternative signal generation unit that generates a first alternative signal of the audio signal based on a partial audio signal obtained as a result of the inverse orthogonal transform performed by the partial inverse orthogonal transform unit. 前記第１の代替信号生成部は、複数フレームの前記部分オーディオ信号に基づいて前記第１の代替信号を生成する
請求項１に記載の信号処理装置。The signal processing apparatus according to claim 1, wherein the first substitute signal generation unit generates the first substitute signal based on the partial audio signals of a plurality of frames. 前記部分オーディオ信号に基づいて、前記オーディオ信号に対応する音声が有声音であるかどうかを判定する判定部と、
前記判定部により前記オーディオ信号に対応する音声が有声音であると判定された場合、前記部分オーディオ信号に基づいて、前記オーディオ信号のピッチ周期とピッチ利得を抽出するピッチ抽出部と
をさらに備え、
前記第１の代替信号生成部は、前記ピッチ抽出部により抽出された前記ピッチ周期と前記ピッチ利得に基づいて、前記部分オーディオ信号から前記第１の代替信号を生成する
請求項１に記載の信号処理装置。A determination unit that determines whether the sound corresponding to the audio signal is a voiced sound based on the partial audio signal;
A pitch extraction unit that extracts a pitch period and a pitch gain of the audio signal based on the partial audio signal when the determination unit determines that the voice corresponding to the audio signal is a voiced sound;
The signal according to claim 1, wherein the first substitute signal generation unit generates the first substitute signal from the partial audio signal based on the pitch period and the pitch gain extracted by the pitch extraction unit. Processing equipment. 前記第１の代替信号生成部は、所定のフレームより前記ピッチ周期前の１フレーム分の前記部分オーディオ信号と前記ピッチ利得とに基づいて、前記所定のフレームの前記第１の代替信号を生成する
請求項３に記載の信号処理装置。The first substitute signal generation unit generates the first substitute signal of the predetermined frame based on the partial audio signal and the pitch gain for one frame before the pitch period from a predetermined frame. The signal processing apparatus according to claim 3. 前記スペクトル抽出部は、前記オーディオ信号のスペクトルの低域成分を前記部分スペクトルとして抽出する
請求項１に記載の信号処理装置。The signal processing apparatus according to claim 1, wherein the spectrum extraction unit extracts a low frequency component of a spectrum of the audio signal as the partial spectrum. 前記スペクトル抽出部は、前記部分スペクトルのうちの高域のスペクトルを周波数が高いほど減衰させ、
前記部分逆直交変換部は、前記スペクトル抽出部により減衰された前記部分スペクトルを逆直交変換する
請求項１に記載の信号処理装置。The spectrum extraction unit attenuates the higher frequency spectrum of the partial spectrum as the frequency increases,
The signal processing device according to claim 1, wherein the partial inverse orthogonal transform unit performs inverse orthogonal transform on the partial spectrum attenuated by the spectrum extraction unit. 所定のフレームの直近のエラーが発生していないフレームの前記オーディオ信号のスペクトルを用いて、前記所定のフレームのオーディオ信号の第２の代替信号を生成する第２の代替信号生成部と、
前記所定のフレームのオーディオ信号のスペクトルにエラーが発生しており、前記所定のフレームのオーディオ信号に対応する音声が有声音である場合、前記第１の代替信号を前記所定のフレームのオーディオ信号として出力し、前記所定のフレームのオーディオ信号のスペクトルにエラーが発生しており、前記所定のフレームのオーディオ信号に対応する音声が無声音である場合、前記所定のフレームの前記第２の代替信号を前記所定のフレームのオーディオ信号として出力する出力部と
をさらに備える
請求項１に記載の信号処理装置。A second alternative signal generation unit that generates a second alternative signal of the audio signal of the predetermined frame by using a spectrum of the audio signal of a frame in which no error of the predetermined frame has occurred immediately;
When an error occurs in the spectrum of the audio signal of the predetermined frame and the sound corresponding to the audio signal of the predetermined frame is a voiced sound, the first alternative signal is used as the audio signal of the predetermined frame. An error occurs in the spectrum of the audio signal of the predetermined frame, and the voice corresponding to the audio signal of the predetermined frame is an unvoiced sound, the second alternative signal of the predetermined frame is The signal processing apparatus according to claim 1, further comprising: an output unit that outputs an audio signal of a predetermined frame. 複数フレームの前記部分オーディオ信号を記憶する記憶部
をさらに備え、
前記記憶部は、前記所定のフレームのオーディオ信号のスペクトルにエラーが発生しており、前記所定のフレームのオーディオ信号に対応する音声が無声音である場合、前記代替信号生成部により生成された前記所定のフレームの前記第２の代替信号のスペクトルの一部のオーディオ信号を前記所定のフレームの前記部分オーディオ信号として記憶し、
前記第１の代替信号生成部は、前記記憶部に記憶される前記複数フレームの前記部分オーディオ信号に基づいて、前記第１の代替信号を生成する
請求項７に記載の信号処理装置。A storage unit for storing the partial audio signals of a plurality of frames;
In the case where an error has occurred in the spectrum of the audio signal of the predetermined frame and the sound corresponding to the audio signal of the predetermined frame is an unvoiced sound, the storage unit generates the predetermined signal generated by the alternative signal generation unit Storing an audio signal of a part of the spectrum of the second alternative signal of the frame as the partial audio signal of the predetermined frame;
The signal processing device according to claim 7, wherein the first substitute signal generation unit generates the first substitute signal based on the partial audio signals of the plurality of frames stored in the storage unit. 複数フレームの前記部分オーディオ信号を記憶する記憶部
をさらに備え、
前記記憶部は、所定のフレームのオーディオ信号のスペクトルにエラーが発生しており、前記所定のフレームのオーディオ信号に対応する音声が有声音である場合、前記第１の代替信号のスペクトルの一部のオーディオ信号を前記所定のフレームの前記部分オーディオ信号として記憶し、
前記第１の代替信号生成部は、前記記憶部に記憶される前記複数フレームの前記部分オーディオ信号に基づいて、前記第１の代替信号を生成する
請求項１に記載の信号処理装置。A storage unit for storing the partial audio signals of a plurality of frames;
When the error occurs in the spectrum of the audio signal of the predetermined frame and the voice corresponding to the audio signal of the predetermined frame is a voiced sound, the storage unit is a part of the spectrum of the first substitute signal And storing the audio signal as the partial audio signal of the predetermined frame,
The signal processing apparatus according to claim 1, wherein the first substitute signal generation unit generates the first substitute signal based on the partial audio signals of the plurality of frames stored in the storage unit. 所定のフレームの前記オーディオ信号のスペクトルを本スペクトルとして受信するとともに、そのフレームより後のフレームの前記オーディオ信号のスペクトルを冗長スペクトルとして受信する受信部
をさらに備え、
前記スペクトル抽出部は、前記本スペクトルにエラーが発生している場合、前記冗長スペクトルの一部を前記部分スペクトルとして抽出する
請求項１に記載の信号処理装置。A receiving unit that receives a spectrum of the audio signal of a predetermined frame as a main spectrum and receives a spectrum of the audio signal of a frame after the frame as a redundant spectrum;
The signal processing apparatus according to claim 1, wherein the spectrum extraction unit extracts a part of the redundant spectrum as the partial spectrum when an error occurs in the main spectrum. 信号処理装置が、
フレーム単位のオーディオ信号のスペクトルの一部を部分スペクトルとして抽出するスペクトル抽出ステップと、
前記スペクトル抽出ステップの処理により抽出された前記部分スペクトルを逆直交変換する部分逆直交変換ステップと、
前記部分逆直交変換ステップの処理による逆直交変換の結果得られる部分オーディオ信号に基づいて、前記オーディオ信号の第１の代替信号を生成する第１の代替信号生成ステップと
信号処理方法。The signal processor
A spectral extraction step for extracting a part of the spectrum of the audio signal in frame units as a partial spectrum;
A partial inverse orthogonal transform step of performing an inverse orthogonal transform on the partial spectrum extracted by the processing of the spectrum extraction step;
A first alternative signal generating step for generating a first alternative signal of the audio signal based on a partial audio signal obtained as a result of the inverse orthogonal transform by the processing of the partial inverse orthogonal transform step, and a signal processing method. コンピュータに、
フレーム単位のオーディオ信号のスペクトルの一部を部分スペクトルとして抽出するスペクトル抽出ステップと、
前記スペクトル抽出ステップの処理により抽出された前記部分スペクトルを逆直交変換する部分逆直交変換ステップと、
前記部分逆直交変換ステップの処理による逆直交変換の結果得られる部分オーディオ信号に基づいて、前記オーディオ信号の第１の代替信号を生成する第１の代替信号生成ステップと
を含む処理を実行させるためのプログラム。On the computer,
A spectral extraction step for extracting a part of the spectrum of the audio signal in frame units as a partial spectrum;
A partial inverse orthogonal transform step of performing an inverse orthogonal transform on the partial spectrum extracted by the processing of the spectrum extraction step;
A first alternative signal generation step of generating a first alternative signal of the audio signal based on a partial audio signal obtained as a result of the inverse orthogonal transformation by the processing of the partial inverse orthogonal transformation step. Program.

Images