Home - News ( United States | United Kingdom | Italy | Germany ) - Football scores

Showing content from https://patents.google.com/patent/JP5308376B2/en below:

JP5308376B2 - Sound signal pseudo localization system, method, sound signal pseudo localization decoding apparatus and program

［第一実施形態］
第一実施形態の音信号擬似定位装置は、拡張擬似定位付与部１、ＬＲ変換部２及びＭＳ変換部３を含む。 [First embodiment]
The sound signal pseudo-localization device according to the first embodiment includes an extended pseudo-localization providing unit 1, an LR conversion unit 2, and an MS conversion unit 3.

第一入力信号Ｓ^ｉ _１（ｔ）及び第二入力信号Ｓ^ｉ _２（ｔ）がＭＳ変換部３に入力される。Ｌチャネルの音声信号が第一入力信号Ｓ^ｉ _１（ｔ）とされ、Ｒチャネルの音声信号が第二入力信号Ｓ^ｉ _２（ｔ）とされる。ｔはサンプル番号である。 The first input signal S ⁱ ₁ (t) and the second input signal S ⁱ ₂ (t) are input to the MS conversion unit 3. The L channel audio signal is the first input signal S ⁱ ₁ (t), and the R channel audio signal is the second input signal S ⁱ ₂ (t). t is a sample number.

ＭＳ変換部３は、第一入力信号Ｓ^ｉ _１（ｔ）及び第二入力信号Ｓ^ｉ _２（ｔ）を下式（１），（２）に従いＭ信号Ｓ_Ｍ（ｔ）及びＳ信号Ｓ_Ｓ（ｔ）に変換する（ステップＳ１、図１４）。すなわち、第一入力信号Ｓ^ｉ _１（ｔ）と第二入力信号Ｓ^ｉ _２（ｔ）とを加算してＭ信号Ｓ_Ｍ（ｔ）とし、第一入力信号Ｓ^ｉ _１（ｔ）から第二入力信号Ｓ^ｉ _２（ｔ）を減算してＳ信号Ｓ_Ｓ（ｔ）とする。変換されたＭ信号Ｓ_Ｍ（ｔ）及びＳ信号Ｓ_Ｓ（ｔ）は、拡張擬似定位付与部１に送られる。
Ｓ_Ｍ（ｔ）＝Ｓ^ｉ _１（ｔ）＋Ｓ^ｉ _２（ｔ） …（１）
ï¼³_Ｓ（ｔ）＝Ｓ^ｉ _１（ｔ）−Ｓ^ｉ _２（ｔ） …（２） The MS conversion unit 3 converts the first input signal S ⁱ ₁ (t) and the second input signal S ⁱ ₂ (t) into the M signal S _M (t) and the S signal S _S according to the following expressions (1) and (2). Conversion into (t) (step S1, FIG. 14). That is, the first input signal S ⁱ ₁ (t) and the second input signal S ⁱ ₂ (t) are added to obtain the M signal S _M (t), and the second input signal S ⁱ ₁ (t) is changed to the second input signal S ⁱ ₁ (t). The input signal S ⁱ ₂ (t) is subtracted to obtain an S signal S _S (t). The converted M signal S _M (t) and S signal S _S (t) are sent to the extended pseudo-localization providing unit 1.
S _M (t) = S ⁱ ₁ (t) + S ⁱ ₂ (t) (1)
S _S (t) = S ⁱ ₁ (t) −S ⁱ ₂ (t) (2)

拡張擬似定位付与部１は、下式（３），（４）に従い復号Ｍ信号Ｓ^ｏ _Ｍ（ｔ）と復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）を出力する（ステップＳ２）。復号Ｍ信号Ｓ^ｏ _Ｍ（ｔ）及び復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）は、ＬＲ変換部２に送られる。Ｎは地点数であり定位を与えることができる方向の総数である。Ｎは２以上の整数である。ｎは定位を与えようとする地点情報であり、この例では定位を与える方向の番号である。ｎは０以上Ｎ−１以下の整数である。
Ｓ^ｏ _Ｍ（ｔ）＝Ｓ_Ｍ（ｔ） …（３）
Ｓ^ｏ _Ｓ（ｔ）＝（Ｎ−２ｎ−１）＊Ｓ_Ｍ（ｔ）／Ｎ＋（１／Ｎ）＊Ｓ_Ｓ（ｔ） …（４） The extended pseudo-localization providing unit 1 outputs the decoded M signal S ^o _M (t) and the decoded S signal S ^o _S (t) according to the following expressions (3) and (4) (step S2). The decoded M signal S ^o _M (t) and the decoded S signal S ^o _S (t) are sent to the LR converter 2. N is the number of points and the total number of directions in which localization can be given. N is an integer of 2 or more. n is point information to be given a localization, and in this example, is a direction number for giving a localization. n is an integer of 0 or more and N−1 or less.
S ^o _M (t) = S _M (t) (3)
S ^o _S (t) = (N−2n−1) * S _M (t) / N + (1 / N) * S _S (t) (4)

なお、地点数Ｎは通信を開始する際のプロトコルで取得して音信号擬似定位システムを構成する各装置に記憶しておいてもよいし、パケットのヘッダ情報に組み込んでおいてもよいし、別途符号の一部に組み込んでおいてもよい。地点数Ｎを予め定めておいてもよい。   The number N of points may be acquired by a protocol when starting communication and stored in each device constituting the sound signal pseudo-localization system, or may be incorporated in the header information of the packet. You may incorporate in a part of code | symbol separately. The number N of points may be determined in advance.

定位を与える方向の番号は０からＮ−１の間で任意に決めることができるが、通信開始時のプロトコルで取得できる地点番号を用いてもよい。もちろん、地点番号が重複しないようにするために、ｎは既に定位を与えた地点の地点番号以外の地点番号の中から選択される。   The number of the direction in which the localization is given can be arbitrarily determined between 0 and N-1, but a point number that can be acquired by a protocol at the start of communication may be used. Of course, in order not to overlap the spot numbers, n is selected from spot numbers other than the spot numbers of the spots that have already been localized.

ＬＲ変換部２は、復号Ｍ信号Ｓ^ｏ _Ｍ（ｔ）及び復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）を用いて、下式（５），（６）に従い第一出力信号Ｓ^ｏ _１（ｔ）及び第二出力信号Ｓ^ｏ _２（ｔ）を生成し出力する（ステップＳ３）。すなわち、ＬＲ変換部２は、復号Ｍ信号Ｓ^ｏ _Ｍ（ｔ）と復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）とを加算して２で割って第一出力信号を生成し、復号Ｍ信号Ｓ^ｏ _Ｍ（ｔ）から復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）を減算して２で割って第二出力信号を生成する。
Ｓ^ｏ _１（ｔ）＝（Ｓ^ｏ _Ｍ（ｔ）＋Ｓ^ｏ _Ｓ（ｔ））／２ …（５）
Ｓ^ｏ _２（ｔ）＝（Ｓ^ｏ _Ｍ（ｔ）−Ｓ^ｏ _Ｓ（ｔ））／２ …（６）
このように、地点情報ｎに応じた信号処理をＭ信号及びＳ信号に対して行うことにより、地点ごとに異なる音源位置を定めることが可能となる。 The LR converter 2 uses the decoded M signal S ^o _M (t) and the decoded S signal S ^o _S (t), and according to the following equations (5) and (6), the first output signal S ^o ₁ (t) and A second output signal S ^o ₂ (t) is generated and output (step S3). That is, the LR converter 2 adds the decoded M signal S ^o _M (t) and the decoded S signal S ^o _S (t) and divides by 2 to generate a first output signal, and the decoded M signal S ^o _M The decoded S signal S ^o _S (t) is subtracted from (t) and divided by 2 to generate a second output signal.
S ^o ₁ (t) = (S ^o _M (t) + S ^o _S (t)) / 2 (5)
S ^o ₂ (t) = (S ^o _M (t) −S ^o _S (t)) / 2 (6)
Thus, by performing signal processing according to the point information n on the M signal and the S signal, it is possible to determine a different sound source position for each point.

［第二実施形態］
第二実施形態の音信号擬似定位装置は、図２に例示するように、符号化装置１００及び復号装置２００を含む。符号化装置１００は、ＭＳ変換部３、第一符号化部４及び第二符号化部５を含む。復号装置２００は、拡張擬似定位付与部１、ＬＲ変換部２、第一復号部６及び第二復号部７を含む。 [Second Embodiment]
The sound signal pseudo-localization device according to the second embodiment includes an encoding device 100 and a decoding device 200 as illustrated in FIG. The encoding device 100 includes an MS conversion unit 3, a first encoding unit 4, and a second encoding unit 5. The decoding device 200 includes an extended pseudo-localization adding unit 1, an LR conversion unit 2, a first decoding unit 6, and a second decoding unit 7.

符号化装置１００のＭＳ変換部３は、第一実施形態と同様にして、第一入力信号と第二入力信号とを加算してＭ信号とし、第一入力信号から第二入力信号を減算してＳ信号とする（ステップＳ１、図１５）。生成されたＭ信号は第一符号化部４に送られ、生成されたＳ信号は第二符号化部５に送られる。   As in the first embodiment, the MS conversion unit 3 of the encoding device 100 adds the first input signal and the second input signal to obtain an M signal, and subtracts the second input signal from the first input signal. S signal (step S1, FIG. 15). The generated M signal is sent to the first encoding unit 4, and the generated S signal is sent to the second encoding unit 5.

第一符号化部４は、Ｍ信号を符号化してＭ符号とする（ステップＳ４）。例えば、Ｇ．７１１．１、Ｇ．７１１に規定された手法により、符号化することができる。この発明において「符号化」すると言った場合には同様である。
第二符号化部５は、Ｓ信号を符号化してＳ符号とする（ステップＳ５）。
Ｍ符号及びＳ符号は復号装置２００に送られる。 The first encoding unit 4 encodes the M signal into an M code (step S4). For example, G. 711.1, G.G. It can be encoded by the method defined in H.711. The same applies to the case of “encoding” in the present invention.
The second encoding unit 5 encodes the S signal into an S code (step S5).
The M code and S code are sent to the decoding apparatus 200.

復号装置２００の第一復号部６は、第一符号化部４による符号化に対応する復号方法によりＭ符号を復号して、仮復号Ｍ信号を生成する。仮復号Ｍ信号は拡張擬似定位付与部１に送られる（ステップＳ６）。   The first decoding unit 6 of the decoding device 200 decodes the M code by a decoding method corresponding to the encoding by the first encoding unit 4 to generate a provisionally decoded M signal. The provisional decoded M signal is sent to the extended pseudo-localization providing unit 1 (step S6).

第二復号部７は、第二符号化部５による符号化に対応する復号方法によりＳ符号を復号して、仮復号Ｓ信号を生成する。仮復号Ｓ信号は拡張擬似定位付与部１に送られる（ステップＳ７）。   The second decoding unit 7 decodes the S code by a decoding method corresponding to the encoding by the second encoding unit 5 to generate a provisionally decoded S signal. The provisional decoding S signal is sent to the extended pseudo-localization providing unit 1 (step S7).

拡張擬似定位付与部１は、仮復号Ｍ信号をＳ_Ｍ（ｔ）、仮復号Ｓ信号をＳ_Ｓ（ｔ）として、第一実施形態の拡張擬似定位付与部１と同様に、上記式（３），（４）に従い復号Ｍ信号Ｓ^ｏ _Ｍ（ｔ）と復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）を出力する（ステップＳ２）。復号Ｍ信号Ｓ^ｏ _Ｍ（ｔ）及び復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）は、ＬＲ変換部２に送られる。 Extended pseudo localization imparting unit 1, the preliminary decoding M signal S _{M (t),} a temporary decoded S signal as S _{S (t),} similarly to the extended pseudo localization imparting unit 1 of the first embodiment, the equation (3 ) And (4), the decoded M signal S ^o _M (t) and the decoded S signal S ^o _S (t) are output (step S2). The decoded M signal S ^o _M (t) and the decoded S signal S ^o _S (t) are sent to the LR converter 2.

ＬＲ変換部２は、第一実施形態のＬＲ変換部２と同様に、復号Ｍ信号Ｓ^ｏ _Ｍ（ｔ）及び復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）を用いて、上記式（５），（６）に従い第一出力信号Ｓ^ｏ _１（ｔ）及び第二出力信号Ｓ^ｏ _２（ｔ）を生成し出力する（ステップＳ３）。 Similarly to the LR converter 2 of the first embodiment, the LR converter 2 uses the decoded M signal S ^o _M (t) and the decoded S signal S ^o _S (t), and the above equations (5), (6 ), The first output signal S ^o ₁ (t) and the second output signal S ^o ₂ (t) are generated and output (step S3).

このように、Ｍ信号及びＳ信号を符号化する場合においても、地点情報ｎに応じた信号処理を復号したＭ信号及びＳ信号に対して行うことにより、地点ごとに異なる音源位置を定めることが可能となる。   As described above, even when the M signal and the S signal are encoded, different sound source positions can be determined for each point by performing signal processing corresponding to the point information n on the decoded M signal and S signal. It becomes possible.

［第三実施形態］
第三実施形態の音信号擬似定位システムは、符号化装置１００及び復号装置２００を含む。符号化装置１００は、図３に例示するように、ＭＳ変換部３、第一信号符号化部４１、第二信号符号化部５１、第一ゲイン符号化部４２、第二ゲイン符号化部５２、第一符号多重化部４３及び第二符号多重化部５３を含む。復号装置２００は、図４に例示するように、第一符号分離部９１、第二符号分離部９２、第一部分復号部６１、第二部分復号部６２、第一ゲイン復号部８１、第二ゲイン復号部８２、第一乗算部１０１、第二乗算部１０２、第三乗算部１０３、加算部１１１及びＬＲ変換部２を含む。 [Third embodiment]
The sound signal pseudo localization system of the third embodiment includes an encoding device 100 and a decoding device 200. As illustrated in FIG. 3, the encoding device 100 includes an MS conversion unit 3, a first signal encoding unit 41, a second signal encoding unit 51, a first gain encoding unit 42, and a second gain encoding unit 52. The first code multiplexing unit 43 and the second code multiplexing unit 53 are included. As illustrated in FIG. 4, the decoding device 200 includes a first code separation unit 91, a second code separation unit 92, a first partial decoding unit 61, a second partial decoding unit 62, a first gain decoding unit 81, and a second gain. A decoding unit 82, a first multiplication unit 101, a second multiplication unit 102, a third multiplication unit 103, an addition unit 111 and an LR conversion unit 2 are included.

符号化装置１００のＭＳ変換部３は、第一実施形態と同様にして、第一入力信号と第二入力信号とを加算してＭ信号とし、第一入力信号から第二入力信号を減算してＳ信号とする（ステップＳ１、図１６）。生成されたＭ信号は第一信号符号化部４１及び第一ゲイン符号化部４２に送られ、生成されたＳ信号は第二信号符号化部５１及び第二ゲイン符号化部５２に送られる。   As in the first embodiment, the MS conversion unit 3 of the encoding device 100 adds the first input signal and the second input signal to obtain an M signal, and subtracts the second input signal from the first input signal. S signal (step S1, FIG. 16). The generated M signal is sent to the first signal encoding unit 41 and the first gain encoding unit 42, and the generated S signal is sent to the second signal encoding unit 51 and the second gain encoding unit 52.

第一ゲイン符号化部４２は、Ｍ信号Ｓ_Ｍ（ｔ）のゲインｇを次式に従い算出し、算出されたゲインｇを量子化してＭゲイン符号Ｃ_ｇｍとする（ステップＳ８）。ゲインｇは、入力された信号の大きさを表わす代表値である。ゲインとして１フレームを構成するサンプルの平均値を用いている。次式に示した方法以外にもスカラ量子化を用いることもできる。
ｇ＝（１／Ｋ）＊Σ^{Ｋ−１} _{ｔ＝０}（Ｓ_Ｍ（ｔ））^２ （ゲインの算出）
Ｃ_ｇｍ＝（１／２）＊［ｌｏｇ_２（ｇ）］−ｃｏｎｓｔ （ゲインの量子化） The first gain encoding unit 42 calculates the gain g of the M signal S _M (t) according to the following equation, and quantizes the calculated gain g to obtain an M gain code C _gm (step S8). The gain g is a representative value representing the magnitude of the input signal. An average value of samples constituting one frame is used as the gain. In addition to the method shown in the following equation, scalar quantization can also be used.
g = (1 / K) * ΣK ^−1 _{t = 0} ( _SM (t)) ² (calculation of gain)
C _gm = (1/2) * [log ₂ (g)]-const (gain quantization)

Ｋは１フレームのサンプルの数であり、［・］は・の整数部分を出力する関数であり、ｃｏｎｓｔは音信号擬似定位装置に求められる性能や仕様に応じて適宜定められる任意の定数である。第一ゲイン符号化部４２は、Ｍゲイン符号Ｃ_ｇｍを、次式に従い逆量子化して復号ＭゲインＡ’ｍを求め、第一信号符号化部４１に入力する。
Ａ’ｍ＝２^{Ｃｇｍ＋ｃｏｎｓｔ} K is the number of samples in one frame, [•] is a function that outputs the integer part of •, and const is an arbitrary constant that is appropriately determined according to the performance and specifications required of the sound signal pseudo-localization device. . The first gain encoding unit 42 inversely quantizes the M gain code C _{gm according} to the following equation to obtain a decoded M gain A′m, and inputs the decoded M gain A′m to the first signal encoding unit 41.
A'm = 2 ^{Cgm + const}

第一信号符号化部４１は、Ｍ信号Ｓ_Ｍ（ｔ）を復号ＭゲインＡ’ｍで正規化したのち、ベクトル量子化などを用いて符号化し、正規化Ｍ信号符号とする（ステップＳ９）。例えば、Ｓ_Ｍ（ｔ）／Ａ’ｍとすることにより正規化を行う。 The first signal encoding unit 41 normalizes the M signal S _M (t) with the decoded M gain A′m and then encodes it using vector quantization or the like to obtain a normalized M signal code (step S9). . For example, normalization is performed by setting S _M (t) / A′m.

第一符号多重化部４３は、Ｍゲイン符号Ｃ_ｇｍ及び正規化Ｍ信号符号を含む拡張Ｍ符号を生成する（ステップＳ１０）。例えば、Ｍゲイン符号Ｃ_ｇｍ及び正規化Ｍ信号符号を所定の順序で並べて拡張Ｍ符号とする。ネットワークを通じて拡張Ｍ符号を伝送する必要がある場合は、ヘッダ情報などを付加してもよい。生成された拡張Ｍ符号は、復号装置２００に送られる。 The first code multiplexing unit 43 generates an extended M code including the M gain code C _gm and the normalized M signal code (step S10). For example, an M gain code C _gm and a normalized M signal code are arranged in a predetermined order to form an extended M code. When it is necessary to transmit the extended M code through the network, header information or the like may be added. The generated extended M code is sent to decoding apparatus 200.

第二ゲイン符号化部５２は、第一ゲイン符号化部４２と同様に、Ｓ信号Ｓ_Ｓ（ｔ）のゲインｇを（ゲインの算出）の式に従い算出し、算出されたゲインｇを（ゲインの量子化）の式に従い量子化してＳゲイン符号Ｃ_ｇｓとする（ステップＳ１１）。また、第二ゲイン符号化部５２は、Ｓゲイン符号Ｃ_ｇｓを、次式に従い逆量子化して復号ＳゲインＡ’ｓを求め、第二信号符号化部５１に入力する。
Ａ’＝２^{Ｃｇｓ＋ｃｏｎｓｔ} Similar to the first gain encoding unit 42, the second gain encoding unit 52 calculates the gain g of the S signal S _S (t) according to the equation (calculation of gain), and calculates the calculated gain g (gain Quantization is performed to obtain an S gain code C _gs (step S11). Further, the second gain encoding unit 52 dequantizes the S gain code C _{gs according} to the following equation to obtain a decoded S gain A ′s, and inputs the decoded S gain A ′s to the second signal encoding unit 51.
A ′ = 2 ^{Cgs + const}

第二信号符号化部５１は、第一信号符号化部４１と同様に、Ｓ信号Ｓ_Ｓ（ｔ）を復号ＳゲインＡ’ｓで正規化したのち、ベクトル量子化などを用いて符号化し、正規化Ｓ信号符号とする（ステップＳ１２）。 Similarly to the first signal encoding unit 41, the second signal encoding unit 51 normalizes the S signal S _S (t) with the decoded S gain A ′s, and then encodes it using vector quantization or the like. The normalized S signal code is set (step S12).

第二符号多重化部５３は、第一符号多重化部４３と同様に、Ｓゲイン符号Ｃ_ｇｓ及び正規化Ｓ信号符号を含む拡張Ｓ符号を生成する（ステップＳ１３）。 Similar to the first code multiplexing unit 43, the second code multiplexing unit 53 generates an extended S code including the S gain code C _gs and the normalized S signal code (step S13).

復号装置２００の第一符号分離部９１（図４）は、拡張Ｍ符号からＭゲイン符号Ｃ_ｇｍ及び正規化Ｍ信号符号を分離する（ステップＳ１４）。Ｍゲイン符号は第一ゲイン復号部８１に送られ、正規化Ｍ信号符号は第一部分復号部６１に送られる。 The first code separation unit 91 (FIG. 4) of the decoding device 200 separates the M gain code C _gm and the normalized M signal code from the extended M code (step S14). The M gain code is sent to the first gain decoding unit 81, and the normalized M signal code is sent to the first partial decoding unit 61.

第一部分復号部６１は、分離された正規化Ｍ信号符号を例えば逆量子化することにより復号して復号正規化Ｍ信号Ｓ’_Ｍ（ｔ）とする（ステップＳ１５）。復号正規化Ｍ信号Ｓ’_Ｍ（ｔ）は、第一乗算部１０１に送られる。 The first partial decoding unit 61 decodes the separated normalized M signal code by, for example, inverse quantization to obtain a decoded normalized M signal S ′ _M (t) (step S15). The decoded normalized M signal S ′ _M (t) is sent to the first multiplication unit 101.

第一ゲイン復号部８１は、Ｍゲイン符号Ｃ_ｇｍを例えば次式により逆量子化することにより復号して復号ＭゲインＡ’ｍを得る（ステップＳ１６）。復号ＭゲインＡ’ｍは、第一乗算部１０１に送られる。
Ａ’ｍ＝２^{Ｃｇｍ＋ｃｏｎｓｔ} The first gain decoding unit 81 decodes the M gain code C _gm by, for example, inverse quantization according to the following equation to obtain a decoded M gain A′m (step S16). The decoded M gain A′m is sent to the first multiplier 101.
A'm = 2 ^{Cgm + const}

第一乗算部１０１は、復号正規化Ｍ信号Ｓ’_Ｍ（ｔ）と復号ＭゲインＡ’ｍとを乗算して、復号Ｍ信号を生成する（ステップＳ１７）。復号Ｍ信号は、ＬＲ変換部２及び第二乗算部１０２に送られる。 The first multiplication unit 101 multiplies the decoded normalized M signal S ′ _M (t) and the decoded M gain A′m to generate a decoded M signal (step S17). The decoded M signal is sent to the LR converter 2 and the second multiplier 102.

第二符号分離部９２は、拡張Ｓ符号からＳゲイン符号Ｃ_ｇｓ及び正規化Ｓ信号符号を分離する（ステップＳ１８）。Ｓゲイン符号は第二ゲイン復号部８２に送られ、正規化Ｓ信号符号は第二部分復号部６２に送られる。 The second code separation unit 92 separates the S gain code C _gs and the normalized S signal code from the extended S code (step S18). The S gain code is sent to the second gain decoding unit 82, and the normalized S signal code is sent to the second partial decoding unit 62.

第二部分復号部６２は、分離された正規化Ｓ信号符号を例えば逆量子化することにより復号して復号正規化Ｓ信号Ｓ’_Ｓ（ｔ）とする（ステップＳ１９）。復号正規化Ｓ信号Ｓ’_Ｓ（ｔ）は、第三乗算部１０３に送られる。 The second partial decoding unit 62 decodes the separated normalized S signal code by inverse quantization, for example, to obtain a decoded normalized S signal S ′ _S (t) (step S19). The decoded normalized S signal S ′ _S (t) is sent to the third multiplication unit 103.

第二ゲイン復号部８２は、Ｓゲイン符号Ｃ_ｇｓを例えば次式により逆量子化することにより復号して復号ＳゲインＡ’ｓを得る（ステップＳ２０）。復号ＳゲインＡ’ｓは、拡張擬似定位ゲイン演算部１１に送られる。
Ａ’ｓ＝２^{Ｃｇｓ＋ｃｏｎｓｔ} The second gain decoding unit 82 decodes the S gain code C _gs by, for example, inverse quantization using the following equation to obtain a decoded S gain A ′s (step S20). The decoded S gain A ′s is sent to the extended pseudo-localization gain calculator 11.
A's = 2 ^{Cgs + const}

拡張擬似定位ゲイン演算部１１は、次式により定義される第一擬似ＳゲインＡ^１ _ｓ及び第二擬似ＳゲインＡ^２ _ｓを計算する（ステップＳ２１）。第一擬似ＳゲインＡ^１ _ｓは第二乗算部１０２に送られ、第二擬似ＳゲインＡ^２ _ｓは第三乗算部１０３に送られる。
Ａ^１ _ｓ＝（Ｎ−２ｎ−１）／Ｎ
Ａ^２ _ｓ＝Ａ’ｓ／Ｎ
ここで、第一実施形態と同様に、地点数Ｎ≧２は定位を与えることができる方向の総数である、地点情報ｎは定位を与える方向の番号である。 The extended pseudo localization gain calculator 11 calculates the first pseudo S gain A ¹ _s and the second pseudo S gain A ² _s defined by the following equations (step S21). The first pseudo S gain A ¹ _s is sent to the second multiplication unit 102, and the second pseudo S gain A ² _s is sent to the third multiplication unit 103.
A ¹ _s = (N−2n−1) / N
A ² _s = A's / N
Here, as in the first embodiment, the number of points N ≧ 2 is the total number of directions in which localization can be given, and the point information n is the number of the direction in which localization is given.

第二乗算部１０２は、復号Ｍ信号と第一擬似Ｓゲインとを乗算して第一定位Ｓ信号とする（ステップＳ２２）。第一定位Ｓ信号は加算部１１１に送られる。
第三乗算部１０３は、復号正規化Ｓ信号と第二擬似Ｓゲインとを乗算して第二定位Ｓ信号とする（ステップＳ２３）。第二定位Ｓ信号は加算部１１１に送られる。 The second multiplication unit 102 multiplies the decoded M signal and the first pseudo S gain to obtain a first constant S signal (step S22). The first constant S signal is sent to the adding unit 111.
The third multiplication unit 103 multiplies the decoded normalized S signal by the second pseudo S gain to obtain a second localization S signal (step S23). The second localization S signal is sent to the adding unit 111.

加算部１１１は、第一定位Ｓ信号と第二定位Ｓ信号とを加算して復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）とする（ステップＳ２４’）。復号Ｓ信号は、ＬＲ変換部２に送られる。
ＬＲ変換部２は、第一実施形態のＬＲ変換部２と同様に、復号Ｍ信号Ｓ^ｏ _Ｍ（ｔ）及び復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）を用いて、上記式（５），（６）に従い第一出力信号Ｓ^ｏ _１（ｔ）及び第二出力信号Ｓ^ｏ _２（ｔ）を生成し出力する（ステップＳ３）。 The adding unit 111 adds the first localization S signal and the second localization S signal to obtain a decoded S signal S ^o _S (t) (step S24 ′). The decoded S signal is sent to the LR converter 2.
Similarly to the LR converter 2 of the first embodiment, the LR converter 2 uses the decoded M signal S ^o _M (t) and the decoded S signal S ^o _S (t), and the above equations (5), (6 ), The first output signal S ^o ₁ (t) and the second output signal S ^o ₂ (t) are generated and output (step S3).

このように、符号化装置がゲイン符号化を含む符号化方法を用いる場合においても、地点情報ｎに応じた信号処理を復号したＭ信号及びＳ信号に対して行うことにより、地点ごとに異なる音源位置を定めることが可能となる。
また、第三実施形態のように、ミキサ３００でゲインのみを復号して、そのゲインを用いて擬似定位を与えることにより、ミキサの処理量が従来よりも小さくなる。ミキサ３００で、音信号全体を復号しないためである。 As described above, even when the encoding apparatus uses an encoding method including gain encoding, a sound source that differs for each point is obtained by performing signal processing corresponding to the point information n on the decoded M signal and S signal. The position can be determined.
Further, as in the third embodiment, only the gain is decoded by the mixer 300, and the pseudo localization is given using the gain, so that the processing amount of the mixer becomes smaller than that of the conventional method. This is because the mixer 300 does not decode the entire sound signal.

［第四実施形態］
第四実施形態の音信号擬似定位システムは、図５に例示するように、符号化装置１００、復号装置２００及びミキサ３００を含む。 [Fourth embodiment]
The sound signal pseudo-localization system of the fourth embodiment includes an encoding device 100, a decoding device 200, and a mixer 300, as illustrated in FIG.

符号化装置１００は、第三実施形態の符号化装置１００と同様に図３に例示するように、ＭＳ変換部３、第一信号符号化部４１、第二信号符号化部５１、第一ゲイン符号化部４２、第二ゲイン符号化部５２、第一符号多重化部４３、第二符号多重化部５３を含む。ミキサ３００は、図６に例示するように、符号分離部９、ゲイン復号部８、ゲイン符号化部１２、第一拡張擬似定位ゲイン演算部１６１及び符号多重化部１３を例えば含む。復号装置２００は、図７に例示するように、第一符号分離部９１、第二符号分離部９２、第一部分復号部６１、第二部分復号部６２、第一ゲイン復号部８１、第二ゲイン復号部８２、第一乗算部１０１、第二乗算部１０４、第三乗算部１０５、第二拡張擬似定位ゲイン演算部１６２、加算部１１２及びＬＲ変換部２を含む。   Similar to the encoding device 100 of the third embodiment, the encoding device 100 includes an MS conversion unit 3, a first signal encoding unit 41, a second signal encoding unit 51, a first gain, as illustrated in FIG. An encoding unit 42, a second gain encoding unit 52, a first code multiplexing unit 43, and a second code multiplexing unit 53 are included. As illustrated in FIG. 6, the mixer 300 includes, for example, a code separation unit 9, a gain decoding unit 8, a gain encoding unit 12, a first extended pseudo-localization gain calculating unit 161, and a code multiplexing unit 13. As illustrated in FIG. 7, the decoding device 200 includes a first code separation unit 91, a second code separation unit 92, a first partial decoding unit 61, a second partial decoding unit 62, a first gain decoding unit 81, and a second gain. A decoding unit 82, a first multiplication unit 101, a second multiplication unit 104, a third multiplication unit 105, a second extended pseudo-localization gain calculation unit 162, an addition unit 112 and an LR conversion unit 2 are included.

符号化装置１００は第三実施形態の符号化装置１００と同様であり、図１７に例示したステップＳ１からステップＳ１３の処理を行う。符号化装置１００により生成された拡張Ｍ符号は復号装置２００に送られ、拡張Ｓ符号はミキサ３００に送られる。拡張Ｍ符号はミキサ３００を介して復号装置２００に送られてもよい。   The encoding apparatus 100 is the same as the encoding apparatus 100 of the third embodiment, and performs the processing from step S1 to step S13 illustrated in FIG. The extended M code generated by the encoding apparatus 100 is sent to the decoding apparatus 200, and the extended S code is sent to the mixer 300. The extended M code may be sent to the decoding device 200 via the mixer 300.

ミキサ３００の符号分離部９（図６）は、拡張Ｓ符号からＳゲイン符号及び正規化Ｓ信号符号を分離する（ステップＳ１８）。正規化Ｓ信号符号は符号多重化部１３に送られ、Ｓゲイン符号はゲイン復号部８に送られる。
ゲイン復号部８は、Ｓゲイン符号Ｃ_ｇｓを例えば次式により逆量子化することにより復号して復号ＳゲインＡ’ｓを得る（ステップＳ２０）。復号ＳゲインＡ’ｓは、第一拡張擬似定位ゲイン演算部１６１に送られる。
Ａ’ｓ＝２^{Ｃｇｓ＋ｃｏｎｓｔ} The code separation unit 9 (FIG. 6) of the mixer 300 separates the S gain code and the normalized S signal code from the extended S code (step S18). The normalized S signal code is sent to the code multiplexing unit 13, and the S gain code is sent to the gain decoding unit 8.
The gain decoding unit 8 decodes the S gain code C _gs by, for example, inverse quantization using the following equation to obtain a decoded S gain A ′s (step S20). The decoded S gain A ′s is sent to the first extended pseudo-localization gain calculator 161.
A's = 2 ^{Cgs + const}

第一拡張擬似定位ゲイン演算部１６１は、次式により定義される擬似ＳゲインＡ^{ｐｓｅｕｄｏ} _ｓを計算する（ステップＳ２４）。地点数Ｎ≧２は、定位を与えることができる方向の総数である。擬似ＳゲインＡ^{ｐｓｅｕｄｏ} _ｓは、ゲイン符号化部１２に送られる。
Ａ^{ｐｓｅｕｄｏ} _ｓ＝Ａ’ｓ／Ｎ The first extended pseudo-localization gain calculator 161 calculates a pseudo S gain A ^pseudo _s defined by the following equation (step S24). The number of points N ≧ 2 is the total number of directions in which localization can be given. The pseudo S gain A ^pseudo _s is sent to the gain encoding unit 12.
A ^pseudo _s = A's / N

ゲイン符号化部１２は、擬似ＳゲインＡ^{ｐｓｅｕｄｏ} _ｓを符号化してＳゲイン符号とする（ステップＳ２５）。Ｓゲイン符号は、符号多重化部１３に送られる。
符号多重化部１３は、正規化Ｓ信号符号及びゲイン符号化部１２により生成されたＳゲイン符号を含むＳ符号を生成する（ステップＳ２６）。生成されたＳ符号は、復号装置２００に送られる。 The gain encoding unit 12 encodes the pseudo S gain A ^pseudo _s into an S gain code (step S25). The S gain code is sent to the code multiplexing unit 13.
The code multiplexing unit 13 generates an S code including the normalized S signal code and the S gain code generated by the gain encoding unit 12 (step S26). The generated S code is sent to the decoding device 200.

復号装置２００の第一符号分離部９１（図７）は、拡張Ｍ符号からＭゲイン符号Ｃ_ｇｍ及び正規化Ｍ信号符号を分離する（ステップＳ１４）。Ｍゲイン符号は第一ゲイン復号部８１に送られ、正規化Ｍ信号符号は第一部分復号部６１に送られる。 The first code separation unit 91 (FIG. 7) of the decoding device 200 separates the M gain code C _gm and the normalized M signal code from the extended M code (step S14). The M gain code is sent to the first gain decoding unit 81, and the normalized M signal code is sent to the first partial decoding unit 61.

第一部分復号部６１は、分離された正規化Ｍ信号符号を例えば逆量子化することにより復号して復号正規化Ｍ信号Ｓ’_Ｍ（ｔ）とする（ステップＳ１５）。復号正規化Ｍ信号Ｓ’_Ｍ（ｔ）は、乗算部１０１に送られる。 The first partial decoding unit 61 decodes the separated normalized M signal code by, for example, inverse quantization to obtain a decoded normalized M signal S ′ _M (t) (step S15). The decoded normalized M signal S ′ _M (t) is sent to the multiplication unit 101.

第一ゲイン復号部８１は、Ｍゲイン符号Ｃ_ｇｍを例えば次式により逆量子化することにより復号して復号ＭゲインＡ’ｍを得る（ステップＳ１６）。復号ＭゲインＡ’ｍは、第一乗算部１０１に送られる。
Ａ’ｍ＝２^{Ｃｇｍ＋ｃｏｎｓｔ} The first gain decoding unit 81 decodes the M gain code C _gm by, for example, inverse quantization according to the following equation to obtain a decoded M gain A′m (step S16). The decoded M gain A′m is sent to the first multiplier 101.
A'm = 2 ^{Cgm + const}

第一乗算部１０１は、復号正規化Ｍ信号Ｓ’_Ｍ（ｔ）と復号ＭゲインＡ’ｍとを乗算して、復号Ｍ信号を生成する（ステップＳ１７）。復号Ｍ信号は、ＬＲ変換部２及び第三乗算部１０５に送られる。 The first multiplication unit 101 multiplies the decoded normalized M signal S ′ _M (t) and the decoded M gain A′m to generate a decoded M signal (step S17). The decoded M signal is sent to the LR converter 2 and the third multiplier 105.

第二符号分離部９２は、Ｓ符号からＳゲイン符号Ｃ_ｇｓ及び正規化Ｓ信号符号を分離する（ステップＳ１８’）。Ｓゲイン符号は第二ゲイン復号部８２に送られ、正規化Ｓ信号符号は第二部分復号部６２に送られる。 The second code separation unit 92 separates the S gain code C _gs and the normalized S signal code from the S code (step S18 ′). The S gain code is sent to the second gain decoding unit 82, and the normalized S signal code is sent to the second partial decoding unit 62.

第二部分復号部６２は、分離された正規化Ｓ信号符号を例えば逆量子化することにより復号して復号正規化Ｓ信号Ｓ’_Ｓ（ｔ）とする（ステップＳ１９）。復号正規化Ｓ信号Ｓ’_Ｓ（ｔ）は、第二乗算部１０４に送られる。 The second partial decoding unit 62 decodes the separated normalized S signal code by inverse quantization, for example, to obtain a decoded normalized S signal S ′ _S (t) (step S19). The decoded normalized S signal S ′ _S (t) is sent to the second multiplication unit 104.

第二ゲイン復号部８２は、Ｓゲイン符号Ｃ_ｇｓを例えば次式により逆量子化することにより復号して復号ＳゲインＡ’ｓを得る（ステップＳ２０）。復号ＳゲインＡ’ｓは、第二乗算部１０４に送られる。
Ａ’ｓ＝２^{Ｃｇｓ＋ｃｏｎｓｔ} The second gain decoding unit 82 decodes the S gain code C _gs by, for example, inverse quantization using the following equation to obtain a decoded S gain A ′s (step S20). The decoded S gain A ′s is sent to the second multiplier 104.
A's = 2 ^{Cgs + const}

第二乗算部１０４は、復号正規化Ｓ信号Ｓ’_Ｓ（ｔ）と復号ＳゲインＡ’ｓとを乗算して、第一復号Ｓ信号を生成する（ステップＳ２７）。第一復号Ｓ信号は、加算部１１２に送られる。
第二拡張擬似定位ゲイン演算部１６２は、次式により定義される擬似Ｍゲインｇｍ２を計算する（ステップＳ２８）。擬似Ｍゲインｇｍ２は、第三乗算部１０５に送られる。
ｇｍ２＝（Ｎ−２＊ｎ−１）／Ｎ The second multiplication unit 104 multiplies the decoded normalized S signal S ′ _S (t) and the decoded S gain A ′s to generate a first decoded S signal (step S27). The first decoded S signal is sent to the adding unit 112.
The second extended pseudo localization gain calculation unit 162 calculates a pseudo M gain gm2 defined by the following equation (step S28). The pseudo M gain gm2 is sent to the third multiplication unit 105.
gm2 = (N−2 * n−1) / N

第三乗算部１０５は、復号Ｍ信号と擬似Ｍゲインｇｍ２とを乗算して第二復号Ｍ信号とする（ステップＳ２９）。第二復号Ｍ信号は、加算部１１２に送られる。
加算部１１２は、第一復号Ｓ信号と第二復号Ｍ信号とを加算して復号Ｓ信号とする（ステップＳ３０）。復号Ｓ信号は、ＬＲ変換部２に送られる。 The third multiplication unit 105 multiplies the decoded M signal and the pseudo M gain gm2 to obtain a second decoded M signal (step S29). The second decoded M signal is sent to the adding unit 112.
The adder 112 adds the first decoded S signal and the second decoded M signal to obtain a decoded S signal (step S30). The decoded S signal is sent to the LR converter 2.

ＬＲ変換部２は、第一実施形態のＬＲ変換部２と同様に、復号Ｍ信号Ｓ^ｏ _Ｍ（ｔ）及び復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）を用いて、上記式（５），（６）に従い第一出力信号Ｓ^ｏ _１（ｔ）及び第二出力信号Ｓ^ｏ _２（ｔ）を生成し出力する（ステップＳ３）。
このように、符号化装置がゲイン符号化を含む符号化方法を用いる場合においても、地点情報ｎに応じた信号処理を復号したＭ信号及びＳ信号に対して行うことにより、地点ごとに異なる音源位置を定めることが可能となる。 Similarly to the LR converter 2 of the first embodiment, the LR converter 2 uses the decoded M signal S ^o _M (t) and the decoded S signal S ^o _S (t), and the above equations (5), (6 ), The first output signal S ^o ₁ (t) and the second output signal S ^o ₂ (t) are generated and output (step S3).
As described above, even when the encoding apparatus uses an encoding method including gain encoding, a sound source that differs for each point is obtained by performing signal processing corresponding to the point information n on the decoded M signal and S signal. The position can be determined.

［第五実施形態］
第五実施形態の音信号擬似定位システムは、３つ地点で通信を行うものである。以下、第一地点及び第二地点の符号化装置から送信された音信号符号に対してミキシングを行い、第三地点の符号化装置に送信する動作を説明する。 [Fifth embodiment]
The sound signal pseudo localization system of the fifth embodiment performs communication at three points. Hereinafter, an operation of performing mixing on the sound signal code transmitted from the encoding device at the first point and the second point and transmitting it to the encoding device at the third point will be described.

まず、重要度や発話状態に応じて、３つの符号化装置の何れかが主地点として選択されるとする。例えば、パワーが最も大きい音信号を符号化する符号化装置が主地点として選択される。また、特許第４０３３８４０号公報に記載されたＶＡＤ（Ｖｏｉｃｅ Ａｃｔｉｖｉｔｙ Ｄｅｔｅｃｔｏｒ）等の手法により、主地点となる符号化装置が選択されてもよい。この例では、第一地点の符号化装置が主地点として選択されたとする。   First, it is assumed that one of the three encoding devices is selected as the main point according to the importance level or the speech state. For example, an encoding device that encodes a sound signal having the largest power is selected as the main point. In addition, the encoding device serving as the main point may be selected by a technique such as VAD (Voice Activity Detector) described in Japanese Patent No. 4033840. In this example, it is assumed that the encoding device at the first point is selected as the main point.

ミキサ３００の拡張信号混合部１７１（図８）に主地点として選択された符号化装置が送信した拡張Ｍ符号及び拡張Ｓ符号が入力される。拡張信号混合部１７２には主地点として選択されなかった符号化装置が送信した拡張Ｍ符号及び拡張Ｓ符号が入力される。   The extended signal mixing unit 171 (FIG. 8) of the mixer 300 receives the extended M code and the extended S code transmitted from the encoding device selected as the main point. The extended signal mixing unit 172 receives the extended M code and the extended S code transmitted from the encoding device that has not been selected as the main point.

拡張Ｍ符号は、符号化装置に入力された第一入力信号と第二入力信号とを加算したＭ信号の大きさを表す代表値であるＭゲインを符号化したＭゲイン符号と、上記Ｍ信号を上記Ｍゲインで正規化した正規化Ｍ信号を符号化した正規化Ｍ信号符号と、復号化される音信号の品質を向上させるための付加情報を符号化した品質拡張Ｍ符号とを含む符号である。拡張Ｓ符号は、符号化装置に入力された第一入力信号から第二入力信号を減算したＳ信号の大きさを表す代表値であるＳゲインを符号化したＳゲイン符号と、Ｓ信号をＳゲインで正規化した正規化Ｓ信号を符号化した正規化Ｓ信号符号と、復号化される音信号の品質を向上させるための付加情報を符号化した品質拡張Ｓ符号とを含む符号である。   The extended M code includes an M gain code obtained by encoding an M gain, which is a representative value representing the magnitude of the M signal obtained by adding the first input signal and the second input signal input to the encoding device, and the M signal. A code including a normalized M signal code obtained by encoding a normalized M signal that has been normalized by the M gain and a quality extended M code obtained by encoding additional information for improving the quality of a decoded sound signal It is. The extended S code includes an S gain code obtained by encoding an S gain, which is a representative value representing the magnitude of the S signal obtained by subtracting the second input signal from the first input signal input to the encoding device, and the S signal as S It is a code including a normalized S signal code obtained by encoding a normalized S signal normalized by gain, and a quality extended S code obtained by encoding additional information for improving the quality of a decoded sound signal.

拡張Ｍ符号及び拡張Ｓ符号は、後述する図９に例示する構成を含む符号化装置１００により例えば生成される。
第一符号分離部９３は、拡張信号混合部１７１に入力された拡張Ｍ符号からＭゲイン符号、正規化Ｍ信号符号及び品質拡張Ｍ符号を分離する（ステップＡ１、図１８）。Ｍゲイン符号は第一ゲイン復号部８１に送られ、分離された正規化Ｍ信号符号は、第一符号多重化部１３１に送られ、品質拡張Ｍ符号は第一品質拡張復号部１４１に送られる。 The extended M code and the extended S code are generated, for example, by the encoding apparatus 100 including the configuration illustrated in FIG. 9 described later.
The first code separation unit 93 separates the M gain code, the normalized M signal code, and the quality extension M code from the extended M code input to the extended signal mixing unit 171 (step A1, FIG. 18). The M gain code is sent to the first gain decoding unit 81, the separated normalized M signal code is sent to the first code multiplexing unit 131, and the quality extended M code is sent to the first quality extended decoding unit 141. .

第一品質拡張復号部１４１は、品質拡張Ｍ符号を復号して第一品質拡張Ｍ信号とする（ステップＡ２）。第一品質拡張Ｍ信号は、第一乗算部１０６及び第三加算部１１５に送られる。
第二符号分離部９４は、拡張信号混合部１７１に入力された拡張Ｓ符号からＳゲイン符号、正規化Ｓ信号符号及び品質拡張Ｓ符号を分離する（ステップＡ３）。Ｓゲイン符号は第二ゲイン復号部８２に送られ、分離された正規化Ｓ信号符号は、第二符号多重化部１３２に送られ、品質拡張Ｓ符号は第二品質拡張復号部１４２に送られる。 The first quality extension decoding unit 141 decodes the quality extension M code to obtain a first quality extension M signal (step A2). The first quality extension M signal is sent to the first multiplication unit 106 and the third addition unit 115.
The second code separation unit 94 separates the S gain code, the normalized S signal code, and the quality extended S code from the extended S code input to the extended signal mixing unit 171 (step A3). The S gain code is sent to the second gain decoding unit 82, the separated normalized S signal code is sent to the second code multiplexing unit 132, and the quality extended S code is sent to the second quality extended decoding unit 142. .

第二品質拡張復号部１４２は、品質拡張Ｓ符号を復号して第一品質拡張Ｓ信号とする（ステップＡ４）。第一品質拡張Ｓ信号は、第二乗算部１０７に送られる。   The second quality extension decoding unit 142 decodes the quality extension S code to obtain a first quality extension S signal (step A4). The first quality extension S signal is sent to the second multiplication unit 107.

第一拡張擬似定位ゲイン演算部１６３は、第一擬似Ｍゲインを（２ｎ_１＋１−Ｎ）／Ｎとし、第一擬似Ｓゲインを１／Ｎとする（ステップＡ５）。Ｎ≧２は地点数であり与えることができる方向の総数であり、地点情報ｎ_１は主地点として選択された符号化装置で収音された音信号に定位を与える方向の番号である。第一擬似Ｍゲインは第一乗算部１０６及び第五乗算部１０１０に送られる。第一擬似Ｓゲインは、第二乗算部１０７及び第六乗算部１０１１に送られる。 The first extended pseudo localization gain calculation unit 163 sets the first pseudo M gain to (2n ₁ + 1−N) / N and the first pseudo S gain to 1 / N (step A5). N ≧ 2 is the number of points and the total number of directions that can be given, and the point information n ₁ is the number of the direction that gives a localization to the sound signal collected by the encoding device selected as the main point. The first pseudo M gain is sent to the first multiplication unit 106 and the fifth multiplication unit 1010. The first pseudo S gain is sent to the second multiplication unit 107 and the sixth multiplication unit 1011.

第一乗算部１０６は、第一品質拡張Ｍ信号と第一擬似Ｍゲインとを乗算して第一擬似定位Ｍ信号とする（ステップＡ６）。第一擬似定位Ｍ信号は、第一加算部１１３に送られる。
第二乗算部１０７は、第一品質拡張Ｓ信号と第一擬似Ｓゲインとを乗算して第一擬似定位Ｓ信号とする（ステップＡ７）。第一擬似定位Ｓ信号は、第一加算部１１３に送られる。
第一加算部１１３は、第一擬似定位Ｍ信号と第一擬似定位Ｓ信号とを加算して第一定位変換Ｓ信号とする（ステップＡ８）。第一定位変換Ｓ信号は、第四加算部１１６に送られる。 The first multiplication unit 106 multiplies the first quality extension M signal and the first pseudo M gain to obtain a first pseudo localization M signal (step A6). The first pseudo localization M signal is sent to the first addition unit 113.
The second multiplication unit 107 multiplies the first quality extension S signal and the first pseudo S gain to obtain a first pseudo localization S signal (step A7). The first pseudo localization S signal is sent to the first addition unit 113.
The first adder 113 adds the first pseudo-localization M signal and the first pseudo-localization S signal to obtain a first localization conversion S signal (step A8). The first constant conversion S signal is sent to the fourth adder 116.

第三符号分離部９５は、拡張信号混合部１７２に入力された拡張Ｍ符号から品質拡張Ｍ符号を分離する（ステップＡ９）。品質拡張Ｍ符号は第三品質拡張復号部１４３に送られる。
第三品質拡張復号部１４３は、品質拡張Ｍ符号を復号して第二品質拡張Ｍ信号とする（ステップＡ１０）。第三品質拡張Ｍ信号は、第三乗算部１０８及び第二加算部１１５に送られる。 The third code separation unit 95 separates the quality extension M code from the extension M code input to the extension signal mixing unit 172 (step A9). The quality extension M code is sent to the third quality extension decoding unit 143.
The third quality extension decoding unit 143 decodes the quality extension M code to generate a second quality extension M signal (step A10). The third quality extension M signal is sent to the third multiplication unit 108 and the second addition unit 115.

第四符号分離部９６は、拡張信号混合部１７２に入力された拡張Ｓ符号から品質拡張Ｓ符号を分離する（ステップＡ１１）。品質拡張Ｓ符号は第四品質拡張復号部１４４に送られる。
第四品質拡張復号部１４４は、品質拡張Ｓ符号を復号して第二品質拡張Ｓ信号とする（ステップＡ１２）。第二品質拡張Ｓ信号は、第四乗算部１０９に送られる。 The fourth code separation unit 96 separates the quality extended S code from the extended S code input to the extended signal mixing unit 172 (step A11). The quality extended S code is sent to the fourth quality extended decoding unit 144.
The fourth quality extension decoding unit 144 decodes the quality extension S code to obtain a second quality extension S signal (step A12). The second quality extended S signal is sent to the fourth multiplier 109.

第二拡張擬似定位ゲイン演算部１６４は、第二擬似Ｍゲインを（２ｎ_２＋１−Ｎ）／Ｎとし、第二擬似Ｓゲインを１／Ｎとする（ステップＡ１３）。Ｎ≧２は地点数であり与えることができる方向の総数であり、地点情報ｎ_２は主地点として選択されなかった符号化装置で収音された音信号に定位を与える方向の番号である。第二擬似Ｍゲインは第三乗算部１０８に送られる。第二擬似Ｓゲインは、第四乗算部１０９に送られる。 The second extended pseudo localization gain calculation unit 164 sets the second pseudo M gain to (2n ₂ + 1−N) / N and sets the second pseudo S gain to 1 / N (step A13). N ≧ 2 is the number of points and the total number of directions that can be given, and the point information n ₂ is the number of the direction in which the localization is given to the sound signal collected by the encoding device not selected as the main point. The second pseudo M gain is sent to the third multiplier 108. The second pseudo S gain is sent to the fourth multiplier 109.

第三乗算部１０８は、第二品質拡張Ｍ信号と第二擬似Ｍゲインとを乗算して第二擬似定位Ｍ信号とする（ステップＡ１４）。第二擬似定位Ｍ信号は、第二加算部１１４に送られる。
第四乗算部１０９は、第二品質拡張Ｓ信号と第二擬似Ｓゲインとを乗算して第二擬似定位Ｓ信号とする（ステップＡ１５）。第二擬似定位Ｓ信号は、第二加算部１１４に送られる。 The third multiplication unit 108 multiplies the second quality extension M signal and the second pseudo M gain to obtain a second pseudo localization M signal (step A14). The second pseudo localization M signal is sent to the second adder 114.
The fourth multiplication unit 109 multiplies the second quality extension S signal and the second pseudo S gain to obtain a second pseudo localization S signal (step A15). The second pseudo localization S signal is sent to the second adder 114.

第二加算部１１４は、第二擬似定位Ｍ信号と第二擬似定位Ｓ信号とを加算して第二定位変換Ｓ信号とする（ステップＡ１６）。第二定位変換Ｓ信号は、第四加算部１１６に送られる。
第三加算部１１５は、第一品質拡張Ｍ信号と第二品質拡張Ｍ信号とを加算して定位混合Ｍ信号とする（ステップＡ１７）。定位混合Ｍ信号は、第一品質拡張符号化部１５１に送られる。 The second adder 114 adds the second pseudo-localization M signal and the second pseudo-localization S signal to obtain a second localization transformation S signal (step A16). The second localization conversion S signal is sent to the fourth adder 116.
The third adding unit 115 adds the first quality extended M signal and the second quality extended M signal to obtain a localization mixed M signal (step A17). The localization mixed M signal is sent to the first quality extension encoding unit 151.

第一品質拡張符号化部１５１は、定位混合Ｍ信号を符号化して定位混合Ｍ符号とする（ステップＡ１８）。定位混合Ｍ符号は、第一符号多重化部１３１に送られる。
第一ゲイン復号部８１は、第一符号分離部９３で分離されたＭゲイン符号を復号して復号Ｍゲインとする（ステップＡ１９）。復号Ｍゲインは、第五乗算部１０１０に送られる。 The first quality extension encoding unit 151 encodes the localization mixed M signal to obtain a localization mixed M code (step A18). The localization mixed M code is sent to the first code multiplexing unit 131.
The first gain decoding unit 81 decodes the M gain code separated by the first code separation unit 93 to obtain a decoded M gain (step A19). The decoded M gain is sent to the fifth multiplier 1010.

第五乗算部１０１０は、復号Ｍゲインと第一擬似Ｍゲインとを乗算して定位Ｍゲインとする（ステップＡ２０）。定位Ｍゲインは、第一ゲイン符号化部１２１に送られる。   The fifth multiplication unit 1010 multiplies the decoded M gain and the first pseudo M gain to obtain a localization M gain (step A20). The localization M gain is sent to the first gain encoding unit 121.

第一ゲイン符号化部１２１は、定位Ｍゲインを符号化して定位Ｍゲイン符号とする（ステップＡ２１）。定位Ｍゲイン符号は、第一符号多重化部１３１に送られる。
第一符号多重化部１３１は、定位混合Ｍ符号と定位Ｍゲイン符号と第一符号分離部９３で分離された正規化Ｍ信号符号とを含む拡張Ｍ符号を生成する（ステップＡ２２）。拡張Ｍ符号は、復号装置２００に送られる。 The first gain encoding unit 121 encodes the localization M gain to obtain a localization M gain code (step A21). The localization M gain code is sent to the first code multiplexing unit 131.
The first code multiplexing unit 131 generates an extended M code including the localization mixed M code, the localization M gain code, and the normalized M signal code separated by the first code separation unit 93 (step A22). The extended M code is sent to the decoding device 200.

第四加算部１１６は、第一定位変換Ｓ信号と第二定位変換Ｓ信号とを加算して定位混合Ｓ信号とする（ステップＡ２３）。定位混合Ｓ信号は、第二品質拡張符号化部１５３に送られる。
第二品質拡張符号化部１５３は、定位混合Ｓ信号を符号化して定位混合Ｓ符号とする（ステップＡ２４）。定位混合Ｓ符号は、第二符号多重化部１３２に送られる。
第二ゲイン復号部８２は、第二符号分離部９４で分離されたＳゲイン符号を復号して復号Ｓゲインとする（ステップＡ２５）。復号Ｓゲインは、第六乗算部１０１１に送られる。 The fourth adder 116 adds the first localization transformation S signal and the second localization transformation S signal to obtain a localization mixed S signal (step A23). The localization mixed S signal is sent to the second quality extension encoding unit 153.
The second quality extension encoding unit 153 encodes the localization mixed S signal to obtain a localization mixed S code (step A24). The localization mixed S code is sent to the second code multiplexing unit 132.
The second gain decoding unit 82 decodes the S gain code separated by the second code separation unit 94 to obtain a decoded S gain (step A25). The decoded S gain is sent to the sixth multiplier 1011.

第六乗算部１０１１は、復号Ｓゲインと第一擬似Ｓゲインとを乗算して定位Ｓゲインとする（ステップＡ２６）。定位Ｓゲインは、第二ゲイン符号化部１２２に送られる。
第二ゲイン符号化部１２２は、定位Ｓゲインを符号化して定位Ｓゲイン符号とする（ステップＡ２７）。定位Ｓゲイン符号は、第二符号多重化部１３２に送られる。
第二符号多重化部１３２は、定位混合Ｓ符号と定位Ｓゲイン符号と第二符号分離部９４で分離された正規化Ｓ信号符号とを含む拡張Ｓ符号を生成する（ステップＡ２８）。拡張Ｓ符号は、復号装置２００に送られる。 The sixth multiplier 1011 multiplies the decoded S gain and the first pseudo S gain to obtain a localization S gain (step A26). The localization S gain is sent to the second gain encoding unit 122.
The second gain encoding unit 122 encodes the localization S gain to obtain a localization S gain code (step A27). The localization S gain code is sent to the second code multiplexing unit 132.
The second code multiplexing unit 132 generates an extended S code including the localization mixed S code, the localization S gain code, and the normalized S signal code separated by the second code separation unit 94 (step A28). The extended S code is sent to the decoding device 200.

復号装置２００には、ミキサ３００が生成した拡張Ｍ符号及び拡張Ｓ符号が入力される。復号装置２００は、図１３に例示する構成を含み、拡張Ｍ符号及び拡張Ｓ信号から分離した定位混合Ｍ符号、正規化Ｍ信号符号、定位Ｍゲイン符号、定位混合Ｓ符号、正規化Ｓ信号及び定位Ｓゲイン符号を復号し、符号化装置に入力された第一入力信号及び第二入力信号を混合した音信号を生成する。   The extended M code and the extended S code generated by the mixer 300 are input to the decoding device 200. The decoding apparatus 200 includes the configuration illustrated in FIG. 13, and includes a localization mixed M code, a normalized M signal code, a localization M gain code, a localization mixed S code, a normalized S signal, and an extended M code and an extended S signal. The localization S gain code is decoded, and a sound signal obtained by mixing the first input signal and the second input signal input to the encoding device is generated.

以下、図９を参照して第五実施形態の符号化装置１００の例について説明する。図９の符号化装置１００は、ＭＳ変換部３、第一拡張符号化部４４及び第二拡張符号化部４５を例えば含む。   Hereinafter, an example of the encoding device 100 according to the fifth embodiment will be described with reference to FIG. 9 includes, for example, an MS conversion unit 3, a first extension encoding unit 44, and a second extension encoding unit 45.

ＭＳ変換部３は、第一実施形態と同様にして、第一入力信号と第二入力信号とを加算してＭ信号とし、第一入力信号から第二入力信号を減算してＳ信号とする（ステップＣ１）。生成されたＭ信号は第一拡張符号化部４４に送られ、生成されたＳ信号は第二拡張符号化部４５に送られる。   As in the first embodiment, the MS conversion unit 3 adds the first input signal and the second input signal to obtain an M signal, and subtracts the second input signal from the first input signal to obtain an S signal. (Step C1). The generated M signal is sent to the first extended encoding unit 44, and the generated S signal is sent to the second extended encoding unit 45.

第一拡張符号化部４４は、入力されたＭ信号を用いて、拡張Ｍ符号を生成し出力する（ステップＣ２）。拡張Ｍ符号は、ミキサ３００に送られる。
第二拡張符号化部４５は、入力されたＳ信号を用いて、拡張Ｓ符号を生成し出力する（ステップＣ３）。拡張Ｓ符号は、ミキサ３００に送られる。
第一拡張符号化部４４及び第二拡張符号化部４５として、例えば図１０、図１１、図１２に記載された拡張符号化部４６，４７，４８を用いることができる。
図１０の拡張符号化部４６は、帯域分割部４６１、信号符号化部４６２、ゲイン符号化部４６３、品質拡張符号化部４６４、符号多重化部４６５を例えば含む。 The first extended encoding unit 44 generates and outputs an extended M code using the input M signal (step C2). The extended M code is sent to the mixer 300.
The second extended encoding unit 45 generates and outputs an extended S code using the input S signal (step C3). The extended S code is sent to the mixer 300.
As the first extension encoding unit 44 and the second extension encoding unit 45, for example, the extension encoding units 46, 47, and 48 described in FIGS. 10, 11, and 12 can be used.
10 includes a band division unit 461, a signal encoding unit 462, a gain encoding unit 463, a quality extension encoding unit 464, and a code multiplexing unit 465, for example.

帯域分割部４６１は、入力された信号（Ｍ信号又はＳ信号）の帯域を２つに分けて、一方を第一帯域信号とし、他方を第二帯域信号とする。第一帯域信号は信号符号化部４６２及びゲイン符号化部４６３に送られ、第二帯域信号は品質拡張符号化部４６４に送られる。
例えば、図２０に例示するように信号を低域信号（１）と高域信号（２）とに分割し、低域信号（１）を第一帯域信号とし、高域信号（２）を第二帯域信号とする。低域信号（１）を第二帯域信号とし、高域信号（２）を第一帯域信号としてもよい。低域信号（１）と高域信号（２）に割り当てるビット数は同じである必要はない。例えば、図２１に例示するように、低域信号（１）に割り当てるビット数を高域信号（２）に割り当てるビット数よりも多くしてもよい。 The band dividing unit 461 divides the band of the input signal (M signal or S signal) into two, one being a first band signal and the other being a second band signal. The first band signal is sent to the signal coding unit 462 and the gain coding unit 463, and the second band signal is sent to the quality extension coding unit 464.
For example, as illustrated in FIG. 20, the signal is divided into a low-frequency signal (1) and a high-frequency signal (2), the low-frequency signal (1) is set as the first band signal, and the high-frequency signal (2) is set as the first frequency signal. A two-band signal is assumed. The low frequency signal (1) may be the second band signal and the high frequency signal (2) may be the first band signal. The number of bits allocated to the low frequency signal (1) and the high frequency signal (2) need not be the same. For example, as illustrated in FIG. 21, the number of bits allocated to the low frequency signal (1) may be larger than the number of bits allocated to the high frequency signal (2).

ゲイン符号化部４６３は、第一帯域信号の大きさを表わす代表値であるゲイン（Ｍゲイン又はＳゲイン）を計算し符号化してゲイン符号（Ｍゲイン符号又はＳゲイン符号）とする。ゲイン符号は符号多重化部４６５に送られる。例えば、第一帯域信号の１フレームのサンプル値の平均値をゲインとして計算する。また、ゲイン符号化部４６３は、生成したゲイン符号を復号して復号ゲイン（復号Ｍゲイン又は復号Ｓゲイン）とし、復号ゲインを信号符号化部４６２に送る。   The gain encoding unit 463 calculates and encodes a gain (M gain or S gain), which is a representative value representing the magnitude of the first band signal, to obtain a gain code (M gain code or S gain code). The gain code is sent to the code multiplexer 465. For example, the average value of the sample values of one frame of the first band signal is calculated as the gain. The gain encoding unit 463 decodes the generated gain code to obtain a decoding gain (decoded M gain or decoded S gain), and sends the decoded gain to the signal encoding unit 462.

信号符号化部４６２は、第一帯域信号を復号ゲインを用いて正規化し符号化して正規化信号符号（正規化Ｍ信号符号又は正規化Ｓ信号符号）とする。正規化信号符号は、符号多重化部４６５に送られる。
品質拡張符号化部４６４は、第二帯域信号を符号化して品質拡張符号（品質拡張Ｍ符号又は品質拡張Ｓ符号）とする。品質拡張符号は符号多重化部４６５に送られる。
符号多重化部４６５は、正規化信号符号、ゲイン符号及び品質拡張符号を含む拡張符号（拡張Ｍ符号又は拡張Ｓ符号）を生成する。 The signal encoding unit 462 normalizes and encodes the first band signal using the decoding gain to obtain a normalized signal code (normalized M signal code or normalized S signal code). The normalized signal code is sent to the code multiplexing unit 465.
The quality extension encoding unit 464 encodes the second band signal to obtain a quality extension code (quality extension M code or quality extension S code). The quality extension code is sent to the code multiplexing unit 465.
The code multiplexing unit 465 generates an extended code (an extended M code or an extended S code) including a normalized signal code, a gain code, and a quality extension code.

図１１の拡張符号化部４７は、信号符号化部４７１、ゲイン符号化部４７２、部分復号部４７３、ゲイン復号部４７４、乗算部４７５、減算部４７６、品質拡張符号化部４７７及び符号多重化部４７８を例えば含む。   11 includes a signal encoding unit 471, a gain encoding unit 472, a partial decoding unit 473, a gain decoding unit 474, a multiplication unit 475, a subtraction unit 476, a quality extension encoding unit 477, and code multiplexing. Part 478 is included, for example.

ゲイン符号化部４７２は、入力された信号（Ｍ信号又はＳ信号）のゲイン（Ｍゲイン又はＳゲイン）を計算し符号化してゲイン符号（Ｍゲイン符号又はＳゲイン符号）とする。ゲイン符号は、符号多重化部４７８及びゲイン復号部４７４に送られる。また、ゲイン符号化部４７２は、生成したゲイン符号を復号して復号ゲイン（復号Ｍゲイン）とし、復号ゲインを乗算部４７５に送る。   The gain encoding unit 472 calculates and encodes the gain (M gain or S gain) of the input signal (M signal or S signal) to obtain a gain code (M gain code or S gain code). The gain code is sent to the code multiplexing unit 478 and the gain decoding unit 474. The gain encoding unit 472 decodes the generated gain code to obtain a decoding gain (decoded M gain), and sends the decoding gain to the multiplying unit 475.

信号符号化部４７１は、入力された信号を復号ゲインを用いて正規化し符号化して、正規化信号符号（正規化Ｍ信号符号又は正規化Ｓ信号符号）とする。正規化信号符号は、符号多重化部４７８及び部分復号部４７３に送られる。   The signal encoding unit 471 normalizes and encodes the input signal using the decoding gain to obtain a normalized signal code (normalized M signal code or normalized S signal code). The normalized signal code is sent to the code multiplexing unit 478 and the partial decoding unit 473.

部分復号部４７３は、正規化信号符号を復号して正規化復号信号（正規化復号Ｍ信号又は正規化復号Ｓ信号）とする。正規化復号信号は、乗算部４７５に送られる。   The partial decoding unit 473 decodes the normalized signal code into a normalized decoded signal (normalized decoded M signal or normalized decoded S signal). The normalized decoded signal is sent to multiplication section 475.

乗算部４７５は、正規化復号信号と復号ゲインとを乗算して、第一帯域復号信号とする。第一帯域復号信号は、減算部４７６に送られる。減算部４７６は、入力された信号から第一帯域復号信号を減算して残差信号（残差Ｍ信号又は残差Ｓ信号）とする。残差信号は、品質拡張符号化部４７７に送られる。    Multiplier 475 multiplies the normalized decoded signal and the decoding gain to obtain a first band decoded signal. The first band decoded signal is sent to the subtracting unit 476. The subtracting unit 476 subtracts the first band decoded signal from the input signal to obtain a residual signal (residual M signal or residual S signal). The residual signal is sent to the quality extension encoding unit 477.

品質拡張符号化部４７７は、残差信号を符号化して品質拡張符号（品質拡張Ｍ符号又は品質拡張Ｓ符号）とする。品質拡張符号は、符号多重化部４７８に送られる。
符号多重化部４７８は、正規化信号符号、ゲイン符号及び品質拡張符号を含む拡張符号（拡張Ｍ符号又は拡張Ｓ符号）を生成する。 The quality extension encoding unit 477 encodes the residual signal into a quality extension code (quality extension M code or quality extension S code). The quality extension code is sent to the code multiplexing unit 478.
The code multiplexing unit 478 generates an extension code (an extension M code or an extension S code) including a normalized signal code, a gain code, and a quality extension code.

図１２の拡張符号化部４８は、品質拡張符号化部４８１、品質拡張復号部４８２、減算部４８３、ゲイン符号化部４８４、部分符号化部４８５及び符号多重化部４８６を含む。   12 includes a quality extension encoding unit 481, a quality extension decoding unit 482, a subtraction unit 483, a gain encoding unit 484, a partial encoding unit 485, and a code multiplexing unit 486.

品質拡張符号化部４８１は、入力された信号（Ｍ信号又はＳ信号）を符号化して品質拡張符号（品質拡張Ｍ符号又は品質拡張Ｓ符号）とする。品質拡張符号は、符号多重化部４８６及び品質拡張復号部４８２に送られる。
品質拡張復号部４８２は、品質拡張符号を復号して第二帯域復号信号とする。第二帯域復号信号は、減算部４８３に送られる。 The quality extension encoding unit 481 encodes the input signal (M signal or S signal) to obtain a quality extension code (quality extension M code or quality extension S code). The quality extension code is sent to the code multiplexing unit 486 and the quality extension decoding unit 482.
Quality extension decoding section 482 decodes the quality extension code to obtain a second band decoded signal. The second band decoded signal is sent to subtracting section 483.

減算部は、入力された信号から第二帯域復号信号を減算して残差信号とする。残差信号は、ゲイン符号化部４８４及び部分符号化部４８５に送られる。   The subtracting unit subtracts the second band decoded signal from the input signal to obtain a residual signal. The residual signal is sent to the gain encoding unit 484 and the partial encoding unit 485.

ゲイン符号化部４８４は、残差信号の大きさを表すゲインを計算し符号化してゲイン符号（ゲインＭ符号又はゲインＳ符号）とする。ゲイン符号は、符号多重化部４８６に送られる。例えば、残差信号の１フレームのサンプル値の平均値をゲインとする。また、ゲイン符号化部４８４は、生成したゲイン符号を復号化して復号ゲイン（復号Ｍゲイン又は復号Ｓゲイン）として、部分符号化部４８５に送る。   The gain encoding unit 484 calculates a gain representing the magnitude of the residual signal and encodes it to obtain a gain code (gain M code or gain S code). The gain code is sent to the code multiplexing unit 486. For example, the average value of the sample values of one frame of the residual signal is set as the gain. Also, the gain encoding unit 484 decodes the generated gain code and sends it to the partial encoding unit 485 as a decoding gain (decoded M gain or decoded S gain).

部分符号化部４８５は、復号ゲインを用いて、残差信号を正規化して符号化して正規化信号符号（正規化Ｍ信号符号又は正規化Ｓ信号符号）とする。正規化信号符号は、符号多重化部４８６に送られる。
符号多重化部４８６は、品質拡張符号、ゲイン符号及び正規化信号符号を含む拡張符号（拡張Ｍ符号又は拡張Ｓ符号）を生成する。 The partial encoding unit 485 normalizes and encodes the residual signal using the decoding gain to obtain a normalized signal code (normalized M signal code or normalized S signal code). The normalized signal code is sent to the code multiplexing unit 486.
The code multiplexing unit 486 generates an extension code (extended M code or extended S code) including a quality extension code, a gain code, and a normalized signal code.

第五実施形態の音信号擬似定位システムの復号装置２００の例について図１３を参照して説明する。第一符合分離部６４１は、ミキサが生成した拡張Ｍ符号から、正規化Ｍ信号符号、定位Ｍゲイン符号及び定位混合Ｍ符号を分離する（ステップＤ１）。正規化Ｍ信号符号は第一信号復号部６４２に送られ、定位Ｍゲイン符号は第一ゲイン復号部６４３に送られ、定位混合Ｍ符号は第一品質拡張復号部６４４に送られる。   An example of the decoding device 200 of the sound signal pseudo-localization system according to the fifth embodiment will be described with reference to FIG. The first code separation unit 641 separates the normalized M signal code, the localization M gain code, and the localization mixed M code from the extended M code generated by the mixer (step D1). The normalized M signal code is sent to the first signal decoding unit 642, the localization M gain code is sent to the first gain decoding unit 643, and the localization mixed M code is sent to the first quality extension decoding unit 644.

第一信号復号部６４２は、正規化Ｍ信号符号を復号して正規化復号Ｍ信号とする（ステップＤ２）。正規化復号Ｍ信号は、第一乗算部６４５に送られる。
第一ゲイン復号部６４３は、定位Ｍゲイン符号を復号して復号Ｍゲインとする（ステップＤ３）。復号ゲインは、第一乗算部６４５に送られる。
第一乗算部６４５は、正規化復号Ｍ信号と復号Ｍゲインとを乗算して第一復号Ｍ信号とする（ステップＤ４）。第一復号Ｍ信号は、第一加算部６４６及び第三乗算部６４１３に送られる。
第一品質拡張復号部６４４は、定位混合Ｍ符号を復号して第二復号Ｍ信号とする（ステップＤ５）。第二復号Ｍ信号は、第一加算部６４６に送られる。 The first signal decoding unit 642 decodes the normalized M signal code to obtain a normalized decoded M signal (step D2). The normalized decoded M signal is sent to the first multiplier 645.
The first gain decoding unit 643 decodes the localization M gain code to obtain a decoded M gain (step D3). The decoding gain is sent to the first multiplication unit 645.
The first multiplication unit 645 multiplies the normalized decoded M signal and the decoded M gain to obtain a first decoded M signal (step D4). The first decoded M signal is sent to the first adder 646 and the third multiplier 6413.
The first quality extension decoding unit 644 decodes the localization mixed M code to obtain a second decoded M signal (step D5). The second decoded M signal is sent to the first adder 646.

第一加算部６４６は、第一復号Ｍ信号と第二復号Ｍ信号とを合わせて復号Ｍ信号とする（ステップＤ６）。復号Ｍ信号は、ＬＲ変換部６４１５に送られる。符号化装置１００の第一拡張符号化部４４及び第二拡張符号化部４５が図１０の拡張符号化部４６である場合には、第一復号Ｍ信号が第一帯域信号に対応し、第二復号Ｍ信号が第二帯域信号に対応する。この場合、第一加算部６４６は、第一復号Ｍ信号の帯域と第二復号Ｍ信号の帯域とを合成した信号を復号Ｍ信号とする。符号化装置１００の第一拡張符号化部４４及び第二拡張符号化部４５が図１１の拡張符号化部４７又は図１２の拡張符号化部４８である場合には、第二復号Ｍ信号又は第一復号Ｍ信号が残差信号に対応する。この場合、第一加算部６４６は、第一復号Ｍ信号と第二復号Ｍ信号とを加算した信号を復号Ｍ信号とする。   The first adder 646 combines the first decoded M signal and the second decoded M signal into a decoded M signal (step D6). The decoded M signal is sent to the LR converter 6415. When the first extension encoding unit 44 and the second extension encoding unit 45 of the encoding device 100 are the extension encoding unit 46 of FIG. 10, the first decoded M signal corresponds to the first band signal, The two decoded M signals correspond to the second band signal. In this case, the first addition unit 646 sets a signal obtained by combining the band of the first decoded M signal and the band of the second decoded M signal as a decoded M signal. When the first extension encoding unit 44 and the second extension encoding unit 45 of the encoding device 100 are the extension encoding unit 47 of FIG. 11 or the extension encoding unit 48 of FIG. 12, the second decoded M signal or The first decoded M signal corresponds to the residual signal. In this case, the first addition unit 646 sets a signal obtained by adding the first decoded M signal and the second decoded M signal as a decoded M signal.

第二符号分離部６４７は、ミキサが生成した拡張Ｓ符号から、正規化Ｓ信号符号、定位Ｓゲイン符号及び定位混合Ｓ符号を分離する（ステップＤ７）。正規化Ｓ信号符号は第二信号復号部６４８に送られ、定位Ｓゲイン符号は第二ゲイン復号部６４９に送られ、定位混合Ｓ符号は第二品質拡張復号部６４１０に送られる。   The second code separation unit 647 separates the normalized S signal code, the localization S gain code, and the localization mixed S code from the extended S code generated by the mixer (step D7). The normalized S signal code is sent to the second signal decoding unit 648, the localization S gain code is sent to the second gain decoding unit 649, and the localization mixed S code is sent to the second quality enhancement decoding unit 6410.

第二信号復号部６４８は、正規化Ｓ信号符号を復号して正規化復号Ｓ信号とする（ステップＤ８）。正規化復号Ｓ信号は、第二乗算部６４１１に送られる。
第二ゲイン復号部６４９は、定位Ｓゲイン符号を復号して復号Ｓゲインとする（ステップＤ９）。復号Ｓゲインは、第二乗算部６４１１に送られる。
第二乗算部６４１１は、正規化復号Ｓ信号と復号Ｓゲインとを乗算して仮第一復号Ｓ信号とする（ステップＤ１０）。仮第一復号Ｓ信号は、第二加算部６４１２に送られる。
第二品質拡張復号部６４１０は、定位混合Ｓ符号を復号して第二復号Ｓ信号とする（ステップＤ１１）。第二復号Ｓ信号は、第三加算部６４１４に送られる。 The second signal decoding unit 648 decodes the normalized S signal code to obtain a normalized decoded S signal (step D8). The normalized decoded S signal is sent to the second multiplier 6411.
The second gain decoding unit 649 decodes the localization S gain code to obtain a decoded S gain (step D9). The decoded S gain is sent to the second multiplier 6411.
The second multiplier 6411 multiplies the normalized decoded S signal and the decoded S gain to obtain a provisional first decoded S signal (step D10). The temporary first decoded S signal is sent to the second adder 6412.
The second quality extension decoding unit 6410 decodes the localization mixed S code to obtain a second decoded S signal (step D11). The second decoded S signal is sent to the third adder 6414.

第二拡張擬似定位ゲイン算出部６４１６は、擬似ゲイン（Ｎ−２ｎ_１−１）／Ｎを算出する（ステップＤ１２）。擬似ゲインは、第三乗算部６４１３に送られる。地点情報ｎ_１は主地点として選択された符号化装置で収音された音信号に定位を与える方向の番号である。地点情報ｎ_１は、ミキサ３００から復号装置２００に送られる。例えば、第一符号多重化部１３１又は第二符号多重化部１３２により生成される拡張Ｍ符号又は拡張Ｓ符号に地点情報ｎ_１を含めてもよいし、拡張Ｍ符号又は拡張Ｓ符号を送信する際のヘッダに含めてもよい。 The second extended pseudo localization gain calculator 6416 calculates pseudo gain (N-2n ₁ -1) / N (step D12). The pseudo gain is sent to the third multiplication unit 6413. The point information n ₁ is a number in a direction in which the sound signal collected by the encoding device selected as the main point is localized. The point information n ₁ is sent from the mixer 300 to the decoding device 200. For example, the point information n ₁ may be included in the extended M code or the extended S code generated by the first code multiplexing unit 131 or the second code multiplexing unit 132, or the extended M code or the extended S code is transmitted. It may be included in the header.

第三乗算部６４１３は、第一復号Ｍ信号と擬似ゲインとを乗算して仮第二復号Ｓ信号とする（ステップＤ１３）。仮第二復号Ｓ信号は、第二加算部６４１２に送られる。
第二加算部６４１２は、仮第一復号Ｓ信号と仮第二復号Ｓ信号とを加算して第一復号Ｓ信号とする（ステップＤ１４）。第一復号Ｓ信号は、第三加算部６４１４に送られる。
第三加算部６４１４は、第一復号Ｓ信号と第二復号Ｓ信号とを合わせて復号Ｓ信号とする（ステップＤ１５）。復号Ｓ信号は、ＬＲ変換部６４１５に送られる。 The third multiplication unit 6413 multiplies the first decoded M signal and the pseudo gain to obtain a provisional second decoded S signal (step D13). The provisional second decoded S signal is sent to the second adder 6412.
The second adder 6412 adds the provisional first decoded S signal and the provisional second decoded S signal to obtain a first decoded S signal (step D14). The first decoded S signal is sent to the third adder 6414.
The third adder 6414 combines the first decoded S signal and the second decoded S signal into a decoded S signal (step D15). The decoded S signal is sent to the LR converter 6415.

ＬＲ変換部２は、第一実施形態のＬＲ変換部２と同様に、復号Ｍ信号Ｓ^ｏ _Ｍ（ｔ）及び復号Ｓ信号Ｓ^ｏ _Ｓ（ｔ）を用いて、上記式（５），（６）に従い第一出力信号Ｓ^ｏ _１（ｔ）及び第二出力信号Ｓ^ｏ _２（ｔ）を生成し出力する（ステップＤ１６）。 Similarly to the LR converter 2 of the first embodiment, the LR converter 2 uses the decoded M signal S ^o _M (t) and the decoded S signal S ^o _S (t), and the above equations (5), (6 ), The first output signal S ^o ₁ (t) and the second output signal S ^o ₂ (t) are generated and output (step D16).

音信号擬似定位システムの各装置（第一実施形態においては音信号擬似定位システムそのもの、他の実施形態においては符号化装置１００、復号装置２００、ミキサ３００）は、コンピュータによって実現することができる。この場合、この装置が有すべき各部の処理内容はプログラムによって記述される。そして、このプログラムをコンピュータで実行することにより、この装置における各部が、コンピュータ上で実現される。   Each device of the sound signal pseudo-localization system (the sound signal pseudo-localization system itself in the first embodiment, and the encoding device 100, the decoding device 200, and the mixer 300 in the other embodiments) can be realized by a computer. In this case, the processing contents of each unit that the apparatus should have are described by a program. And each part in this apparatus is implement | achieved on a computer by running this program with a computer.

この処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体に記録しておくことができる。また、この形態では、コンピュータ上で所定のプログラムを実行させることにより、これらの装置を構成することとしたが、これらの処理内容の少なくとも一部をハードウェア的に実現することとしてもよい。   The program describing the processing contents can be recorded on a computer-readable recording medium. In this embodiment, these devices are configured by executing a predetermined program on a computer. However, at least a part of these processing contents may be realized by hardware.

この発明は、上述の実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で適宜変更が可能である。   The present invention is not limited to the above-described embodiment, and can be modified as appropriate without departing from the spirit of the present invention.

RetroSearch is an open source project built by @garambo | Open a GitHub Issue

Search and Browse the WWW like it's 1997 | Search results from DuckDuckGo

HTML: 3.2 | Encoding: UTF-8 | Version: 0.7.4