JP2012010240A

JP2012010240A - Karaoke automatic recording device

Info

Publication number: JP2012010240A
Application number: JP2010146148A
Authority: JP
Inventors: Takuzo Mitsuse; 拓三光瀬
Original assignee: UNIVERSAL BUSINESS CLUB CO Ltd
Current assignee: UNIVERSAL BUSINESS CLUB CO Ltd
Priority date: 2010-06-28
Filing date: 2010-06-28
Publication date: 2012-01-12

Abstract

PROBLEM TO BE SOLVED: To provide a karaoke automatic recording device capable of synthesizing an image of a singing user with an optional background image and recording thereof in a recording medium without using a dedicated device.SOLUTION: A karaoke automatic recording device 1 comprises a camera 7 for taking an image of a singer; an HDD 5 for storing a background image to be synthesized with the image taken by the camera 7; a CPU 2 for synthesizing the image taken by the camera 7 with the background image stored in the HDD 5, as well as recording in a DVD 6 data in which accompaniment sound and singing sound are added to the composite image synthesized by the CPU 2 and encoded by MPEG2. In the device 1, two CPU cores including a core A2a and a core B2b are provided in the CPU 2, the core A2a performs synthesizing and the core B2b performs encoding and recording, and each core CPU operates independently and simultaneously.

Description

本発明は、カラオケの伴奏音に合わせて歌っている人物を撮影して、任意の背景画面と合成して記録媒体に記録するカラオケ自動レコーディング装置に関するものである。 The present invention relates to an automatic karaoke recording apparatus that shoots a person singing along with an accompaniment sound of karaoke and synthesizes it with an arbitrary background screen and records it on a recording medium.

例えば、特許文献１〜３に記載されたカラオケ装置などのように、演奏されるカラオケ曲に合わせて使用者（人物）が歌唱している姿に任意の背景画像を合成した歌唱音および演奏音（伴奏音）を含んだ映像データを光学式ディスクなどに記録する機能を有するものが提案されている。そして、使用者は、映像データを記録した光学式ディスクを後で再生して楽しむことができる。 For example, like a karaoke device described in Patent Documents 1 to 3, a singing sound and a performance sound obtained by synthesizing an arbitrary background image with a user (person) singing along with a karaoke piece to be played There has been proposed one having a function of recording video data including (accompaniment sound) on an optical disk or the like. Then, the user can play back and enjoy the optical disc on which the video data is recorded later.

特開平５−２３６４２３号公報JP-A-5-236423 特開２０００−２９４７２号公報JP 2000-29472 A 特開２００３−１７７７６４号公報Japanese Patent Laid-Open No. 2003-177764

しかしながら、上述したカラオケ装置などで使用者が歌唱している姿に任意の背景画像を合成する動作や、歌唱音および演奏音を含んだ映像データを光学式ディスクなどに記録する動作などは、リアルタイムで行うためにはそれぞれ専用の処理装置で行う必要があり、高価になってしなうという問題があった。そのため、例えば汎用のパーソナルコンピュータ（パソコン）などを用いて行う場合、ＣＰＵの処理能力が足りないために、合成した映像を一端バッファメモリなどに格納してから光学式ディスクなどに記録する必要があるためにリアルタイム処理が困難であった。 However, the operation of synthesizing an arbitrary background image with the figure of the user singing in the above-described karaoke apparatus, the operation of recording video data including singing sound and performance sound on an optical disk, etc. are in real time. However, there is a problem in that it is necessary to use a dedicated processing device to increase the cost. For this reason, for example, when using a general-purpose personal computer (personal computer) or the like, since the processing capacity of the CPU is insufficient, it is necessary to store the synthesized video in a buffer memory or the like and then record it on an optical disk or the like. Therefore, real-time processing was difficult.

上述した問題は、特に光学式ディスクなどに記録する際に、映像をＭＰＥＧ２などのＣＰＵに負荷が大きい符号化方式で符号化して記録すると影響が大きくなる。 The above-described problem is particularly affected when a video is encoded and recorded by an encoding method with a heavy load on a CPU such as MPEG2 when recording on an optical disk or the like.

そこで、本発明は、専用の装置を用いずに、リアルタイムに使用者が歌唱している姿に任意の背景画像を合成して記録媒体に記録することができるカラオケ自動レコーディング装置を提供することを課題とする。 Therefore, the present invention provides a karaoke automatic recording apparatus that can synthesize an arbitrary background image and record it on a recording medium in real time without using a dedicated apparatus. Let it be an issue.

伴奏音に合わせて歌唱している人物を撮影するカメラと、前記カメラが撮影した映像のうち前記人物部分と合成するための背景画像を記憶した記憶手段と、前記カメラが撮影した映像のうちの前記人物部分と前記記憶手段に記憶した背景画像とを合成する合成手段と、前記合成手段が合成した合成映像に前記伴奏音および前記人物の歌唱音とを含んだデータを記録媒体に記録するカラオケ映像記録手段と、を備えているカラオケ自動レコーディング装置であって、前記合成手段と、前記カラオケ映像記録手段と、がそれぞれ異なるＣＰＵで構成され、各々の前記ＣＰＵが独立して同時に動作することを特徴とするカラオケ自動レコーディング装置である。 A camera that shoots a person singing to the accompaniment sound, storage means that stores a background image to be combined with the person portion of the video shot by the camera, and of the video shot by the camera A synthesizer for synthesizing the person portion and a background image stored in the storage unit; and a karaoke for recording data including the accompaniment sound and the singing sound of the person on a synthesized video synthesized by the synthesizer on a recording medium A karaoke automatic recording apparatus comprising video recording means, wherein the synthesizing means and the karaoke video recording means are composed of different CPUs, and each of the CPUs operates independently and simultaneously. This is a karaoke automatic recording device.

以上説明したように請求項１に記載の発明によれば、合成手段と、カラオケ映像記録手段と、がそれぞれ異なるＣＰＵで構成され、各々のＣＰＵが独立して同時に動作するので、合成手段とカラオケ映像記録手段の動作がそれぞれ同時かつ独立に行うことができ、専用の装置を用いずに、リアルタイムに使用者が歌唱している姿に任意の背景画像を合成して光学式ディスクなどに記録することができる。 As described above, according to the first aspect of the present invention, the synthesizing means and the karaoke video recording means are composed of different CPUs, and each CPU operates independently and simultaneously. The operation of the video recording means can be performed simultaneously and independently, and without using a dedicated device, an arbitrary background image is synthesized and recorded on an optical disc or the like in real time as the user sings. be able to.

本発明の一実施形態にかかるカラオケ自動レコーディング装置の構成を示すブロック図である。It is a block diagram which shows the structure of the karaoke automatic recording apparatus concerning one Embodiment of this invention.

次に、本発明の一実施形態を図１を参照して説明する。本発明の一実施形態にかかるカラオケ自動レコーディング装置１は、図１に示すように、合成手段、カラオケ映像記録手段としてのＣＰＵ２と、ＲＡＭ３と、ＲＯＭ４と、記憶手段としてのＨＤＤ５と、ＤＶＤドライブ６と、カメラ７と、ビデオＩ／Ｆ８と、オーディオＩ／Ｆ９と、撮影条件設定手段としての操作部１０と、モニタ１１と、バス１２と、を備えている。 Next, an embodiment of the present invention will be described with reference to FIG. As shown in FIG. 1, a karaoke automatic recording apparatus 1 according to an embodiment of the present invention includes a CPU 2, a RAM 3, a ROM 4, a HDD 5 as a storage means, and a DVD drive 6 as synthesis means, karaoke video recording means. A camera 7, a video I / F 8, an audio I / F 9, an operation unit 10 as photographing condition setting means, a monitor 11, and a bus 12.

ＣＰＵ２は、図１に示したようにコアＡ２ａとコアＢ２ｂの２つのＣＰＵコアから構成されている。そして、カラオケ自動レコーディング装置１の全体制御をＲＯＭ３やＨＤＤ５などに格納された制御プログラムを実行することで行う。特に、本実施形態では、ビデオＩ／Ｆ８を介して入力されたカメラ７で撮影された映像と、ＨＤＤ５に予め格納されている背景画像とを合成（クロマキー合成）し、合成した映像と、オーディオＩ／Ｆ９を介して入力されるカラオケの伴奏音と、その伴奏音に合わせて歌唱している人物の歌声（歌唱音）と、を合わせてＭＰＥＧ２方式で符号化して符号化データをＤＶＤドライブ６に出力し、ＤＶＤドライブ６にセットされているＤＶＤに記録（録画）させる。 As shown in FIG. 1, the CPU 2 is composed of two CPU cores, a core A2a and a core B2b. Then, overall control of the karaoke automatic recording apparatus 1 is performed by executing a control program stored in the ROM 3 or the HDD 5. In particular, in the present embodiment, a video captured by the camera 7 input via the video I / F 8 and a background image stored in advance in the HDD 5 are synthesized (chroma key synthesis), and the synthesized video and audio Karaoke accompaniment sound input via the I / F 9 and singing voice (singing sound) of a person singing along with the accompaniment sound are encoded together by the MPEG2 system and the encoded data is DVD drive 6 And recorded (recorded) on the DVD set in the DVD drive 6.

本実施形態では、例えばコアＡ２ａに、ビデオＩ／Ｆ８を介して入力されたカメラ７で撮影された映像と、ＨＤＤ５に予め格納されている背景画像とを合成（クロマキー合成）させる動作を割り当て、コアＢ２ｂに、合成した映像と、オーディオＩ／Ｆ９を介して入力されるカラオケの伴奏音と、その伴奏音に合わせて歌唱している人物の歌声（歌唱音）と、を合わせてＭＰＥＧ２方式で符号化して符号化データをＤＶＤドライブ６に出力させる動作を割り当てる。 In the present embodiment, for example, an operation for synthesizing (chroma key composition) an image captured by the camera 7 input via the video I / F 8 and a background image stored in advance in the HDD 5 is assigned to the core A2a. In the MPEG2 system, the synthesized video, the karaoke accompaniment sound input via the audio I / F 9 and the singing voice (singing sound) of the person singing along with the accompaniment sound are combined in the core B2b. An operation of encoding and outputting the encoded data to the DVD drive 6 is assigned.

ＲＡＭ３は、揮発性のメモリで構成された読み書き可能な記憶素子であり、ＣＰＵ２が各種動作を行う際に発生するデータ等を一時的に格納するワーク領域として使用される。ＲＯＭ４は、不揮発性のメモリで構成された読み出し専用の記憶素子であり、カラオケ自動レコーディング装置１の制御プログラムやパラメータ等が記憶されている。 The RAM 3 is a readable / writable storage element composed of a volatile memory, and is used as a work area for temporarily storing data generated when the CPU 2 performs various operations. The ROM 4 is a read-only storage element configured by a nonvolatile memory, and stores a control program, parameters, and the like of the karaoke automatic recording apparatus 1.

ＨＤＤ５は、カラオケ自動レコーディング装置１の制御プログラムやカメラ７で撮影され人物と合成するための複数の背景画像などが格納されているハードディスクドライブである。ＤＶＤドライブ６は、ＣＰＵ２で背景と合成された映像に伴奏音と歌唱音を含んだＭＰＥＧ２方式で符号化されたデータを記録媒体であるＤＶＤに記録するドライブ装置である。 The HDD 5 is a hard disk drive that stores a control program of the karaoke automatic recording apparatus 1 and a plurality of background images that are photographed by the camera 7 and combined with a person. The DVD drive 6 is a drive device that records data encoded by the MPEG2 system including accompaniment sounds and singing sounds in the video synthesized with the background by the CPU 2 on a DVD as a recording medium.

カメラ７は、図示しないカラオケの伴奏音に合わせて歌唱している人物（歌唱者）を撮影しているビデオカメラであり、撮影した映像はビデオＩ／Ｆ８と、バス１２を介してＣＰＵ２に送られる。 The camera 7 is a video camera that shoots a person (singer) who is singing to an accompaniment sound of karaoke (not shown), and the captured video is sent to the CPU 2 via the video I / F 8 and the bus 12. It is done.

オーディオＩ／Ｆ９は、図示しないカラオケ装置から出力されたカラオケの伴奏音と歌唱音とをバス１２を介してＣＰＵ２に出力する。なお、伴奏音と歌唱音は両方が合成された音声として入力しても良いし、別々に入力しても良い。 The audio I / F 9 outputs karaoke accompaniment sounds and singing sounds output from a karaoke apparatus (not shown) to the CPU 2 via the bus 12. The accompaniment sound and the singing sound may be input as synthesized sounds or may be input separately.

操作部１０は、複数のボタン等が設けられカラオケ自動レコーディング装置１の操作を行う。この操作は、ＤＶＤへの記録の開始／終了や、カメラ７の操作および合成する背景画像の選択などである。なお、操作部１０はリモートコントローラ（リモコン）で構成しても良いし、カラオケ自動レコーディング装置１本体部とリモコンの双方で操作可能としても良い。 The operation unit 10 is provided with a plurality of buttons and operates the karaoke automatic recording apparatus 1. This operation includes starting / ending recording on the DVD, operating the camera 7 and selecting a background image to be synthesized. The operation unit 10 may be configured by a remote controller (remote controller), or may be operated by both the main unit of the karaoke automatic recording apparatus 1 and the remote controller.

モニタ１１は、カラオケ自動レコーディング装置１の操作画面やカメラ７が撮影した映像あるいは合成画像などが表示される表示装置であり、例えば液晶ディスプレイなどで構成される。 The monitor 11 is a display device that displays an operation screen of the karaoke automatic recording apparatus 1, a video image taken by the camera 7, a composite image, or the like, and is configured by a liquid crystal display, for example.

このように構成されたカラオケ自動レコーディング装置１は、まず、ＤＶＤドライブ６にＤＶＤのディスクをセットする。そして、操作部１０でモニタ１０に表示される操作画面を参照しながらＨＤＤ５に格納されている背景画像を選択し、録画を開始する操作を行うと、カメラ７は歌唱者の撮影を開始する。ＣＰＵ２で歌唱者と選択した背景画像と合成して伴奏音と歌唱音とを含むＭＰＥＧ２で符号化したデータとしてＤＶＤドライブ６からＤＶＤに記録する。そして、歌唱が終了したら、操作部１０で録画を終了する操作を行うことでＤＶＤへの記録を終了する。 The karaoke automatic recording apparatus 1 configured as described above first sets a DVD disc in the DVD drive 6. When the operation unit 10 selects a background image stored in the HDD 5 while referring to an operation screen displayed on the monitor 10 and performs an operation of starting recording, the camera 7 starts to shoot a singer. The data is recorded on the DVD from the DVD drive 6 as data encoded by MPEG2 including the accompaniment sound and the singing sound by combining with the background image selected by the singer by the CPU 2. Then, when the singing is finished, the recording to the DVD is finished by performing an operation of ending the recording with the operation unit 10.

本実施形態によれば、ＣＰＵ２が、コアＡ２ａとコアＢ２ｂの２つのコアＣＰＵから構成され、コアＡ２ａに、ビデオＩ／Ｆ８を介して入力されたカメラ７で撮影された映像と、ＨＤＤ５に予め格納されている背景画像とを合成（クロマキー合成）させ、コアＢ２ｂに、合成した映像とオーディオＩ／Ｆ９を介して入力されるカラオケの伴奏音と、その伴奏音に合わせて歌唱している人物の歌声（歌唱音）と、を含みＭＰＥＧ２方式で符号化したデータをＤＶＤドライブ６に出力させるので、合成処理と合成映像と音声の符号化および出力処理をそれぞれのコアＣＰＵで行うことができ、各動作がそれぞれ同時かつ独立に行うことができ、専用の装置を用いずに、リアルタイムに使用者が歌唱している姿に任意の背景画像を合成してＤＶＤに記録することができる。 According to the present embodiment, the CPU 2 is composed of two core CPUs, the core A 2 a and the core B 2 b, and the video shot by the camera 7 input to the core A 2 a via the video I / F 8 and the HDD 5 in advance. A person who synthesizes a karaoke accompaniment sound input to the core B2b via the audio I / F 9 by synthesizing with the stored background image (chroma key synthesis) and the accompaniment sound. Since the DVD drive 6 outputs the encoded data including the singing voice (singing sound) to the DVD drive 6, it is possible to perform the synthesizing process, the synthesizing video and audio, and the output process in each core CPU. Each operation can be performed simultaneously and independently, and without using a dedicated device, any background image can be combined with the user singing in real time to create a DVD It is possible to record.

なお、上述した実施形態は本発明の代表的な形態を示したに過ぎず、本発明は、実施の形態に限定されるものではない。すなわち、本発明の骨子を逸脱しない範囲で種々変形して実施することができる。 In addition, embodiment mentioned above only showed the typical form of this invention, and this invention is not limited to embodiment. That is, various modifications can be made without departing from the scope of the present invention.

１カラオケ自動レコーディング装置
２ＣＰＵ（合成手段、カラオケ映像記録手段）
２ａコアＡ（異なるＣＰＵ）
２ｂコアＢ（異なるＣＰＵ）
５ＨＤＤ（記憶手段）
７カメラ
１０操作部（撮影条件設定手段） 1 Karaoke automatic recording device 2 CPU (compositing means, karaoke video recording means)
2a Core A (different CPU)
2b Core B (different CPU)
5 HDD (storage means)
7 Camera 10 Operation section (shooting condition setting means)

Claims

A camera that shoots a person singing to the accompaniment sound, storage means that stores a background image to be combined with the person portion of the video shot by the camera, and of the video shot by the camera A synthesizer for synthesizing the person portion and a background image stored in the storage unit; and a karaoke for recording data including the accompaniment sound and the singing sound of the person on a synthesized video synthesized by the synthesizer on a recording medium A karaoke automatic recording device comprising video recording means,
The karaoke automatic recording apparatus, wherein the synthesizing means and the karaoke video recording means are constituted by different CPUs, and each of the CPUs operates independently and simultaneously.