KR20200014127A

KR20200014127A - Distance education system, check-in method and program

Info

Publication number: KR20200014127A
Application number: KR1020180089605A
Authority: KR
Inventors: 조수천
Original assignee: (주)한국배드민턴교육원
Priority date: 2018-07-31
Filing date: 2018-07-31
Publication date: 2020-02-10

Abstract

The present invention provides a remote education system capable of preventing vicarious lecture attendance by a third person using a recorded video or the like in remote education and checking whether a regular student attends a lecture. The remote education system (1) comprises a web server (10), a bidirectional communication server (20), a content transfer server (30), an operation management system (40), an instructor terminal (60), and a communication line connection device (70). Remote education is provided for student terminals (101, 102, ...) through the Internet (2). The operation management system (40) has a database (50) in which a lecture schedule, an attendance book, and personal information, faces, images, voices, and the like of students are registered, and performs lecture setting processing (41), lecture attendance registration processing (42), lecture opening processing (43), lecture attendance checking processing (44), and the like. The lecture attendance checking processing (44) consists of student image acquisition processing (45), face image combination processing (46), action request processing (47), and action detection processing (48) to detect an image change for a requested action and a combination of face images of a student.

Description

Distance education system and check-in method and program

본원 발명은, 영상 및 음성을 포함한 멀티미디어에 의한 쌍방향 통신을 이용해 원격으로 교육을 행하는 원격 교육 시스템에 관하고, 특히 정규의 수강자가 수강하고 있는 것을 확인하는 수강 확인 기능을 가지는 원격 교육 시스템, 수강 확인방법 및 수강 확인 프로그램에 관한 것이다The present invention relates to a remote education system for remotely training by using two-way communication by means of multimedia including video and audio, and in particular, a remote education system having a course confirmation function for confirming that a regular student is taking a course, course registration. It is about method and course confirmation program

근년, 통신기술의 발달에 의해, 영상 및 음성을 포함한 멀티미디어에 의한 쌍방향 통신을 이용해, 수강자가 원격지로부터 통신회선을 개재하여 교육을 받을 수 있는 원격 교육 시스템의 실용화가 시작되고 있다In recent years, with the development of communication technology, the practical use of the remote education system, which enables the learners to receive education through a communication line from a remote location, using two-way communication using multimedia including video and audio, has begun.

이러한 원격 교육 시스템은, 금후 정규의 교육 수단으로서 인정되는 추세이고, 원격 교육에 의해 정규의 단위 취득이나자격의 인정을 인정해 가기 위해서는, 수강자의 수강 확인을 적확(的確)하게 행하는 것이 요구된다 특히, 원격 교육에 있Such a distance learning system is a trend which is recognized as a regular education means in the future, and in order to recognize the regular unit acquisition and the recognition of qualification by distance education, it is required to perform the confirmation of the attendees correctly. Being in distance education

어서는, 1명의 강사에 의해 다수의 수강자에게 대응하는 경우나, 프로그램화된 무인 강좌를 수강자가 자주적으로 수강하는 경우가 있어, 남의 손에 의지하지 않는 수강자의 수강 확인 방법이 필요하다고 생각된다For example, when one lecturer copes with a large number of attendees or attends programmatic unattended lecture independently, it is thought that attendance check method of attendee who does not depend on hand of others is necessary

종래, 수강자의 수강을 확인하는 방법으로서 예를 들면 재공표 공보 WO00－59226호에 기재된 시청각 인증 시스템이 있었다 이것은, 방송제공자가 고유의 시청 확인 코드를 고유의 타이밍으로 시청자에 대해서 제시하고, 이것에 대해서 시청자가 시청각 단말로부터 입력한 시청 확인 코드를 입력 시각과 동시에 시청각 인증 시스템에 전달하고, 시청각 인증 시스템은 전달된 시청 확인 코드와 입력 시각으로부터 시청자가 실제로 프로그램을 시청 한 것을 판단하는 것이다Conventionally, there has been an audiovisual authentication system described in, for example, Republished Publication No. WO00-59226 as a method of confirming the attendance of a participant. In this regard, the viewing confirmation code input from the audiovisual terminal is transmitted to the audiovisual authentication system at the same time as the input time, and the audiovisual authentication system determines that the viewer actually watched the program from the delivered viewing confirmation code and the input time.

그렇지만, 이러한 종래의 시청각 인증 시스템은, 입력된 시청 확인 코드와 시각 정보로부터 시청자가 프로그램을 시청하고 있던 것을 판단하는 것이고, 시청자가 프로그램을 시청하고 있었던 것은 확인할 수 있지만, 그 시청자가 등록된 정규의However, such a conventional audiovisual authentication system judges that a viewer is watching a program from an input viewing confirmation code and time information, and confirms that the viewer was watching the program.

수강자라고 하는 것은 보증되지 않는다 따라서, 예를 들면 정규의 수강자가 제3자에게 대신 수강을 의뢰했을 경우에 있어서도 정규의 수강자가 수강하고 있었던 것으로 기록된다 또, 원격 교육 시스템을 이용하는 수강자에 대해서 시험을 행하Therefore, it is not guaranteed that a participant is enrolled, even if a regular participant asks a third party to take the course instead. It is also recorded for the participant who uses the distance learning system. tip

는 경우에, 정규의 수강자가 제3자에게 대신 수험을 의뢰하는 일도 간단히 가능하게 된다In this case, it is also possible for a regular student to refer to a third party for examination.

한편, 수강자가 등록된 정규의 수강자인 것을 확인하는 방법으로서는, 미리 등록된 패스워드를 수강자에게 입력시키는 패스워드 인증법, 미리 등록한 개인정보에 있어서 수강자에게 질문 확인하는 개인정보 질문 확인법, 수강자의 얼굴 등의 화상을 취득해 미리 등록된 수강자의 얼굴 등의 화상과 화상 조합(照合)하는 화상 조합법, 수강자의 음성을 취득해 미리 등록된 수강자의 음성과 조합하는 음성 조합법 등이 고려된다On the other hand, as a method of confirming that the learner is a registered regular learner, a password authentication method for inputting a pre-registered password to the learner, a personal information question confirmation method for confirming a question to the learner in the pre-registered personal information, a student's face, etc. Image combination methods for acquiring an image and combining the image with an image such as a face of a pre-registered learner, a voice combination method for acquiring a voice of a learner and combining it with a voice of a pre-registered learner are considered.

그렇지만, 패스워드 인증법이나 개인정보 질문 확인법에서는, 정규의 수강자가 미리 제3자에게 패스워드나 개인정보를 가르쳐 두는 것으로, 그 제3자에게 대신 수강시킬 수가 있다However, in the password authentication method and the personal information question confirmation method, a regular student can teach the third party a password or personal information in advance, and the third party can take the class instead.

또, 화상 조합법이나 음성 조합법에 있어서도, 수강 확인 요구를 받은 수강자가 미리 녹화한 정규의 수강자의 영상이나미리 녹음한 정규의 수강자의 음성을 단말로부터 송신하는 것으로, 제3자에게 대신 수강시키는 것이 가능하다In addition, even in the image combination method and the audio combination method, a third party can take a course instead of transmitting a video of a regular learner pre-recorded by a student who received a course confirmation request or a voice of a regular learner pre-recorded from a terminal. Do

이와 같이, 종래의 수강 확인 방법에서는, 정규의 수강자가 의도적으로 제3자에게 대신 수강시키는 것이 가능하고, 정규의 수강자가 수강하고 있는 것을 확인하는 것이 곤란하다는 문제가 있었다As described above, in the conventional course confirmation method, there is a problem that a regular learner can intentionally take a third party instead, and it is difficult to confirm that a regular learner is taking the course.

그러기 때문에, 본원 발명의 주된 목적은, 원격 교육에 있어서 녹화 영상 등을 이용한 제3자에 의한 대신 수강을 방지해,정규의 수강자가 수강하고 있는 것을 확인할 수 있는 원격 교육 시스템을 제공하는 것이다Therefore, the main object of the present invention is to provide a distance education system that can prevent the attendance of a third party using a recorded video or the like in distance education, and confirm that a regular student is taking the course.

청구항 1에 기재한 원격 교육 시스템은, 영상 및 음성을 포함한 멀티미디어의 쌍방향 통신에 의해 원격으로 교육을 행하는 원격 교육 시스템에 있어서, 수강자의 영상을 취득하는 수강자 영상 취득 수단과, 수강자 영상 취득 수단에 의해 취득된The distance learning system according to claim 1 is a distance education system that performs education remotely by multimedia two-way communication including video and audio, comprising: a participant image acquisition means for acquiring an image of a participant, and a participant image acquisition means; Acquired

영상을 미리 등록된 수강자의 얼굴 화상과 조합하는 얼굴 화상 조합 수단과, 수강자에 대해서 액션을 요구하는 액션 요구수단과, 수강자 영상 취득 수단에 의해 취득된 수강자의 영상의 화상 변화에 의해 수강자의 액션을 검출하는 액션 검출 수A face image combining means for combining the image with a face image of a pre-registered learner, an action requesting means for requesting an action for the learner, and a change in the image of the learner acquired by the learner image acquiring means. The number of action detections to detect

단을 갖추고, 정규의 수강자가 수강하고 있는 것을 확인하는 기능을 가지는 것이다We have step and have function to confirm that regular student attending

수강자 영상 취득 수단에 의해 수강자 단말로부터 송신되는 수강자의 영상을 취득해, 얼굴 화상 조합 수단에 의해 취득된 수강자의 영상을 미리 등록된 수강자의 얼굴 화상과 조합하기 때문에, 해당 취득된 영상이 정규의 수강자의 영상인 것Because the learner image acquisition means acquires the video of the learner transmitted from the learner terminal and combines the video of the learner acquired by the face image combining means with the face image of the enrolled learner in advance, the acquired video is a regular learner. Being image

을 확인할 수 있다 또, 액션 요구 수단에 의해 수강자에 대해서 액션을 요구해, 액션 검출 수단에 의해 수강자가 액션 한 것을 취득된 수강자의 영상의 화상 변화에 의해 검출하기 때문에, 정규의 수강자가 미리 녹화한 영상 등을 이용해 제3자에게In addition, since the action request means requests an action to the learner and detects the action taken by the learner by the action detecting means by the image change of the acquired learner's video, the video recorded by the regular learner in advance. To third parties using

대신 수강시켰을 경우에는 액션 요구에 대응한 화상 변화는 생기지 않기 때문에, 대신 수강을 간파할 수가 있어 정규의 수강자가 수강하고 있는 것을 확인할 수 있다 또한, 액션 요구 수단에 의해 수강자에게 요구하는 액션으로서는, 취득된 영상에 화상 변화를 일으키게 하는 것이면 어느 것이라도 좋고, 예를 들면, 얼굴을 움직인다, 눈을 감는다, 입을 움직인다, 손을 올린다 등도 좋다If the course is taken instead, there will be no image change in response to the action request. Therefore, it is possible to see the course instead, and it is possible to confirm that the regular attendees are taking the course. As long as it causes an image change in the captured image, it may be any one, for example, moving a face, closing an eye, moving a mouth, raising a hand, or the like.

액션 요구 수단에 의해 수강자에 대해서 얼굴의 위치를 움직이도록 요구해, 액션 검출 수단에 의해 수강자가 얼굴의 위The action request means requires the face to be moved with respect to the participant.

치를 이동한 것을 취득된 영상의 화상 변화에 의해 검출하기 때문에, 정규의 수강자가 미리 녹화한 영상 등을 이용해 제3자에게 대신 수강시켰을 경우에는 지시대로 얼굴의 위치는 변화하지 않는 것이기 때문에, 대신 수강을 간파할 수가 있어Since the shift of the value is detected by the image change of the acquired image, if the regular attendees take a third person instead using a pre-recorded image or the like, the position of the face does not change as instructed. I can see

정규의 수강자가 수강하고 있는 것을 확인할 수 있다We can confirm that regular attendees are taking

청구항 3에 기재한 원격 교육 시스템은, 청구항 1 또는 청구항 2에 기재한 원격 교육 시스템이며, 액션 요구 수단은 수강자에게 질문을 해 음성 회답을 요구하는 기능을 포함하고, 액션 검출 수단은 수강자의 음성을 취득하는 기능과 취득된 음The distance learning system according to claim 3 is the distance education system according to claim 1 or 2, wherein the action requesting means includes a function of asking a student a question and requesting a voice reply, and the action detecting means detects the learner's voice. Function to acquire and acquired note

성으로부터 음성 회답을 인식하는 기능과, 인식된 음성 회답으로부터 수강자의 음성 회답의 타당성을 판정하는 기능과 수강자의 음성 회답에 수반하는 수강자의 입의 움직임을 검출하는 기능을 포함하는 것이다It includes the function of recognizing the voice answer from the surname, the function of determining the validity of the learner's voice response from the recognized voice response, and the function of detecting the movement of the student's mouth accompanying the student's voice response.

액션 요구 수단에 의해 수강자에게 질문을 해서 음성 회답하도록 요구하고, 액션 검출 수단에 의해 수강자의 음성을 취득하고, 음성 회답을 인식해 수강자의 음성 회답의 타당성을 판정함과 동시에, 그 음성 회답에 수반하는 수강자의 입의 움Ask the learner to answer the question by the action request means, obtain the voice of the learner by the action detection means, recognize the voice answer, determine the validity of the learner's voice answer, and accompany the voice answer. The mouth of the participant

직임을 취득된 영상의 화상 변화에 의해 검출하기 때문에, 얼굴 화상 조합 수단에 의해 정규의 수강자라고 판단된 수강자가 질문에 대해서 음성 회답하고 있는 것이 확인되어 정규의 수강자가 수강하고 있는 것을 확인할 수 있다Since the job title is detected by the image change of the acquired image, it is confirmed by the face image combination means that the learner who is determined to be a regular learner is answering the question by voice and can confirm that the regular learner is taking the course.

청구항 4에 기재한 원격 교육 시스템은, 청구항 3에 기재한 원격 교육 시스템이며, 액션 검출 수단은 수강자의 음성 회답을 미리 등록된 수강자의 음성과 조합하는 기능을 포함하는 것이다The distance learning system according to claim 4 is the distance education system according to claim 3, and the action detection means includes a function of combining the voice response of the learner with the voice of the pre-registered learner.

액션 검출 수단에 의해 수강자의 음성 회답을 미리 등록된 수강자의 음성과 조합하기 때문에, 수강자는 얼굴 화상의 조합뿐만이 아니라 음성의 조합도 행해져 정규의 수강자가 수강하고 있는 것을 보다 정밀도 좋게 확인할 수 있다Since the voice detection of the participants is combined with the voices of the participants who are registered in advance by the action detection means, the participants can not only combine the face images but also the voices, so that the regular participants can take a more accurate confirmation.

청구항 5에 기재한 원격 교육 시스템은, 청구항 3 또는 청구항 4에 기재한 원격 교육 시스템이며, 액션 요구 수단은 수강The distance learning system according to claim 5 is the distance education system according to claim 3 or 4, and the action requesting means takes a course.

자에게 시각에 관한 질문을 행해 음성 회답을 요구하는 기능을 포함하고, 액션 검출 수단은 수강자가 회답했던 시각의 타당성을 판정하는 기능을 포함하는 것이다It includes a function of asking a person a question about the time and requesting a voice response, and the action detecting means includes a function of determining the validity of the time the participant has answered.

원격 교육을 진행하는데 있어 제 3자의 수강을 방지하고 정규의 수강자에게 수강하고 있다는 것은 원격으로 제공한다. 운영 관리 시스템을 통하여 강좌의 스케줄 확인이 가능하고 출석부를 구현할 수 있다. 수강자의 강좌 설정 처리, 수강 등록 처리 등이 진행 가능하다In the course of distance education, it is possible to prevent the participation of third parties and to attend the regular students remotely. Through the operation management system, it is possible to check the schedule of the course and implement the attendance unit. Course setting process and course registration process

도 1은, 본원 발명의 일실시 형태에 관련된 원격 교육 시스템의 시스템 구성도이다
도 2는, 본원 발명의 일실시 형태에 관련된 원격 교육 시스템에 의해 수강자 단말에 표시되는 화면의 예를 나타내는 도이다
도 3은, 본원 발명의 일실시 형태에 관련된 원격 교육 시스템의 수강 확인 프로그램의 처리 플로도(그 1)이다
도 4는, 본원 발명의 일실시 형태에 관련된 원격 교육 시스템의 수강 확인 프로그램의 처리 플로도(그 2)이다
도 5는, 본원 발명의 일실시 형태에 관련된 원격 교육 시스템의 수강 확인 프로그램의 처리 플로도(그 3)이다1 is a system configuration diagram of a distance learning system according to an embodiment of the present invention.
2 is a diagram illustrating an example of a screen displayed on a student terminal by the distance learning system according to an embodiment of the present invention.
3 is a process flowchart (part 1) of the course confirmation program of the distance learning system according to an embodiment of the present invention.
4 is a process flow diagram (2) of the course confirmation program of the distance learning system according to one embodiment of the present invention.
5 is a process flowchart (part 3) of the course confirmation program of the distance learning system according to an embodiment of the present invention.

1에 본원 발명의 일실시 형태에 관련된 원격 교육 시스템의 시스템 구성도를 나타낸다 도에 있어서, 1은 원격 교육시스템이며, Web 서버 (10)과 쌍방향 통신 서버 (20)과 콘텐츠 전달 서버 (30)과 운영 관리 시스템 (40)과 강사가 사용하1 shows a system configuration diagram of a remote education system according to an embodiment of the present invention. In FIG. 1, a distance education system includes a Web server 10, an interactive communication server 20, a content delivery server 30, Used by instructors and operations management system (40)

는 강사 단말 (60)과 통신회선 접속 장치 (70)이, 네트워크로 접속되고 있어 원격 교육 서비스의 제공시에는 통신회선 (2)을 개재하여 수강자가 사용하는 수강자 단말 (101, 102,…)와 접속된다The instructor terminal 60 and the communication line connection device 70 are connected by a network, and the learner terminals 101, 102,... Used by the student via the communication line 2 when providing the distance learning service. Connected

Web 서버 (10)은, 본 시스템을 사용할 때의 창구가 되는 WWW 서버이며, 강사 단말 (60)이나 수강자 단말 (101,102,…)로부터 Web 브라우저를 이용해 소정의 페이지에 액세스하는 것으로서, 강좌의 설정이나 진행, 수강 수속 등을 행할 수가 있다The web server 10 is a WWW server serving as a window when using the system, and accesses a predetermined page from a lecturer terminal 60 or a student terminal 101, 102 using a web browser. Advancement, procedure, etc. can be performed

쌍방향 통신 서버 (20)은, 접속하는 단말의 단말 주소를 등록하는 접속처 테이블을갖추고 접속처 테이블에 등록된 단말간을 접속해, 영상 및 음성을 포함한 멀티미디어 정보에 의한 쌍방향 통신 기능을 제공한다 강좌의 개설 중은, 접속처 테The bidirectional communication server 20 has a destination table for registering a terminal address of a terminal to be connected, and connects terminals registered in the destination table to provide a bidirectional communication function based on multimedia information including video and audio. During establishment of connection

이블에는 강사 단말 (60)과 해당 강좌에 출석하는 수강자가 사용하는 수강자 단말 (101,102,…)의 단말 주소가 등록되어강사 단말 (60)으로부터 송신되는 영상 및 음성과 각 수강자 단말 (101,102,…)로부터 송신되는 영상 및 음성을 수신해, 수In the table, the terminal address of the instructor terminal 60 and the student terminals (101, 102, ...) used by the attendees attending the lecture are registered, and the video and audio transmitted from the lecturer terminal (60) and each student terminal (101, 102, ...) Receive video and audio from

신한 영상 및 음성을 합성해 강사 단말 (60) 및 각 수강자 단말 (101,102,…)에 송신한다Shinhan video and audio are synthesized and sent to the lecturer terminal 60 and each student terminal 101,102,...

콘텐츠 전달 서버 (30)은, 동화상·정지화면상·음성·텍스트·효과음 등의 멀티미디어의 교재를 기억시킨 교재 데이타베이스 (32)를 갖추어 배신처 테이블에 등록된 단말에 대해서 지정된 콘텐츠를 전달하는 기능을 제공한다 강좌의 개설 중은,The content delivery server 30 has a teaching material database 32 which stores multimedia teaching materials such as moving images, still images, voices, texts, and sound effects, and delivers the specified contents to terminals registered in the destination table. During establishment of course,

배신처 테이블에는 강사 단말 (60)과 해당 강좌에 출석하는 수강자가 사용하는 수강자 단말 (101,102,…)의 단말 주소가등록되어 강사 단말 (60)으로부터 지정된 교재 콘텐츠가 각 단말에 배신 된다In the distribution table, the terminal addresses of the instructor terminal 60 and the student terminals 101,102,... Used by the student attending the course are registered, and the teaching material contents designated by the instructor terminal 60 are delivered to each terminal.

운영 관리 시스템 (40)은, 원격 교육의 운영 관리를 하는 시스템이며, 제공하는 강좌에 관한 각종의 데이터를 기억시킨 강좌 정보 데이타베이스 (50)을 갖추고 강좌를 설정하는 강좌 설정 처리 (41), 설정된 강좌를 개설하는 강좌 개설 처리The operation management system 40 is a system which manages the operation of distance education, and has a course information database 50 storing various data about a course to be provided, the course setting process 41 of setting a course and setting Course establishment processing to establish course

(42), 개설된 강좌의 수강을 접수수강 접수 처리 (43), 강좌 개설중의 수강자의 수강을 확인하는 수강 확인 처리 (44) 등의 처리를 행한다(42), such as the course registration processing (43) which accepts the attendance of the established course, the course confirmation process (44) which confirms the attendance of the learner in course establishment.

강사 단말 (60)은, 강사의 영상을 취득하는 텔레비전 카메라(a)와 강사의 음성의 입출력을 행하는 헤드 세트(b)와 화상을 표시하는 모니터 화면(c)과 커멘드나 메세지의 입력용의 키보드(d)·마우스(e)와 영상 입력 인터페이스·음성 입출력 인The lecturer terminal 60 includes a television camera (a) for acquiring a video of a lecturer, a headset (b) for inputting and outputting a voice of a lecturer, a monitor screen (c) for displaying an image, and a keyboard for inputting commands and messages. (d) Mouse (e) and video input interface, audio input and output

터페이스·네트워크 접속 장치 등을 갖춘 컴퓨터(f)로부터 구성되어 컴퓨터에는 강사의 영상 및 음성을 취득해 쌍방향 통신서버 (20)에 송신함과 동시에, 쌍방향 통신 서버 (20)으로부터 송신되는 영상 및 음성을 모니터 화면 및 헤드 세트에 출력Video and audio transmitted from the bidirectional communication server 20 while acquiring the video and audio of an instructor and being transmitted to the bidirectional communication server 20 by the computer f having an interface network connection device or the like. Output to monitor screen and headset

하는 영상 음성 통신 프로그램과 콘텐츠 전달 서버 (30)으로부터 배신 되는 화상 및 음성을 모니터 화면 및 헤드 세트에 출력하는 콘텐츠 표시 프로그램과 Web 서버 (10)에 액세스하기 위한 Web 브라우저가 인스톨 되고 있다There is installed a video and audio communication program, a content display program for outputting images and audio delivered from the content delivery server 30 to a monitor screen and a headset, and a web browser for accessing the Web server 10.

통신회선 (2)는, 유선의 컴퓨터 네트워크, 무선의 컴퓨터 네트워크, 전화 회선, 위성 회선, 인터넷 등, 어떠한 통신회선에 대해서도 적응할 수 있지만, 여기에서는 인터넷을 사용했을 경우를 예를 들어 설명한다 따라서, 통신회선 접속 장치 (70)은, 인터넷에 접속하기 위한 인터넷 루터를 사용한다The communication line 2 can be adapted to any communication line, such as a wired computer network, a wireless computer network, a telephone line, a satellite line, the Internet, but the following description will be given using the Internet as an example. The communication line connection device 70 uses an Internet router for connecting to the Internet.

한편, 수강자 단말 (101,102,…)는, 강사 단말 (60)과 같게, 수강자의 영상을 취득하는 텔레비전 카메라(a)와 수강자의 음성의 입출력을 행하는 헤드 세트(b)와 화상을 표시하는 모니터 화면(c)과 커멘드나 메세지의 입력을 위한 키보드(d)·마On the other hand, the student terminal (101, 102, ...), similar to the instructor terminal 60, the television camera (a) for acquiring the video of the learner, the head set (b) for inputting and outputting the audio of the learner and the monitor screen for displaying the image (c) and keyboards (d) for entering commands and messages

우스(e)와 영상 입력 인터페이스·음성 입출력 인터페이스·인터넷 접속 장치(예를 들면 TA등)를 갖춘 컴퓨터(f)로 구성되어수강자의 영상 및 음성을 취득해 쌍방향 통신 서버 (20)에 송신함과 동시에 쌍방향 통신 서버 (20)으로부터 송신되는 영상And a computer f equipped with a mouse (e), a video input interface, a voice input / output interface, and an Internet connection device (e.g., TA) to acquire and transmit the video and audio of the participant to the interactive communication server 20; Video transmitted from bidirectional communication server 20 at the same time

및 음성을 모니터 화면 및 헤드 세트에 출력하는 영상 음성 통신 프로그램과 콘텐츠 전달 서버 (30)으로부터 배신 되는 화상 및 음성을 모니터 화면 및 헤드 세트에 출력하는 콘텐츠 표시 프로그램과 Web 서버 (10)에 액세스하기 위한 Web 브라And a video voice communication program for outputting audio to a monitor screen and a head set, and a content display program for outputting images and audio distributed from the content delivery server 30 to a monitor screen and a head set, and to access the Web server 10. FIG. Web bra

우저가 인스톨 되고 있다.Wooju is installed.

다음에, 본 원격 교육 시스템 (1)에 의해 원격 교육을 실시하는 순서에 있어서 설명한다.Next, a description will be given of the procedure for carrying out the distance education by the distance education system (1).

최초로, 원격 교육을 실시하는 사무국은, 강사 단말 (60) 또는 전용의 사무국 단말(도시 생략)로부터 Web 서버 (10)의사무국의 페이지에 액세스해, 연간의 교육 플랜과 대응하는 강사의 스케줄을 기본으로 개설하는 강좌를 결정해 입력한다.First, secretariat performing distance education accesses page of secretariat of Web server 10 from lecturer terminal 60 or exclusive secretariat terminal (not shown) and bases schedule of lecturer corresponding to annual education plan We decide course to open in and input.

이것에 의해, 운영 관리 시스템 (40)의 강좌 설정 처리 (41)에 의해 강좌 정보 데이타베이스 (50)에 강좌 스케줄 데이타베이스 (51)이 구축되어 각 강좌별로 출석부가 생성되어 출석부 데이타베이스 (52)에 등록된다.Thereby, the course schedule database 51 is constructed in the course information database 50 by the course setting process 41 of the operation management system 40, and an attendance part is created for each course, and the attendance part database 52 is performed. Is registered to.

또, 사무국은 수강자를 모집해, 일정한 수강 기준을 만족시키는 각 수강자에 대해서 Web 서버 (10)에 액세스하기 위한 ID와 패스워드를 발행한다. ID와 패스워드가 발행된 각 수강자는, 각 수강자 단말로부터 Web 서버 (10)의 수강자의 페이The secretariat also recruits students and issues IDs and passwords for accessing the Web server 10 for each learner who satisfies a certain course standard. Each learner whose ID and password were issued is a payee of the learner of the Web server 10 from each learner terminal.

지에 액세스해, 수강자의 개인정보의 등록과 수강 확인시의 얼굴 화상의 조합에 사용하는 얼굴 화상의 등록과 수강 확인시의 개인정보에 관한 질문에 대한 음성 회답의 조합에 사용하는 음성의 등록을 행한다.Access and register voice to use for combination of voice reply to question about registration of face image to use for combination of registration of face student and combination of face image at the time of course confirmation and personal information at the time of course confirmation .

개인정보의 등록은, 운영 관리 시스템 (40)의 수강 등록 처리 (42)에 의해, 각 수강자의 입력한 이름·연령·성별·생년월일·주소·전화번호·메일 주소 등이, 각 수강자의 ID·패스워드 및 각 수강자 단말의 단말 주소와 함께 강좌 정보 데이타베이스Registration of personal information is each student's ID, name, age, gender, date of birth, address, telephone number, e-mail address, etc., registered by the course registration process 42 of the operation management system 40. Course information database with password and terminal address of each student's terminal

(50)의 개인정보 데이타베이스 (53)에 등록된다. 또, 해당 수강자가 수강을 희망하는 강좌에 있어서, 강좌 스케줄 데이타베이스 (51)을 참조해 수강 가부가 판정되어 수강 가능한 경우는 출석부 데이타베이스 (52)의 해당 강좌의 출석부에 해당 수It is registered in the personal information database 53 of 50. In addition, in the course which the attendee wants to attend, the attendance decision is made with reference to the course schedule database 51, and if the attendance is available, the attendance part of the corresponding course of the attendance part database 52 is applicable.

강자가 등록된다.Strong person is registered.

얼굴 화상의 등록은, 운영 관리 시스템 (40)의 수강 등록 처리 (42)에 의해, 쌍방향 통신 서버 (20)의 접속처 테이블에 해당 수강자 단말의 단말 주소와 운영 관리 시스템의 주소가 설정되어 해당 수강자가 Web 페이지에 설치된 얼굴 화상 등록The registration of the face image is performed by the course registration process 42 of the operation management system 40, and the terminal address of the corresponding student terminal and the address of the operation management system are set in the connection destination table of the bidirectional communication server 20, and the corresponding students Registration of face images installed in Web pages

버튼(도시 생략)을 클릭했을 때의 영상이 정지화면상으로서 기록되어 강좌 정보 데이타베이스 (50)의 얼굴 화상데이터베이스 (54)에 등록된다.The image when the button (not shown) is clicked is recorded as a still image and registered in the face image database 54 of the course information database 50. FIG.

음성의 등록은, 똑같이 운영 관리 시스템 (40)의 수강 등록 처리 (42)에 의해, 쌍방향 통신 서버 (20)의 접속처 테이블에 해당 수강자 단말의 단말 주소와 운영 관리 시스템의 주소가 설정되어 해당 수강자가 Web 페이지에 설치된 개인정보 항목As for the registration of the voice, the terminal address of the attendee terminal and the address of the operation management system are set in the connection table of the bidirectional communication server 20 by the course registration process 42 of the operation management system 40, and the attendees Information items installed on the web page

별의 음성 등록 버튼(도시 생략)을 클릭했을 때의 해당 수강자의 음성이 취득되어 강좌 정보 데이타베이스 (50)의 음성 데이타베이스 (55)에 개인정보 항목별로 등록된다.When a star voice registration button (not shown) is clicked, voices of the corresponding learners are acquired and registered in the voice database 55 of the course information database 50 for each personal information item.

강좌 스케줄 데이타베이스 (51)에 설정된 강좌의 날짜와 시간이 되면, 강좌 개설 처리 (43)에 의해, 쌍방향 통신 서버(20)과 콘텐츠 배신 서버 (30)에 강좌가 설정된다.When the date and time of the course set in the course schedule database 51 is reached, the course is set in the interactive communication server 20 and the content delivery server 30 by the course establishment process 43.

해당 강좌의 수강자는, 수강자 단말 (101,102,…)로부터 수강 접수의 페이지에 액세스해 소정의 ID와 패스워드에 의해 체크인하는 것으로서, 쌍방향 통신 서버 (20)의 접속처 테이블과 콘텐츠 전달 서버 (30)의 배신처 테이블에 해당 수강자 단The attendees of the course access the page of the course reception from the learner terminals (101, 102, ...), check in by a predetermined ID and password, and check the connection destination table of the bidirectional communication server 20 and the content delivery server 30. Correspondents in the destination table

말의 단말 주소가 설정된다.The terminal address of the horse is set.

또, 해당 강좌의 강사는, 강사 단말 (60)으로부터 Web 서버의 강사 접수의 페이지에 액세스하는 것으로서, 쌍방향 통신서버 (20)의 접속처 테이블과 콘텐츠 배신 서버 (30)의 배신처 테이블에 해당 강사 단말 (60)의 단말 주소가 설정된다.In addition, the instructor of the lecture accesses the page of the instructor reception of the Web server from the instructor terminal 60, and the instructor corresponds to the destination table of the interactive communication server 20 and the destination table of the content delivery server 30. The terminal address of the terminal 60 is set.

체크인한 수강자에 대해서는, 운영 관리 시스템 (40)의 수강 확인 처리 (44)에 의해 후술의 수강 확인이 실시되어 정규의수강자인 것이 확인되면 출석부에 출석 시각이 기록된다.About the students who checked in, the attendance check mentioned later is performed by the course confirmation process 44 of the operation management system 40, and when it is confirmed that they are regular learners, attendance time is recorded in an attendance part.

이와 같이 해 강좌가 스타트하고, 강사는 강사 단말 (60)으로부터 강의를 행하는 것으로, 강사의 영상과 음성이 각 수강자 단말에 배신 된다. 또, 강사는 강사 단말 (60)으로부터 Web 서버 (10) 경유로 콘텐츠 배신 서버 (30)을 제어할 수가 있In this way, a lecture starts, and a lecturer gives a lecture from the lecturer terminal 60, and the video and audio of a lecturer are distributed to each student terminal. In addition, the instructor can control the content distribution server 30 from the instructor terminal 60 via the web server 10.

어 교재 데이타베이스 (32)로부터 필요한 교재를 검색해 재생하는 것으로서, 각 수강자에게 해당 교재가 배신 된다.The textbook is retrieved from the textbook database 32 and reproduced, and the textbook is distributed to each student.

도 2에 강의중의 수강자 단말 (101,102,…)의 모니터 화면에 표시되는 화면의 예를 나타낸다. 도에 있어서, A는 강사 단말 (60)으로부터 송신되는 강사의 영상을 표시하는 강사 화면이며, B는 각 수강자 단말 (101,102,…)로부터 송신되는 각2 shows an example of a screen displayed on the monitor screen of the student terminals 101, 102, ... during the lecture. In the figure, A is an instructor screen displaying an image of an instructor transmitted from the instructor terminal 60, and B is an angle transmitted from each of the learner terminals 101, 102,...

수강자의 영상을 각 수강자의 이름과 동시에 합성해 표시하는 수강자 화면이다. 수강자 화면 B에 수강자의 이름을 표시하도록 한 것은, 강사가 특정의 수강자를 지명해 발언이나 회답을 요구하는 경우를 상정한 것이다.This is the participant's screen that displays the participant's video at the same time as each participant's name. It was assumed that lecturer appointed specific learner and demanded remark and answer to have you display the name of the learner on student screen B.

C는 콘텐츠 배신 서버 (30)으로부터 배신 되는 콘텐츠 화면이며, 콘텐츠 화면 (C)에는 강사 단말 (60)으로부터의 조작으로 포인터를 표시할 수가 있어 교재를 재생하면서 내용의 설명을 행하는 경우에, 수강자에게 설명 개소를 명시할 수 있다.C is a content screen distributed from the content delivery server 30, and the content screen (C) can display a pointer by the operation from the instructor terminal 60, and the learner is explained when the content is explained while playing the teaching material. Description point can be specified.

D는 수강자가 발언하거나 강사가 실시한 설문에 대한 회답하거나 강좌를 중좌(中座)·퇴석(退席)하거나 하는 등의 경우의 입력을 접수하는 입력 화면이며, E는 강사 단말이나 운영 관리 시스템으로부터 각 수강자에 대한 메세지를 표시하는 메D is an input screen that accepts input when a student speaks, responds to a questionnaire conducted by an instructor, or moves a course in or out of a course, and E is an input screen from an instructor terminal or an operation management system. A message that displays a message about the learner

세지 화면이다. 수강 확인 처리 (44)에 의해 수강자의 수강 확인을 행할 때의 각 수강자에게로의 메세지는 이 메세지 화면(E)에 표시된다.This is the count screen. The message to each attendee at the time of confirming attendance of the attendees by the attendance confirmation processing 44 is displayed on this message screen (E).

Claims

In a remote education system for remotely training by multimedia two-way communication including video and audio, a learner image acquiring means for acquiring a video of a participant and an image of the learner acquired by an electric participant image acquiring means in advance
Face image combining means for combining with the registered learner's face image, action request means for requesting an action for the learner, and action for detecting the action of the learner by changing the video of the learner acquired by the electric learner image acquisition means; Tele-education system characterized by having detection means, and having function to confirm that regular attendee is attending
Claim 2
The method according to claim 1, wherein the electric action requesting means includes a function of requesting to move the position of the face, and the electric action detecting means includes a function of detecting that the position of the face of the participant has moved. Education system
Claim 3
The electric action requesting means according to claim 1 or 2, wherein the electric action requesting means includes a function of asking a participant a question and requesting a voice reply, and the electric action detecting means includes a function of acquiring a voice of the participant and a voice from the electrically acquired sound. Recognition of the answer and the former
A distance learning system comprising a function of determining the validity of the learner's voice response from the recognized voice response and a function of detecting the mouth movement of the learner accompanying the learner's voice response
Claim 4
4. The distance learning system according to claim 3, wherein the electric action detecting means includes a function of combining the voice answer of the learner with the voice of the pre-registered learner.
Claim 5
The electric action requesting means according to claim 3 or 4, wherein the electric action requesting means includes a function of asking a student about a time and asking for a voice reply, and the electric action detecting means has a function of determining the validity of the time when the participant has answered. Distance education system comprising
Claim 6
The electric action requesting means according to any one of claims 3 to 5, wherein the electric action requesting means includes a function of asking a question about the personal information of the learner and requesting a voice reply, and the electric action detecting means includes the personal information returned by the learner. Including the function of combining with the personal information of the pre-registered learner
Distance education system characterized by
Claim 7
The distance learning system according to any one of claims 1 to 6, wherein the electric action detecting means includes a function for determining that the position of the face image of the participant does not change discontinuously.
Claim 8
The electric action detecting means according to any one of claims 1 to 7, wherein the electric action detecting means has a function of determining that there is an image change within a designated time after requesting an action from the learner by the electric action requesting means. Education system
Claim 9
The distance learning system according to any one of claims 1 to 8, wherein the electric action requesting means has a function of requesting an action for the participant at an unpredictable timing.
Claim 10
The distance learning system according to any one of claims 1 to 8, wherein the electric action requesting means has a function of requesting an action for a student by instruction from an instructor.
Claim 11
It is a way to confirm that regular students are taking courses in distance education,
The learner's action is detected by the step of acquiring the video of the participant, the step of combining the previously acquired video with the face image of the pre-registered learner, the step of requesting the action to the learner, and the image change of the previously acquired video. Characterized by having a step to
Lecture confirmation method to assume
Claim 12
The method of claim 11, wherein the step of requesting the electric action includes a step of requesting to move the position of the face, wherein the step of detecting the electric action includes a step of detecting that the position of the face of the participant has moved. Attendance
checking way
Claim 13
The method according to claim 11 or 12, wherein the step of requesting an electric action includes a step of asking a student a question and requesting a voice reply, and the step of detecting the electric action comprises: acquiring a voice of the participant; A step of recognizing a voice answer from the recognized voice, a step of determining the validity of the learner's voice response from the previously recognized voice response, and a step of detecting the movement of the participant's mouth accompanying the learner's voice response Course confirmation method
Claim 14
The method of claim 13, wherein the detecting of the electric action comprises combining a voice answer of the learner with a voice of a pre-registered learner.
Claim 15
The step of claim 13 or claim 14, wherein the step of requesting an electrical action includes a step of asking a learner about a time and asking for a voice reply, and the step of detecting the electric action includes the validity of the time at which the learner replied. Attendance characterized by including a step of determining
checking way
Claim 16
The method according to any one of claims 13 to 15, wherein the step of requesting an electrical action includes a step of asking a question about personal information of the learner and requesting a voice reply,
The step of detecting the electric action includes the step of combining the personal information returned by the learner with the personal information of the pre-registered learner.
Claim 17
The method according to any one of claims 11 to 16, wherein the step of detecting the electric action includes a step of determining that the position of the face image of the participant does not change discontinuously.
Claim 18
The method according to any one of claims 11 to 17, wherein the step of detecting the electric action includes a step of determining that there is an image change within a designated time after requesting an action from the learner by the step of requesting the electric action. Featuring
How to confirm attendance
Claim 19
The method according to any one of claims 11 to 18, wherein the step for requesting an electrical action requires an action for the learner at an unpredictable timing.
Claim 20
19. The method of any one of claims 11 to 18, wherein the step for requesting an electrical action is directed to the learner by an instruction from the instructor.
Enrollment check method characterized in that the action is requested
Claim 21
A course confirmation program for causing a computer to execute the course confirmation method according to any one of claims 11 to 20.