KR20220048608A - Summary note system for educational content - Google Patents

Summary note system for educational content Download PDF

Info

Publication number
KR20220048608A
KR20220048608A KR1020200131688A KR20200131688A KR20220048608A KR 20220048608 A KR20220048608 A KR 20220048608A KR 1020200131688 A KR1020200131688 A KR 1020200131688A KR 20200131688 A KR20200131688 A KR 20200131688A KR 20220048608 A KR20220048608 A KR 20220048608A
Authority
KR
South Korea
Prior art keywords
video
keyword
user
time
image
Prior art date
Application number
KR1020200131688A
Other languages
Korean (ko)
Other versions
KR102480196B1 (en
Inventor
조대수
김선민
Original Assignee
동서대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 동서대학교 산학협력단 filed Critical 동서대학교 산학협력단
Priority to KR1020200131688A priority Critical patent/KR102480196B1/en
Publication of KR20220048608A publication Critical patent/KR20220048608A/en
Application granted granted Critical
Publication of KR102480196B1 publication Critical patent/KR102480196B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4888Data services, e.g. news ticker for displaying teletext characters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

The present invention relates to a summary note system for educational content, which includes: a keyword input and frame capture step for a user to generate a keyboard event, when playing the educational content; and an arrangement and annotation writing step for the user to efficiently write summary nodes by outputting keywords and captured video frames to the system screen. The present invention has a remarkable effect in enabling the user to effectively organize summary when playing specific educational video content.

Description

교육용 콘텐츠를 위한 요약 노트 시스템{Summary note system for educational content}Summary note system for educational content {Summary note system for educational content}

본발명은 교육용 콘텐츠를 위한 요약 노트 시스템에 관한 것으로, 보다 상세하게는 사용자가 특정 교육용동영상 콘텐츠 재생 시 효과적으로 요약 정리를 가능하게 해주는 교육용 콘텐츠를 위한 요약 노트 시스템에 관한 것이다.The present invention relates to a summary note system for educational content, and more particularly, to a summary note system for educational content that enables a user to effectively organize summaries when playing specific educational video content.

일반적으로 최근 검색을 포털사이트와 함께 유튜브에 검색하는 추세이다.In general, it is a trend to search for recent searches on YouTube along with portal sites.

그러나 시간에 따라 재생되는 동영상이다 보니 특정 장면을 찾기 위해서는 However, since it is a video that plays according to time, in order to find a specific scene,

반복적인 동영상의 재생시간 되돌리기와 건너뛰기를 통해 특정 장면을 찾아야 해서 검색 기능의 문제가 있다. 더욱이 동영상 콘텐츠의 크기가 클 경우 특정 장면을 찾는 것은 더욱 어렵다. 그리고 기존에 텍스트로 적힌 책, e-book 등과 같은 정보 전달 매체에서는 중요한 문장을 밑줄 긋거나, 형광펜으로 표시하거나, 중요키워드를 기재하는 행위를 할 수 있다.There is a problem with the search function, as you need to find a specific scene by rewinding and skipping the playback time of repetitive videos. Moreover, when the size of the video content is large, it is more difficult to find a specific scene. In addition, in information delivery media such as text books and e-books, it is possible to underline important sentences, mark with a highlighter, or write important keywords.

하지만 시간에 따라 재생되는 동영상은 이와 같은 행위를 하기 위해서는 동영상을 잠시 특정 시점에서 멈춘 상태에서 특정 시점에 있는 내용들을 노트나 컴퓨터를 통해 텍스트와 키워드를, 밑줄을 그어야 하는 불편함이 있다.However, in order to perform such an action in a video that is played over time, it is inconvenient to have to underline the text and keywords through a notebook or computer for the contents at a specific point in time while the video is paused at a specific point in time.

그리고 종래특허기술의 일례로서, 등록특허공보 등록번호 10-0658463호에는And as an example of the prior patent technology, in the registered patent publication No. 10-0658463

노트에 있어서, 영화, 뮤직비디오, 촬영물과 같은 동영상에서 캡쳐한 이미지를 제작하고자 하는 노트의 특성에 맞게 편집하여 동영상의 대표이미지가 디자인된 것을 제목과 함께 편집하여 노트의 앞표지에 삽입하고, 내지에서, 첫장의 일면에 구성되어지는 동영상의 내용과 특이사항을 기록한 것을 용지의 좌측부분에 형성하고 우측에 동영상의 첫 번째 이미지를 삽입하고, 그 뒤의 내지에 동영상의 구현 순으로 캡쳐하여 편집한 이미지를 앞으로부터 순차적으로 한페이지에 한컷씩 동일 위치에 삽입하여 앞표지와 통일된 이미지가 인쇄된 뒷표지를 삽입하고 완료된 동영상 노트의 일측을 상호 접착수단으로 제본한 것으로, 노트를 편집된 방향으로 휘어잡고 일정한 속도로 순차적이고 연속적으로 넘기면 구성한 이미지가 동영상으로 실현되는 것을 특징으로 하는 동영상 노트가 공개되어 있다.In the note, an image captured from a video such as a movie, music video, or film is edited according to the characteristics of the note to be produced, and the representative image of the video is edited together with the title and inserted on the front cover of the note, In , the contents and peculiarities of the video composed on one side of the first page are recorded on the left side of the paper, the first image of the video is inserted on the right side, and captured and edited in the order of implementation of the video on the inside after that The image is sequentially inserted on each page from the front at the same location, the front cover and the back cover printed with a unified image are inserted, and one side of the finished video note is bound by mutual adhesive means. A video note is released, characterized in that the image is realized as a video by grabbing it and turning it sequentially and continuously at a constant speed.

또한,등록특허공보 등록번호 10-2035225호에는 멀티 콘텐츠 노트를 생성하는 장치가 멀티 콘텐츠 노트를 제공하는 방법에 있어서, 사용자의 이미지선택 입력에 의해 선택된 복수의 이미지들을 이미지 데이터로 생성하는 단계;In addition, Patent Registration No. 10-2035225 discloses a method for providing a multi-content note by an apparatus for generating a multi-content note, the method comprising: generating a plurality of images selected by a user's image selection input as image data;

사용자의 음성을 수신하여 음성 데이터를 생성하는 단계;generating voice data by receiving a user's voice;

사용자가 상기 복수의 이미지들 상에 입력하는 터치입력을 수신하고, 상기 수신한 터치입력을 기초로 터치입력 데이터 - 상기 터치입력 데이터는 복수의 좌표값들 및 필기구 타입 정보를 포함함 - 를 생성하는 단계;receiving a touch input input by a user on the plurality of images, and generating touch input data, the touch input data including a plurality of coordinate values and writing instrument type information, based on the received touch input step;

상기 이미지 데이터, 음성 데이터, 및 터치입력 데이터가 결합된 파일을 생성하는 단계; 및 상기 파일을 출력하는 단계;generating a file in which the image data, voice data, and touch input data are combined; and outputting the file;

를 포함하며, 상기 터치입력을 수신하는 단계에서는, 속도를 달리하는 상기 사용자의 터치입력에 대하여 초당 임의 개수의 좌표값들 각각에 대응되는 입력시각정보를 더 수신하고, 상기 각각의 좌표값들이 입력된 입력시각정보는 상기 음성의 진행경과시간과 매칭됨으로써 상기 음성 데이터와 동기화(synchronization)되는 것을 특징으로 하고, 상기 복수의 좌표값들은 상기 이미지에 가상적으로 설정된 좌표계 - 상기 좌표계는 상기 이미지를 출력하는 단말기의 디스플레이부 규격에 따라 가상적으로 설정된 것임 - 에 따른 좌표값들인 것을 특징으로 하는, 멀티 콘텐츠 노트를 제공하는 방법이 공개되어 있다.Including, in the step of receiving the touch input, further receiving input time information corresponding to each of an arbitrary number of coordinate values per second with respect to the user's touch input at different speeds, and the respective coordinate values are input The input time information is synchronized with the voice data by matching with the elapsed time of the voice, and the plurality of coordinate values are a coordinate system set virtually in the image - the coordinate system outputs the image A method of providing a multi-content note is disclosed, characterized in that the coordinate values are according to - which is set virtually according to the display unit standard of the terminal.

그러나 상기 종래기술들은 여전히 시간에 따라 재생되는 동영상을 잠시 특정 시점에서 멈춘 상태에서 특정 시점에 있는 내용들을 노트나 컴퓨터를 통해 텍스트와 키워드를, 밑줄을 그어야 하는 불편함이 있으며, 교육 콘텐츠를 재생하면서, 해당 영상에 대한 요약 노트를 만드는 것이 비효율적이며 복잡하다는 단점이 있었다.However, the prior art still has the inconvenience of having to underline text and keywords through a note or computer for the contents at a specific point in time while the video being played over time is paused at a specific point in time, and the educational content is reproduced However, there was a disadvantage that it was inefficient and complicated to make a summary note for the video.

따라서 본발명은 상기와 같은 문제점을 해결하고자 안출된 것으로, 교육 콘텐츠를 재생하면서, 해당 영상에 대한 요약 노트를 쉽고 효율적으로 만들 수 있는 시스템을 제공하고자 하는 것이다.Accordingly, the present invention has been devised to solve the above problems, and an object of the present invention is to provide a system capable of easily and efficiently making a summary note for a corresponding video while playing educational content.

본발명은 교육용 콘텐츠를 위한 요약 노트 시스템에 관한 것으로, 동영상 교육 콘텐츠를 재생 시, 사용자가 키보드 이벤트를 발생시키는 키워드 입력 및 프레임 캡쳐 단계;The present invention relates to a summary note system for educational content, comprising: a keyword input and frame capture step for a user to generate a keyboard event when playing a video educational content;

키워드와 캡쳐 된 동영상 프레임을 시스템 화면에 출력하여 사용자가 효율적으로 요약 노트를 작성하는 배열 및 주석 쓰기 단계를 포함하는 것을 특징으로 한다.It is characterized in that it includes an arrangement and annotation writing step in which the user efficiently writes summary notes by outputting keywords and captured video frames to the system screen.

따라서 본발명은 사용자가 특정 교육용동영상 콘텐츠 재생 시 효과적으로 요약 정리를 가능하게 해주는 현저한 효과가 있다.Therefore, the present invention has a remarkable effect that enables the user to effectively summarize the content when reproducing a specific educational video content.

도 1은 본발명의 교육용 콘텐츠를 위한 요약 노트 시스템 구성도
도 2는 본발명의 키워드 입력 및 프레임 캡쳐 단계(keyword Input and Frame Capture Step)구성도
도 3은 본발명의 배열 및 주석 쓰기 단계(Arrangement and Annotation Step) 구성도
도 4는 본발명의 선택한 영상 입력에 따른 "키워드 입력 및 프레임 캡쳐 단계(keyword Input and Frame Capture Step)"화면
도 5는 본발명의 요약 생성 영역(Create a Summary Area)" 에 하이퍼 이미지로 출력되는 화면
도 6은 본발명의 배열 및 주석 쓰기 단계(Arrangement and Annotation Step)의 화면을
도 7은 본발명의 사용자가 "텍스트 추출(Text Extraction)버튼을 클릭하면 하이퍼 이미지의 텍스터가 추출되어 입력창에 표시되는 화면
도 8은 본발명의 요약 노트 목록 화면
도 9는 본발명의 섬네일 뷰 수행화면
도 10은 본발명의 "Detail View" 버튼은 선택한 요약 노트 게시물의 상세내용을 볼 수 있는 화면
도 11은 본발명의 검색창에 키워드를 검색하게 되면 해당 키워드가 등록되어 있는 요약 노트가 검색되는 화면
1 is a configuration diagram of a summary note system for educational content of the present invention;
2 is a block diagram of the keyword input and frame capture step of the present invention;
3 is a configuration diagram of the arrangement and annotation writing step (Arrangement and Annotation Step) of the present invention;
4 is a "keyword input and frame capture step" screen according to the selected image input of the present invention;
5 is a screen output as a hyper image in "Create a Summary Area of the present invention"
6 is a screen of the arrangement and annotation writing step (Arrangement and Annotation Step) of the present invention.
7 is a screen in which the text of the hyper image is extracted and displayed in the input window when the user of the present invention clicks the "Text Extraction button"
8 is a summary note list screen of the present invention
9 is a thumbnail view execution screen of the present invention
10 is a screen where the "Detail View" button of the present invention can view the details of the selected summary note post.
11 is a screen in which a summary note in which the keyword is registered is searched when a keyword is searched in the search window of the present invention;

본발명은 교육용 콘텐츠를 위한 요약 노트 시스템에 관한 것으로, 동영상 교육 콘텐츠를 재생 시, 사용자가 키보드 이벤트를 발생시키는 키워드 입력 및 프레임 캡쳐 단계;The present invention relates to a summary note system for educational content, comprising: a keyword input and frame capture step for a user to generate a keyboard event when playing a video educational content;

키워드와 캡쳐 된 동영상 프레임을 시스템 화면에 출력하여 사용자가 효율적으로 요약 노트를 작성하는 배열 및 주석 쓰기 단계를 포함하는 것을 특징으로 한다.It is characterized in that it includes an arrangement and annotation writing step in which the user efficiently writes summary notes by outputting keywords and captured video frames to the system screen.

또한, 상기 키워드 입력 및 프레임 캡쳐 단계는 특정 시점에 키보드로 키워드를 입력하여 키워드를 생성하거나 스페이스 키 입력을 통해 해당 시점의 동영상 프레임을 캡쳐 하는 것을 특징으로 한다.In addition, the keyword input and frame capture step is characterized in that a keyword is generated by inputting a keyword with a keyboard at a specific point in time, or a video frame of the corresponding point is captured through a space key input.

또한, 상기 요약노트에는 키워드 기반의 텍스트 정보, 동영상 내 특정 시점의 이미지 정보, 재생시간 기반의 동영상 북마크 정보가 포함되는 것을 특징으로 한다.In addition, the summary note is characterized in that it includes keyword-based text information, image information at a specific point in time in the video, and video bookmark information based on playback time.

본발명을 첨부도면에 의해 상세히 설명하면 다음과 같다.The present invention will be described in detail with reference to the accompanying drawings as follows.

일반적으로 동영상 콘텐츠에는 하기 특징들이 있다.In general, video content has the following characteristics.

(1)동영상 내 특정 시점의 이미지 정보+자막(동영상 프레임)(1) Image information at a specific point in the video + subtitles (video frame)

(2) 북마크 정보가 포함된다. (2) Bookmark information is included.

이미지 정보는 섬네일 , 북마크정보는 특정 시점의 동영상을 바로 재생할 수 있는 장점이 있다. Thumbnail information for image information and bookmark information have the advantage of being able to directly play a video at a specific point in time.

본발명의 시스템에서는 사용자가 특정 교육용동영상 콘텐츠 재생 시 효과적으로 요약 정리를 가능하게 해준다.The system of the present invention enables a user to effectively organize summary when playing specific educational video content.

시스템은 두 단계로 나뉜다. 첫번째 키워드 입력 및 프레임 캡쳐 단계에서는 동영상 교육 콘텐츠를 재생 시, 사용자가 키보드 이벤트를 발생시킬 수 있다. 특정 시점에 키보드로 키워드를 입력하여 키워드를 생성하거나 스페이스 키 입력을 통해 해당 시점의 동영상 프레임을 캡쳐 할 수 있다. 두번째 배열 및 주석 쓰기 단계에서는 앞서 얻은 키워드와 캡쳐 된 동영상 프레임을 시스템 화면에 출력하여 사용자가 효율적으로 요약 노트를 작성할 수 있다. 이러한 요약노트에는 키워드 기반의 텍스트 정보, 동영상 내 특정 시점의 이미지 정보, 재생시간 기반의 동영상 북마크 정보가 포함된다.The system is divided into two stages. In the first keyword input and frame capture step, the user may generate a keyboard event when playing video educational content. You can create a keyword by entering a keyword with the keyboard at a specific point in time, or capture a video frame at that point in time by entering the space key. In the second arrangement and annotation writing stage, the keywords obtained earlier and the captured video frame are outputted to the system screen so that the user can write summary notes efficiently. These summary notes include keyword-based text information, image information at a specific point in time in the video, and video bookmark information based on playback time.

본발명의 시스템은 도 2와 같이 입력된 동영상에서 사용자가 특정 시점에 키보드로 키워드를 입력하여 키워드를 생성하고, 스페이스 키 입력을 통해 특정 시점의 동영상 프레임을 캡쳐 하여 시스템 화면에 키워드와 캡쳐 된 프레임을 출력하는 키워드 입력 및 프레임 캡쳐 단계, 출력된 정보를 이용하여 사용자가 요약 노트를 작성하는 배열 및 주석 쓰기 단계로 구성 된다.The system of the present invention generates keywords by the user inputting keywords with the keyboard at a specific point in time in the video input as shown in FIG. 2, and captures video frames at a specific point in time through the space key input to display the keywords and the captured frames on the system screen. It consists of a keyword input and frame capture step that outputs

도 2의 왼쪽은 첫번째 단계인 키워드 입력 및 프레임 캡쳐 단계(keyword Input and Frame Capture Step)이다. 해당 단계에서는 사용자가 입력한 동영상이 재생 될 때 사용자는 두 가지 이벤트를 발생시킬 수 있다. The left side of FIG. 2 is a keyword input and frame capture step, which is the first step. In this step, when the video input by the user is played, the user can generate two events.

첫 번째 이벤트는 키보드 로 문자를 타이핑하고, 엔터키를 누르는 행위를 통해 키워드를 생성한다. 이렇게 생성된 키워드는 생성된 시점의 북마크 정보를 가지고 있는 "하이퍼텍스트"라 부르겠다. 따라서 키워드 클릭 시 해당 키워드가 가진 북마크 정보로 동영상 재생 시점이 변경되게 된다. The first event generates keywords by typing characters with the keyboard and pressing the enter key. The keyword generated in this way will be called "hypertext" that has bookmark information at the time of creation. Therefore, when a keyword is clicked, the video playback time is changed according to the bookmark information of the keyword.

두 번째 이벤트는 키보드의 스페이스 키를 누르는 행위로, 해당 동영상 재생 시점의 동영상 프레임을 캡쳐 한다. 여기서 캡쳐 된 프레임은 이미지 정보이다.The second event is the action of pressing the space key on the keyboard, which captures the video frame at the time the video is played. Here, the captured frame is image information.

이미지 정보는 캡쳐 된 시점의 북마크 정보를 가지고 있다. 따라서 이러한 이미지정보를 "하이퍼 이미지"라 부르도록 한다. 따라서 이미지를 클릭 시 해당 이미지가 가진 북마크 정보로 동영상 시점이 변경되게 된다. 사용자는 위의 두 가지 이벤트를동영상 재생이 끝날 때까지 반복한다.The image information has bookmark information at the time of capture. Therefore, such image information is called "hyper image". Therefore, when an image is clicked, the viewpoint of the video is changed according to the bookmark information of the image. The user repeats the above two events until the video playback ends.

도 2의 왼쪽과 같이 사용자는 동영상 재생시간 "0:18"일 때 키보드로 타이핑하여, 키워드 "on the exam!"이 생성했다. 또한 동영상 재생시간 "0:24"일 때 키보드의 스페이스 키를 눌러 동영상 프레임을 캡쳐 했다. 이러한 이벤트의 반복을 통해 키보드와 이미지 정보를 얻을 수 있다.As shown on the left of FIG. 2 , the user types with the keyboard when the video playback time is “0:18”, and the keyword “on the exam!” is generated. Also, when the video playback time was "0:24", the video frame was captured by pressing the space key on the keyboard. Through repetition of these events, keyboard and image information can be obtained.

도 3의 그림의 오른쪽은 두 번째인 배열 및 주석 쓰기 단계(Arrangement and Annotation Step)이다. 해당 단계에서는 앞 단계에서 생성된 키워드와 이미지 정보를 이용하여 요약 노트를 작성한다.The right side of the figure of FIG. 3 is the second arrangement and annotation writing step (Arrangement and Annotation Step). In this step, a summary note is prepared using the keywords and image information generated in the previous step.

사용자는 키워드("on the exam!"+ 00:18, "for example"+ 00:35)와 이미지 (captured image + 00:24, captured image + 00:51)를 원하는 순서로 정렬 할 수 있다. 또한 사용자는 하이퍼 키워드와 하이퍼 이미지에 주석을 달 수 있다. 사용자는 하이퍼 키워드와 하이퍼 이미지의 북마크 정보를 이용하여 대상 영상을 다시 보면서 필요한 정보를 주석으로 작성할 수 있다. 또한 이미지에 텍스트가 있는 경우 동일한 텍스트를 추출하여 가져올 수 있다. 따라서, 사용자는 텍스트 추출 기능을 이용하여 이미지의 텍스트를 빠르게 얻을 수 있다. 표시된 하이퍼 키워드 및 하이퍼 이미지를 삭제 가능하며, 이렇게 정리 된 요약본을 저장할 수 있다.Users can sort keywords ("on the exam!" + 00:18, "for example" + 00:35) and images (captured image + 00:24, captured image + 00:51) in any order. Users can also annotate hyper keywords and hyper images. The user can use the hyper keyword and bookmark information of the hyper image to write the necessary information as an annotation while viewing the target image again. Also, if there is text in the image, the same text can be extracted and imported. Accordingly, the user can quickly obtain the text of the image by using the text extraction function. The displayed hyper keywords and hyper images can be deleted, and the summarized summary can be saved.

도 3의 그림 오른쪽에는 "키워드 입력 및 프레임 캡처 단계"에서 얻은 하이퍼 키워드와 하이퍼 이미지이다. 이들은 순차적으로 정렬되지 않고, 사용자가 원하는 순서대로 배열될 수 있다. 사용자는 "Scenes monitoring concretely!"이라는 주석을 작성한다. 또한 사용자는 하이퍼 이미지에서 키워드 "on the exam! "을 텍스트를 추출하여 주석으로 포함한다. 이러한 기능을 이용하여 사용자는 하이퍼 키워드와 하이퍼 이미지를 배열하고 정리하여 요약 노트를 작성 할 수 있다.On the right side of the figure in Fig. 3, the hyper keywords and hyper images obtained in the "keyword input and frame capture step" are shown. They are not arranged sequentially, but may be arranged in an order desired by the user. The user writes a comment saying "Scenes monitoring concretely!" The user also extracts the text "on the exam!" from the hyperimage and includes it as a comment. Using these functions, users can arrange and organize hyper keywords and hyper images to create summary notes.

도 4와 같이, 사용자는 "입력 대상 비디오 영역(Input Target Video Area)"에서 대상 비디오를 입력하고, 대상 비디오를 재생하기 위한 화면을 표시한다. 그러면 시스템이 작동하기 시작한다.As shown in FIG. 4 , a user inputs a target video in an “Input Target Video Area” and displays a screen for playing the target video. Then the system will start working.

위의 화면은 선택한 영상 입력에 따른 "키워드 입력 및 프레임 캡쳐 단계(keyword Input and Frame Capture Step)"화면을 보여준다. 대상 비디오가 재생되면 사용자는 키보드를 통해 "On the Exam!"키워드를 입력하고 Enter 키를 누른다. 그러면 "on the Exam!"가 하이퍼 키워드로 위의 시스템 화면 왼쪽의 "요약 생성 영역(Create a Summary Area)"에 표시된다.The above screen shows the "keyword input and frame capture step" screen according to the selected video input. When the target video plays, the user enters the keyword "On the Exam!" via the keyboard and presses Enter. Then "on the Exam!" is displayed as a hyper keyword in the "Create a Summary Area" on the left side of the system screen above.

마찬가지로 동영상 재생 중에 스페이스 키를 누르면 그 시점의 대상 동영상의 프레임이 캡쳐 되어 도 5의 왼쪽 "요약 생성 영역(Create a Summary Area)"에 하이퍼 이미지로 출력된다. Similarly, if the space key is pressed during video playback, the frame of the target video at that point is captured and output as a hyper image to the left "Create a Summary Area" of FIG. 5 .

하이퍼 키워드와 하이퍼 이미지에는 북마크정보가 포함되어있기 때문에 대상 동영상의 특정 시점을 즉시 재생할 수 있다. 사용자는 대상 동영상이의 재생이 끝날 때까지 키워드를 입력하거나 스페이스 키를 누르는 것을 반복한다. 도 6의 화면은 배열 및 주석 쓰기 단계(Arrangement and Annotation Step)의 화면을 나타내며, 이전 단계인 키워드 입력 및 프레임 캡쳐 단계에서 출력된 하이퍼 키워드와 하이퍼 이미지를 이용하여 요약 노트를 작성하는 화면이다. Since bookmark information is included in hyper keywords and hyper images, a specific point in time of the target video can be played immediately. The user repeatedly inputs a keyword or presses the space key until the target video is played. The screen of FIG. 6 shows a screen of the Arrangement and Annotation Step, and is a screen for writing a summary note using the hyper keyword and hyper image output in the keyword input and frame capture step, which is the previous step.

화면에 하이퍼 키워드가 표시되면, 입력 창을 통해 사용자가 하이퍼 키워드와 하이퍼 이미지에 관련된 추가 정보를 입력창에 주석으로 달 수 있다. 추가적으로 하이퍼 이미지가 화면에 표시되면 "텍스트 추출(Text Extraction)"버튼이 동시에 표시된다.When the hyper keyword is displayed on the screen, the user can annotate the hyper keyword and additional information related to the hyper image in the input window through the input window. Additionally, when a hyperimage is displayed on the screen, a "Text Extraction" button is displayed at the same time.

도 6의 화면과 같이 사용자가 하이퍼 키워드 "on the Exam!"을 클릭하면 하이퍼 키워드의 북마크 정보를 통해 대상 동영상의 특정 시점이 바로 재생된다. 이는 화면의 오른쪽 창에 있는 영상에서 확인할 수 있다. 따라서 사용자는 북마크 정보를 통해 특정 시점의 대상 영상을 재 검토하면서, 입력 창에 필요한 정보를 주석으로 추가 할 수 있다. 여기서는 "on the Exam!" 키워드에 "Scenes mentioning that they are good at exam"이라는 주석을 추가했다.As shown in the screen of FIG. 6 , when the user clicks on the hyper keyword “on the Exam!”, a specific point in time of the target video is immediately played through the bookmark information of the hyper keyword. This can be seen in the video in the right pane of the screen. Accordingly, the user can add necessary information to the input window as a comment while reviewing the target image at a specific point in time through the bookmark information. Here, "on the Exam!" Added "Scenes mentioning that they are good at exam" to keywords.

도 7과 같이, 마찬가지로 하이퍼 이미지가 출력 될 경우 사용자가 추가로 하이퍼 이미지와 관련된 정보를 주석으로 입력창에 달 수 있다. 또한 입력 창과 함께 "텍스트 추출" 버튼도 생성된다. 위의 화면에서 사용자가 "텍스트 추출(Text Extraction)" 버튼을 클릭하면 하이퍼 이미지의 텍스트가 추출되어 입력 창에 표시된다.As shown in FIG. 7 , when a hyper image is similarly output, the user may additionally add information related to the hyper image to the input window as a comment. A "Extract Text" button is also created along with the input window. In the above screen, when the user clicks the "Text Extraction" button, the text of the hyper image is extracted and displayed in the input window.

따라서 "텍스트 추출(Text Extraction)" 버튼을 통해 이미지 정보 안의 문자를 입력 창으로 빠르게 얻을 수 있다. 문자 추출보다는 사용자 코멘트를 추가적으로 입력하고 싶은 경우가 있을 수 있다. 이미지도 마찬가지로 북마크 정보를 가지고 있기 때문에, 사용자는 북마크 정보를 통해 특정 시점의 대상 영상을 재 검토하면서, 입력 창에 필요한 정보를 주석으로 추가 할 수 있다.Therefore, you can quickly get the text in the image information into the input window through the "Text Extraction" button. There may be cases where you want to additionally input user comments rather than extracting text. Since the image also has bookmark information, the user can add necessary information to the input window as a comment while reviewing the target image at a specific point in time through the bookmark information.

그 외에도 표시된 각 하이퍼 키워드 및 하이퍼 이미지를 삭제할 수 있다. 또한 사용자가 원하는 순서로 배열될 수 있다. 궁극적으로 이 과정을 통해 정리 된 요약 노트는 제목을 지정하여 저장할 수 있다. In addition to that, each displayed hyper keyword and hyper image can be deleted. Also, they may be arranged in an order desired by the user. Ultimately, the summary notes organized through this process can be saved by giving them a title.

이러한 방법으로 동영상 콘텐츠 요약 노트를 작성함으로써, 동영상을 잠시 특정 시점에서 멈춘 상태에서, 특정 시점에 있는 내용들을 노트나 컴퓨터와 같은 매체에 기록하는 행위를 하지 않고, 특정 장면이 나오는 순간 캡쳐를 하거나 키워드를 입력할 수 있다. 그 후 위에서 설명한 기능들을 사용하여 요약 노트 작성한다면 보다 편리하게 작성할 수 있다.By making a video content summary note in this way, the video is paused at a specific point in time, and the content at a specific point in time is captured or keywords can be entered. After that, if you write a summary note using the functions described above, you can write more conveniently.

도 8과 같이, 저장 된 요약 노트는 위의 화면과 같이 요약 노트 목록 화면을 통해서 확인이 가능하다.As shown in FIG. 8 , the stored summary notes can be checked through the summary note list screen as shown in the screen above.

요약 노트 목록 화면에서는 각각의 요약 노트 게시물 마다 요약노트의 제목, "Thumnail View", "Detail View"버튼이 있다. In the summary note list screen, for each summary note post, there are the title of the summary note, "Thumnail View", and "Detail View" buttons.

"Thumnail View" 클릭 시, 도 9의 화면과 같이 요약 노트의 이미지 정보들만 모아 화면에 출력하는 섬네일 뷰 기능을 수행한다. "Thumnail View"는 해당 요약 노트의 제목과 함께 해당 요약 노트의 모든 이미지 정보를 화면에 출력한다. When “Thumnail View” is clicked, as shown in the screen of FIG. 9 , a thumbnail view function of collecting only image information of the summary note and outputting it on the screen is performed. "Thumnail View" displays all image information of the summary note along with the title of the summary note on the screen.

동영상 콘텐츠의 길이가 길어, 캡쳐 한 이미지와 입력한 키워드가 많을 경우 사용자는 요약 노트의 전체적인 내용을 한눈에 파악하기 힘들다. 따라서 "Thumnail View(섬네일 뷰)"를 통해 시각적으로 한눈에 전체 영상의 요약 정보를 제공한다.If the length of the video content is long and there are many captured images and input keywords, it is difficult for the user to grasp the overall contents of the summary note at a glance. Therefore, it provides summary information of the entire video at a glance visually through "Thumnail View".

도 10 또한 "Detail View"버튼은 선택한 요약 노트 게시물의 상세내용을 볼 수 있는 위의 화면으로 이동하는 버튼이다. 요약 노트 상세 화면을 통해 사용자가 제작 한 영상에 대한 정보를 파악할 수 있다. 10. Also, the "Detail View" button is a button that moves to the screen above where the details of the selected summary note post can be viewed. Summary Note Through the detailed screen, information about the video created by the user can be grasped.

위의 상세 화면에는 요약 된 내용과 "Update" 버튼이 표시된다. 사용자는 키보드의 삭제(delete) 버튼을 눌러 특정 하이퍼 이미지 또는 하이퍼 키워드를 삭제할 수 있으며, 하이퍼 키워드 및 하이퍼 이미지의 주석은 마우스 커서를 눌러 수정할 수 있으며, "Update" 버튼을 누르면 최종 변경 사항이 반영된다. In the above detailed screen, a summary and an "Update" button are displayed. The user can delete a specific hyper image or hyper keyword by pressing the delete button on the keyboard, and the annotation of the hyper keyword and hyper image can be edited by pressing the mouse cursor, and the final change is reflected by pressing the "Update" button.

생성 된 요약 노트는 언제든지 재 검토 할 수 있으며, 사용자는 학습을 위해 특정 동영상 콘텐츠를 반복 재생하지 않고도 저장된 하이퍼 키워드와 하이퍼 이미지를 통해 동영상의 특정 지점으로 직접 이동할 수 있다.The generated summary notes can be re-reviewed at any time, and users can jump directly to a specific point in the video via stored hyper keywords and hyper-images without having to repeatedly play specific video content for learning.

또한 저장된 하이퍼 키워드는 텍스트 기반으로써 동영상의 내용 검색을 가능하게 하여, 요약 노트의 내용을 간접적으로 검색할 수 있게 된다. In addition, the stored hyper keyword enables the content search of the video as text-based, so that the content of the summary note can be indirectly searched.

만약 사용자가 다시 보고 싶은 특정 동영상의 특정 장면이 있는데, 사용자가 60분짜리 동영상이 100개를 가지고 있다면, 100개의 동영상 중에 사용자가 원하는 동영상을 찾을 수 있는 시간을 대략적으로 계산을 하면 60*100*1/2 = 50시간이 걸릴 수 있다. 하지만 해당 시스템을 사용해 정리해둔 요약 노트는 키워드 기반 텍스트 정보가 존재한다. If there is a specific scene of a specific video that the user wants to watch again, and the user has 100 60-minute videos, roughly calculating the time the user can find the desired video among 100 videos is 60*100* 1/2 = It can take 50 hours. However, the summary notes compiled using the system contain keyword-based text information.

따라서 사용자가 원하는 특정 장면이 키워드로 등록 되어 있다면, 해당 키워드를 통해 기존에 학습한 동영상 내용 검색을 간접적으로 지원할 수 있다. Therefore, if a specific scene desired by the user is registered as a keyword, it is possible to indirectly support searching for contents of a video previously learned through the keyword.

도 11의 화면과 같이 검색창에 "modeling" 이라는 키워드를 검색하게 되면 해당 키워드가 등록되어 있는 요약 노트가 검색된다. 이는 기존에 등록된 특정 요약 노트에 "modeling" 이라는 키워드가 등록되어 있기 때문이다.When the keyword "modeling" is searched for in the search window as shown in the screen of FIG. 11, a summary note in which the keyword is registered is searched. This is because the keyword "modeling" is registered in a specific summary note previously registered.

따라서 해당 시스템을 통해 내용 검색을 했을 때 특정 동영상 뿐만 아니라 그 동영상의 특정 장면 까지 빠르게 찾을 수 있다.Therefore, when you search for content through the system, you can quickly find not only a specific video but also a specific scene of the video.

Claims (3)

동영상 교육 콘텐츠를 재생 시, 사용자가 키보드 이벤트를 발생시키는
키워드 입력 및 프레임 캡쳐 단계;
키워드와 캡쳐 된 동영상 프레임을 시스템 화면에 출력하여 사용자가 효율적으로 요약 노트를 작성하는 배열 및 주석 쓰기 단계를 포함하는 것을 특징으로 하는 교육용 콘텐츠를 위한 요약 노트 시스템
When playing video educational content, the user triggers a keyboard event.
Keyword input and frame capture step;
Summary note system for educational content, characterized in that it includes an arrangement and annotation writing step in which the user efficiently writes summary notes by outputting keywords and captured video frames to the system screen
제1항에 있어서, 상기 키워드 입력 및 프레임 캡쳐 단계는 특정 시점에 키보드로 키워드를 입력하여 키워드를 생성하거나 스페이스 키 입력을 통해 해당 시점의 동영상 프레임을 캡쳐 하는 것을 특징으로 하는 교육용 콘텐츠를 위한 요약 노트 시스템The summary note for educational content according to claim 1, wherein the keyword input and frame capture step generates a keyword by inputting a keyword with a keyboard at a specific point in time or captures a video frame at the corresponding point in time by inputting the space key. system 제2항에 있어서, 상기 요약노트에는 키워드 기반의 텍스트 정보, 동영상 내 특정 시점의 이미지 정보, 재생시간 기반의 동영상 북마크 정보가 포함되는 것을 특징으로 하는 교육용 콘텐츠를 위한 요약 노트 시스템The summary note system for educational content according to claim 2, wherein the summary note includes keyword-based text information, image information at a specific point in time in the video, and video bookmark information based on playback time.
KR1020200131688A 2020-10-13 2020-10-13 Summary note making method for educational content KR102480196B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200131688A KR102480196B1 (en) 2020-10-13 2020-10-13 Summary note making method for educational content

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200131688A KR102480196B1 (en) 2020-10-13 2020-10-13 Summary note making method for educational content

Publications (2)

Publication Number Publication Date
KR20220048608A true KR20220048608A (en) 2022-04-20
KR102480196B1 KR102480196B1 (en) 2022-12-21

Family

ID=81399374

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200131688A KR102480196B1 (en) 2020-10-13 2020-10-13 Summary note making method for educational content

Country Status (1)

Country Link
KR (1) KR102480196B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102525984B1 (en) * 2022-09-28 2023-04-26 주식회사 액션파워 Method for providing video conference

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090126349A (en) * 2008-06-04 2009-12-09 주식회사 비즈모델라인 System and method for processing movie marking information and program recording medium
KR20120126953A (en) * 2011-05-13 2012-11-21 한국과학기술원 A method for indexing video frames with slide titles through synchronization of video lectures with slide notes

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090126349A (en) * 2008-06-04 2009-12-09 주식회사 비즈모델라인 System and method for processing movie marking information and program recording medium
KR20120126953A (en) * 2011-05-13 2012-11-21 한국과학기술원 A method for indexing video frames with slide titles through synchronization of video lectures with slide notes

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102525984B1 (en) * 2022-09-28 2023-04-26 주식회사 액션파워 Method for providing video conference

Also Published As

Publication number Publication date
KR102480196B1 (en) 2022-12-21

Similar Documents

Publication Publication Date Title
US7730407B2 (en) Systems and methods for bookmarking live and recorded multimedia documents
JP3185505B2 (en) Meeting record creation support device
Nagao et al. Discussion mining: Annotation-based knowledge discovery from real world activities
Pavel et al. Sceneskim: Searching and browsing movies using synchronized captions, scripts and plot summaries
US10210253B2 (en) Apparatus of providing comments and statistical information for each section of video contents and the method thereof
US20080079693A1 (en) Apparatus for displaying presentation information
Shamma et al. Watch what I watch: using community activity to understand content
US20080306925A1 (en) Method and apparatus for automatic multimedia narrative enrichment
US8930308B1 (en) Methods and systems of associating metadata with media
JP3574606B2 (en) Hierarchical video management method, hierarchical management device, and recording medium recording hierarchical management program
Chen et al. EmoPlayer: A media player for video clips with affective annotations
Parikka Archives in media theory: material media archaeology and digital humanities
JP4446728B2 (en) Displaying information stored in multiple multimedia documents
US20130254158A1 (en) Literary object organization
US7848598B2 (en) Image retrieval processing to obtain static image data from video data
KR102480196B1 (en) Summary note making method for educational content
US20100281046A1 (en) Method and web server of processing a dynamic picture for searching purpose
Li et al. Capturing and indexing computer-based activities with virtual network computing
Sack et al. Automated annotations of synchronized multimedia presentations
KR100844949B1 (en) A Video Search System
KR20080084303A (en) Technology which is storing easily, quickly and accurately only wanted part from the movie and audio files
KR100459668B1 (en) Index-based authoring and editing system for video contents
Ziewer et al. Navigational indices and content interlinkage on the fly
WO2006030995A9 (en) Index-based authoring and editing system for video contents
Kim et al. Design and Implementation of a Summary Note System for Educational Video Contents

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant