KR100349190B1 - Subliminal message protection - Google Patents
Subliminal message protection Download PDFInfo
- Publication number
- KR100349190B1 KR100349190B1 KR1019997004424A KR19997004424A KR100349190B1 KR 100349190 B1 KR100349190 B1 KR 100349190B1 KR 1019997004424 A KR1019997004424 A KR 1019997004424A KR 19997004424 A KR19997004424 A KR 19997004424A KR 100349190 B1 KR100349190 B1 KR 100349190B1
- Authority
- KR
- South Korea
- Prior art keywords
- frame
- context change
- difference
- energy
- sequence
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
- H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4334—Recording operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/812—Monomedia components thereof involving advertisement data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/835—Generation of protective data, e.g. certificates
- H04N21/8358—Generation of protective data, e.g. certificates involving watermark
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/147—Scene change detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Computer Security & Cryptography (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Selective Calling Equipment (AREA)
- Image Analysis (AREA)
Abstract
본 발명은 두 프레임 간의 제1문맥 변경을 검출하는 방법과 시스템에 관한 것이다. 다른 두 프레임 간의 제2문맥 변경이 규정된 시간 간격내에 발생하면, 두 문맥 변경 내에 포함된 프레임이 서브리미널 메시지로 규정된다. 서브리미널 메시지를 검출하면 시청자에게 경보를 보낸다.The present invention relates to a method and system for detecting a first context change between two frames. If a second context change between two other frames occurs within a prescribed time interval, the frames included in the two context changes are defined as subliminal messages. Alerts the viewer when a subliminal message is detected.
Description
서브리미널 메시지는 시청자가 의식적으로는 발견할 수 없도록 전송되는 메시지이다. 서브리미널 메시지는 잠재 의식에 의해서만 지각(知覺)될 수 있는 잠복된 암시이다. 영상 통신(video cummunication)에 있어서, 서브리미널 메시지는 너무 빨리 지나가기 때문에 시청자는 메시지를 본 것을 인식할 수 없게 된다. 그럼에도 불구하고, 메시지 내용은 시청자에게 영향을 줄 수 있다. 예컨대, 시청자가 주식시장으로부터 최근에 방송된 뉴스를 조사하고 있는 동안에 전송되는 서브리미널 광고의 경우를 고려해 보자. 광고는 시청자에게 ACME 초콜렛이 맛이 좋다는 것을 알릴 수 있지만, 이는 너무 빨리 지나가기 때문에 시청자는 광고를 보았다는 것을 인식할 수 없다. 그러나, 몇몇 시청자들은 잠재 의식적으로 광고에 영향을 받아, 후에 ACME 초콜렛에 대한 설명할 수 없는 동경을 느낄 수 있다.The subliminal message is a message transmitted so that the viewer cannot consciously discover it. Subliminal messages are lurking allusions that can only be perceived by the subconscious. In video cummunication, the subliminal message passes so quickly that the viewer cannot recognize that he or she has seen the message. Nevertheless, the content of the message can affect the viewer. For example, consider the case of a subliminal advertisement sent while the viewer is investigating recently broadcasted news from the stock market. The advertisement may inform the viewer that the ACME chocolate is delicious, but it passes so quickly that the viewer does not recognize that the advertisement has been viewed. However, some viewers may be subconsciously influenced by commercials, and may later feel an unexplained admiration for ACME chocolate.
텔레비전 채널의 지상 송신은, 윤리적 및 법률적 제약을 통해서 상기 형태의 광고가 방지된다. 그러나, 지역적인 법과 규정을 따르지 않는 국제 위성 텔레비전 채널들에서는 서브리미널 메시지의 전송을 확실하게 방지할 수 없다. 인터넷과 비디오전화 등과 같은 현대 통신에서, 상기 메시지로부터 시청자를 보호하는 것은 더욱 어렵다.Terrestrial transmission of television channels is prevented in this form of advertising through ethical and legal constraints. However, international satellite television channels that do not follow local laws and regulations cannot reliably prevent the transmission of subliminal messages. In modern communications such as the Internet and video phones, it is more difficult to protect the viewer from the message.
서브리미널 메시지는 비디오 시퀀스 뿐 아니라, 정지화상(still image)이나 또는 시청자가 정지화상이라고 여기는 것 및, 오디오 시퀀스 내에 잠복할 수 있다.Subliminal messages may be hidden within the video sequence, as well as still images or what viewers consider to be still images, and audio sequences.
영상 시퀀스 중에서 두 개의 상호 연속 영상은 엄밀히 말해 거의 동일하지 않다. 다수의 상호 연속 영상을 이용하는 중개(仲介) 이동(움직임)의 기본적인 개념은, 각 영상이 선행 영상과 약간씩 상이하다는 것이다. 영상이 급속히 나타나면, 눈이 어느정도의 관성을 가지기 때문에, 이 영상이 눈에 의해 움직임으로 감지되지 각 영상에 대한 표시로 느껴지지 않는다. 많은 경우에 있어서, 영상 프레임의 작은 부분만이 실제 움직임에 관여한다; 이 점에 있어서 정지 배경서 걸어가는 사람을 비교해 볼 수 있다. 이러한 특성은 MPEG2와 같은 여러 유형의 영상시퀀스 압축에 이용된다. MPEG2는 무엇보다도 변경되는 화소를 기술하는 대략적인 정보를 송신함으로써 영상시퀀스의 공간을 절약한다. 그러나, 이는 결과적으로 영상시퀀스에 에러들을 도입하게 되어, 일정 간격으로 영상을 동기화시킬 필요가 있다. 이는 완전한 영상을 컴파일하는데 필요한 모든 정보를 포함하는, 소위 I-영상으로 이루어진다.Two mutually consecutive images in the image sequence are not strictly identical. The basic concept of mediation movement (movement) using multiple mutually continuous images is that each image is slightly different from the preceding image. If the image appears rapidly, because the eye has some inertia, the image is perceived as motion by the eye and not felt as an indication for each image. In many cases, only a small portion of the image frame is involved in the actual movement; In this regard, we can compare people walking against a stationary background. This feature is used for various types of video sequence compression such as MPEG2. MPEG2 saves the space of an image sequence by transmitting coarse information describing, among other things, the pixels to be changed. However, this in turn introduces errors into the image sequence, which necessitates synchronizing the image at regular intervals. This consists of a so-called I-picture, containing all the information needed to compile a complete picture.
영상시퀀스는 또한, 상이한 프레임들의 열(row)을 포함하여 동영상을 가능한 가장 효율적인 방식으로 전송할 수 있다. 프레임은 영상 또는 화상(picture)을 형성하기 위해, 가능한 더욱 많은 프레임과 함께 매체(medium) 상에 표현되는 영상정보를 포함한다. 예컨대, 비월(interlaced) 영상은 두 개의 프레임으로 구성된다. 프레임이란 용어는 명세서 전반에 걸쳐 동이 의미로 사용하게 된다. 프레임이라 함은 영상을 컴파일하는데 이용되는 정보를 의미한다. 프레임 그 자체는 완전한 영상이거나, 영상 중 단지 일부분일 수도 있고, 또는 영상을 계산할 수 있는 정보를 포함할 수 있다. I-프레임은 영상정보를 포함하는 완전한 프레임이다. I-프레임은 상당한 양의 정보를 포함하기 때문에, 이를 전송하는데는 많은 비용이 든다. 새로운 P-프레임은 I-프레임이나, 또는 P-프레임으로부터 형성될 수 있다. P-프레임(예측 프레임)은, 수신기측의 이동벡터와 선행프레임에 관련된 DFD(Displaced Frame Difference)를 전달함으로써 형성된다. 이동벡터는, P-프레임을 형성하기 위해 선행 프레임의 오브젝트가 어떻게 이동하는 가를 기술한다. 새로운 P-프레임이 형성될 때, 예컨대 라운딩-업(rounding-up)(잘라올림)으로 인해 에러가 발생하게 된다. DFD는 계산된 P-프레임이 원래 영상과 어떻게 상이한지를 기술한다. 계산된 프레임내 각 화소의 값과 원래 프레임내 각 화소의 값 간의 차이를 흑-백 프레임에 대해 계산할 수 있다. RGB( Red, Green, Blue)를 사용하는 컬러 프레임은 한 부분이 발광부로 구성되는 형태로 변환될 수 있다. 이러한 경우, 발광부는 DFD를 계산하는데 이용할 수 있다. P-프레임은 I-프레임보다 비용면에서 보다 효율적이다. 이는 이동벡터에 DFD를 더한 값이 상응하는 I-프레임이 포함할 수 있는 것보다 훨씬 더 적은 정보를 포함하기 때문이다. 또한 선행 및 후행 P-프레임으로부터 계산되는 B-프레임이 포함된다.The image sequence may also include a row of different frames to transmit the video in the most efficient way possible. A frame contains image information represented on a medium with as many frames as possible, to form an image or picture. For example, an interlaced image consists of two frames. The term frame is used in the same sense throughout the specification. The frame means information used to compile an image. The frame itself may be a complete image, only a portion of the image, or may include information from which the image can be calculated. An I-frame is a complete frame containing image information. Since I-frames contain a significant amount of information, it is expensive to transmit them. The new P-frame may be formed from an I-frame or a P-frame. The P-frame (prediction frame) is formed by conveying the motion vector on the receiver side and DFD (Displaced Frame Difference) related to the preceding frame. The motion vector describes how the objects of the preceding frame move to form the P-frame. When a new P-frame is formed, an error occurs, for example, due to rounding-up (cut off). DFD describes how the calculated P-frame differs from the original picture. The difference between the calculated value of each pixel in the frame and the value of each pixel in the original frame can be calculated for the black-white frame. A color frame using RGB (red, green, blue) may be converted into a form in which one part is composed of a light emitter. In this case, the light emitting portion can be used to calculate the DFD. P-frames are more cost effective than I-frames. This is because the motion vector plus DFD contains much less information than the corresponding I-frame can contain. Also included are B-frames calculated from preceding and trailing P-frames.
또한 서브리미널 메시지라는 표현은, 다수의 암호화된 메시지가 동일 기호 세트 내에서 엔코드되는 코드를 기술하는데 사용된다. 이는 본 발명과 전혀 관계가 없다.The expression subliminal message is also used to describe a code in which multiple encrypted messages are encoded within the same symbol set. This has nothing to do with the invention.
미국특허 제5,151,788호에는, 블랭크(공란) 영상을 검출함으로써 비디오신호에서의 광고를 확인하여 비디오신호로부터 광고를 삭제하는 시스템이 기재되어 있다. 이 해결책의 개념은 서브리미널 메시지에 적용될 수 없는데, 이는 일반적으로 서브리미널 메시지 앞에는 블랭크 영상이 없기 때문이다.U. S. Patent No. 5,151, 788 describes a system for detecting advertisements in a video signal by detecting blank (blank) images and deleting the advertisements from the video signal. The concept of this solution cannot be applied to a subliminal message, since there is usually no blank image before the subliminal message.
프랑스특허 제2,622,077호에는, 아날로그 비디오신호를 행마다(line-by-line) 해석함으로써 영상 간의 불연속을 검출하는 시스템이 기재되어 있다. 이 개념은 본 발명에 적용될 수 없는데, 이는 행마다 고려하면 서브리미널 메시지를 다른 신호와 구별할 수 없기 때문이다.French Patent No. 2,622,077 describes a system for detecting discontinuities between images by line-by-line analysis of an analog video signal. This concept is not applicable to the present invention because, when considered on a row basis, the subliminal message cannot be distinguished from other signals.
본 발명은 서브리미널(subliminal) 메시지로부터 시청자를 보호하는 시스템과 방법에 관한 것이다.The present invention relates to a system and method for protecting a viewer from subliminal messages.
도 1은 본 발명에 따른 한 실시예의 개괄도.1 is a schematic diagram of one embodiment according to the present invention;
도 2는 본 발명의 한 실시예를 설명하는 흐름도.2 is a flow chart illustrating one embodiment of the present invention.
도 3은 본 발명의 다른 실시예를 설명하는 흐름도.3 is a flow chart illustrating another embodiment of the present invention.
도 4는 본 발명의 한 실시예에 따라 문맥 변경의 검출을 설명하는 흐름도.4 is a flow chart illustrating detection of a context change in accordance with one embodiment of the present invention.
도 5는 본 발명의 다른 실시예에 따른, 문맥 변경의 검출을 설명하는 흐름도.5 is a flow chart illustrating detection of a context change, in accordance with another embodiment of the present invention.
도 6은 본 발명의 다른 실시예에 따른, 문맥 변경의 검출을 설명하는 흐름도.6 is a flow chart illustrating detection of a context change, in accordance with another embodiment of the present invention.
도 7은 서브리미널 메시지의 검출을 설명하는 흐름도.7 is a flowchart illustrating detection of a subliminal message.
도 8은 서브리미널 보호모듈을 나타내는 도면.8 is a diagram illustrating a subliminal protection module.
본 발명은 서브리미널 메시지를 검출하여 시청자에게 서브리미널 메시지의 존재를 경고함으로써, 상기에서 언급한 문제점을 처리하는 것이다.The present invention addresses the above-mentioned problems by detecting the subliminal message and alerting the viewer to the existence of the subliminal message.
따라서, 본 발명의 목적은 서브리미널 메시지로부터 시청자를 보호하는 것이다.Accordingly, it is an object of the present invention to protect viewers from subliminal messages.
상기에서 언급한 문제점은, 서브리미널 메시지를 검출하여 시청자에게 서브리미널 메시지의 존재를 경고하고, 또한 두 프레임 간의 문맥 변경(context change)을 검출하는 본 발명으로 해결된다.The above-mentioned problem is solved by the present invention by detecting the subliminal message, warning the viewer of the existence of the subliminal message, and also detecting the context change between two frames.
보다 상세히 설명하면, 두 프레임 간의 제1문맥 변경이 검출된다. 규정된 시간 간격 내에 다른 두 프레임 간에 제2문맥 변경이 발생하면, 두 문맥 변경 내에 포함된 프레임이 서브리미널 메시지로 규정된다. 서브리미널 메시지가 검출되었으면, 시청자에게 경보가 전달된다.In more detail, a first context change between two frames is detected. If a second context change occurs between two other frames within a prescribed time interval, the frames included in the two context changes are defined as subliminal messages. If a subliminal message is detected, an alert is sent to the viewer.
문맥 변경은 프레임의 문맥에있어 주 변경으로서, 예컨대, 장면 변경(scene change)이라 할 수 있다.A context change is a major change in the context of a frame, for example a scene change.
프레임 포인트는 다른 프레임 포인트와 함께 상기 영상을 컴파일하는 영상내 포인트의 값이라 할 수 있다.The frame point may be referred to as a value of a point in the image that compiles the image along with other frame points.
본 발명은, 후에 분석을 위해 서브리미널 메시지를 검출하여 저장할 수 있도록 하는 장점을 제공한다.The present invention provides the advantage of being able to detect and store subliminal messages for later analysis.
본 발명의 다른 장점은, 서브리미널 메시지의 존재시에 시청자를 이로부터 보호하고 또한 이것의 경보를 제공할 수 있다는 것이다.Another advantage of the present invention is that in the presence of a subliminal message it is possible to protect the viewer from it and to provide its alert.
본 발명은 첨부도면과 함께 바람직한 실시예를 참조하여 아래에서 보다 상세히 설명된다.The invention is explained in more detail below with reference to the preferred embodiments in conjunction with the accompanying drawings.
도 1은 본 발명의 한 실시예의 개괄도이다. 참조번호(101)는 텔레비젼(102)으로 영화를 시청하는 시청자를 나타낸다. 영화와 텔레비젼이라는 용어를 이 실시예를 설명하는데 사용하였다 하더라도, 이와 동등한 의미의 용어, 예컨대 MPGE-시퀀스 및 데이터 단말기와 같은 용어를 대신 사용할 수 있다. 참조번호(111)는 소스(110)에서 텔레비젼(102)으로 전송된 프레임 시퀀스를 나타낸다. 프레임들의 시퀀스(111)는 SMP-모듈(Sublimianl Message Protection; 서브리미널 메시지 보호)(112)을 통해 텔레비젼(102)에 도달한다. 선택적으로, SMP-모듈은 비디오 디코더와 통합될 수도 있다. 소스(110)는 예컨대, 케이블-TV 공급자, SP(Service Provider; 서비스 공급자) 또는 인터넷이나 인트라넷에 접속된 컴퓨터일 수 있다. 도 1은 프레임 시퀀스(111)의 일부를 도시하는 것으로서, 여기서 참조번호 103은 정규 시퀀스내 프레임을 나타낸다. 또한 참조번호 104는, 정규 시퀀스내의 하나의 프레임으로서, 예시된 경우에, 프레임(104)이 문맥 변경(105)의 발생 이전의 정규 시퀀스내에서 발생하는 최종 프레임을 구성할지라도, 정규 시퀀스내 프레임을 나타낸다. 문맥 변경은 프레임의 내용중에서 주 변경으로서, 예컨대 장면변경이라 할 수 있다. 문맥 변경(105)은 함께 서브리미널 메시지(106)를 구성하는 일련의 프레임에 선행한다. 서브리미널 메시지(106)는 단지 한 프레임 또는 여러 개의 상호 연속 프레임으로 구성될 수 있다. 참조번호 107는 서브리미널 메시지를 종결하고 또한 정규 프레임 시퀀스가 다시 나타나는 문맥 변경을 나타낸다. 참조번호 108은 정규 프레임시퀀스에서 제1프레임을 나타내는 반면, 참조번호 109는 다음에 이어지는 프레임을 나타낸다. SMP-모듈(112)은 문맥 변경(105 및 107)을 검출한다. 문맥 변경(105 및 107)이 규정된 시간 간격 내에서 발생하자마자, 경보가 발생하고 또한 서브리미널 메시지(106)가 저장되어 시청자(101)에 의해 재생될 수 있다.1 is a schematic diagram of one embodiment of the present invention. Reference numeral 101 denotes a viewer watching a movie on the television 102. Although the terms film and television have been used to describe this embodiment, terms of equivalent meaning, such as MPGE-sequence and data terminals, may be used instead. Reference numeral 111 denotes a frame sequence transmitted from the source 110 to the television 102. The sequence 111 of frames arrives at the television 102 via an SMP-Subliminal Message Protection 112. Optionally, the SMP-module may be integrated with a video decoder. Source 110 may be, for example, a cable-TV provider, a service provider (SP), or a computer connected to the Internet or an intranet. 1 shows a portion of frame sequence 111, where reference numeral 103 denotes a frame within a normal sequence. Also, reference numeral 104 is a frame in a regular sequence that, in the case illustrated, even if frame 104 constitutes the last frame that occurs in the normal sequence prior to the occurrence of context change 105. Indicates. The context change is a major change in the content of the frame, for example, a scene change. The context change 105 precedes the series of frames that together make up the subliminal message 106. Subliminal message 106 may consist of only one frame or several mutually consecutive frames. Reference numeral 107 denotes a context change that terminates the subliminal message and also reappears a regular frame sequence. Reference numeral 108 denotes the first frame in the normal frame sequence, while reference numeral 109 denotes the frame following. SMP-module 112 detects context changes 105 and 107. As soon as the context changes 105 and 107 occur within a defined time interval, an alert is generated and the subliminal message 106 can also be stored and played back by the viewer 101.
도 2는 본 발명의 한 실시예를 설명하는 흐름도이다. 참조번호 205는 프레임 시퀀스를 나타낸다. 참조번호 CC1은 정규 프레임 시퀀스(N)와 서브리미널 메시지(S)를 구성하는 프레임 간의 문맥 변경을 나타낸다. 참조번호 CC2는 서브리미널 메시지(S)와 정규 프레임 시퀀스(N) 간의 문맥 변경을 나타낸다. 박스(201)에 따라, SMP-모듈(도시되지 않음)에 도달하는 각 프레임을 최종적으로 도달하는 프레임과 비교하여, 문맥 변경을 검출한다. 두 개의 최종 문맥 변경이 발생한 시간을 저장한다. 발생한 두 개의 최종 문맥 변경 간의 시간차를 박스(202)에 따라 계산한다. 시간차가 임계값(Ts) 보다 작으면, 박스(204)에 따라 사용자 경보(203)가 트리거되어 영상이 정지된다. 그러면, 시청자는 그가 서브리미널 메시지를 받았는지 여부를 확인할 수 있게 되고, 만일 그렇다면, 메시지의 속성을 확인할 수 있게 된다.2 is a flow chart illustrating one embodiment of the present invention. Reference numeral 205 denotes a frame sequence. Reference numeral CC1 denotes a context change between the frame forming the normal frame sequence N and the subliminal message S. Reference numeral CC2 denotes a context change between the subliminal message S and the normal frame sequence N. According to box 201, a context change is detected by comparing each frame reaching the SMP module (not shown) with the frame finally arriving. Store the time when the two last context changes occurred. The time difference between the two last context changes that occurred is calculated according to box 202. If the time difference is less than the threshold value Ts, the user alert 203 is triggered according to the box 204 to freeze the image. The viewer can then check whether he has received the subliminal message, and if so, check the nature of the message.
도 3은 본 발명의 다른 실시예를 설명하는 흐름도이다. 참조번호 301은 SMP-모듈(도시되지 않음)에 도달하는 프레임 시퀀스를 나타낸다. 참조번호 CC1은 프레임 시퀀스에서 문맥 변경을 나타낸다. 참조번호 N1은 정규 프레임 시퀀스에서 최종 프레임을 나타내는 반면, 참조번호 S1은 서브리미널 메시지에서 제1프레임을 나타낸다. 참조번호 S2는 서브리미널 메시지에서 최종 프레임을 나타내고 그리고 참조번호 CC2는 S2와 N2간의 문맥 변경을 나타내는데, 여기서 N2는 문맥 변경(CC2) 이후 정규 시퀀스에서 제1프레임을 나타낸다. SMP-모듈(도시되지 않음)은 문맥 변경을 검출하는 기능을 하고, 그리고 이러한 변경이 발생하는 시간은 박스(302)에 따라 프레임(N1, N2, S1 및 S2)과 함께 저장된다. 만일 최종 두 문맥 변경(CC1 및 CC2) 간의 시간차가 주어진 임계값(Ts) 보다 작다면(박스 303), 박스(304)에 따라 예비 경보가 트리거되어, 예컨대 서브리미널 메시지 소스와, 메시지 도달시간 등과 같은 관련 데이터가 로그된다. 그런 다음, 프레임(N1 및 N2) 간에 문맥 변경이 존재하는지 여부를 테스트한다. 만일 상기 프레임 간에 문맥 변경이 존재하지 않는다면, 경보가 트리거되어(박스 306) 프레임 시퀀스가 정지된다(박스 307). 이제부터 시청자는 정지 프레임과 이어서 발생한 로깅(logging) 동작을 통해, 발생한 문맥 변경을 의식적으로 평가할 수 있게 된다.3 is a flowchart illustrating another embodiment of the present invention. Reference numeral 301 denotes a frame sequence reaching an SMP module (not shown). Reference numeral CC1 denotes a context change in the frame sequence. Reference numeral N1 denotes the last frame in the normal frame sequence, while reference numeral S1 denotes the first frame in the subliminal message. Reference numeral S2 denotes the last frame in the subliminal message and reference numeral CC2 denotes the context change between S2 and N2, where N2 denotes the first frame in the regular sequence after the context change (CC2). The SMP-module (not shown) functions to detect a context change, and the time at which this change occurs is stored with the frames N1, N2, S1 and S2 according to the box 302. If the time difference between the last two context changes CC1 and CC2 is less than the given threshold Ts (box 303), then a preliminary alert is triggered according to box 304, e.g. the subliminal message source and the message arrival time. Related data such as is logged. Then test whether there is a context change between frames N1 and N2. If there is no context change between the frames, an alert is triggered (box 306) and the frame sequence is stopped (box 307). From now on, viewers can consciously evaluate the context changes that have occurred through freeze frames and subsequent logging operations.
장면 변경의 경우에서와 같이, 전체 프레임이 완전히 변경된 경우는 프레임 시퀀스의 I-프레임으로 전달될 수 있다. 서브리미널 메시지의 전송이 시작되면, 프레임의 대부분이 두 개의 상호 연속 프레임 간에 변경되도록 하는 장면 변경이 발생하게 된다. 따라서, 수신기가 I-프레임을 수신하면 문맥 변경이 발생할 수 있다. 짧은 시간간격 내에 두 개의 I-프레임을 연속하여 수신하면, 서브리미널 메시지의 전송이라고 생각할 수 있다.As in the case of a scene change, the case where the entire frame has been completely changed can be delivered in the I-frame of the frame sequence. When transmission of the subliminal message is started, a scene change occurs that causes most of the frames to change between two mutually consecutive frames. Thus, a context change may occur when the receiver receives an I-frame. If two I-frames are received in succession within a short time interval, it can be considered that the subliminal message is transmitted.
도 4는 MPEG-시퀀스의 I-프레임의 도움으로 변경을 검출하는 것을 설명하는 흐름도이다. 참조번호 401은 SMP-모듈(도시되지 않음)에 도달하는 프레임 시퀀스를 나타낸다. SMP-유닛은 프레임을 수신하고(박스 402), 수신한 프레임이 I-프레임인지 여부를 확인한다(박스 403). I-프레임의 수신은 문맥 변경을 나타낸다(박스 404).4 is a flow chart illustrating detecting a change with the aid of an I-frame in an MPEG-sequence. Reference numeral 401 denotes a frame sequence reaching an SMP module (not shown). The SMP-Unit receives the frame (box 402) and checks whether the received frame is an I-frame (box 403). Receipt of an I-frame indicates a context change (box 404).
도 5는 두 프레임 간의 변경값을 수치적으로 계산함으로써, 문맥 변경을 검출하는 것을 설명하는 흐름도이다. 참조번호 501은 SMP-유닛(도시되지 않음)에 도달하는 프레임 시퀀스를 나타낸다. SMP-유닛(도시되지 않음)은 프레임(Ni)을 수신한다(박스 502). 프레임(Ni)은 메모리(L2)에 저장된다. 이에 앞서, L2의 값은 메모리(L1)에 저장된다(박스 503). 그런 다음, 프레임(L1, 및 L2)내 대응하는 프레임 포인트 간의 차이의 에너지 측정값을 합하여 프레임 간의 차이값(E)을 계산한다(박스 504). 예컨대 이 에너지 측정값은 다음의 식으로 주어지는 x2일 수 있다.5 is a flow chart illustrating detecting a context change by numerically calculating a change value between two frames. Reference numeral 501 denotes a frame sequence reaching an SMP-unit (not shown). SMP- unit (not shown) receives a frame (N i) (box 502). The frame Ni is stored in the memory L 2 . Prior to this, the value of L 2 is stored in memory L 1 (box 503). Then, the difference value E between frames is calculated by adding up the energy measurements of the differences between the corresponding frame points in frames L 1 and L 2 (box 504). For example, this energy measurement can be x 2 given by the equation
여기서 Is는 프레임(L2)내 프레임 포인트(s)의 값이고, 그리고 I's는 프레임(L1)내 프레임 포인트(s)의 값이다. 박스(505 및 506) 각각에 따라, E가 임계값(Te) 보다 크면 문맥 변경이 나타난다.Where I s is the value of frame point s in frame L 2 , and I ' s is the value of frame point s in frame L 1 . According to each of boxes 505 and 506, a context change appears if E is greater than the threshold T e .
도 6에 설명되어 있듯이, 두 P-프레임 간의 문맥 변경은, 상기에서 설명한 것과 비슷한 방식으로 DFD에서 에너지를 측정하여 검출할 수 있다. 도 6에 있어서, 참조번호 601은 프레임 시퀀스를 나타낸다. 수신한 각 DFD(박스 602)에 대해 에너지를 계산한다(박스 603). 만일 DFD가 포함한 에너지의 양이 임계값 보다 크면(박스 604), 이는 문맥 변경이 발생했음을 나타낸다(박스 605).As illustrated in FIG. 6, the context change between two P-frames can be detected by measuring energy in the DFD in a manner similar to that described above. In Fig. 6, reference numeral 601 denotes a frame sequence. An energy is calculated for each received DFD (box 602) (box 603). If the amount of energy contained by the DFD is greater than the threshold (box 604), this indicates that a context change has occurred (box 605).
SMP는 도 7에 도시된 바와 같이, 알려진 서브리미널 메시지에 관한 데이터를 가진 라이브러리 함수를 포함할 수 있다. 참조번호 701은 프레임 시퀀스를 나타낸다. 수신한 각 프레임(박스 707)은 라이브러리에 저장된 프레임과 비교되어(박스 704), 충분한 유사성이 있으면(박스 704) 사용자 경보가 트리거된다(박스 705). 이러한 비교는 각 프레임을 필터링함으로써 수행되어, 다수의 특징적인 특성(characteristic feature)을 표현할 수 있다. 그런 다음, 상기 특징적인 특성을 라이브러리 함수에 저장된 특징과 비교한다. 이러한 절차의 한 가지 장점은, 컴퓨터 전력과 메모리 공간이 절약된다는 것이다.The SMP may include a library function with data about known subliminal messages, as shown in FIG. Reference numeral 701 denotes a frame sequence. Each received frame (box 707) is compared to a frame stored in the library (box 704), and if there is sufficient similarity (box 704), a user alert is triggered (box 705). This comparison may be performed by filtering each frame to represent a number of characteristic features. The characteristic characteristic is then compared with the characteristic stored in the library function. One advantage of this procedure is that computer power and memory space are saved.
도 8은 모니터(801)에 연결된 SMP-모듈(802)을 보다 상세히 설명하는 도면이다. 프레임 시퀀스는 SMP-유닛(803)에 도달한다. 프레임은 문맥 변경을 검출하는 기능을 하는 시스템(807)을 통과한다. 시스템(807)은, 프레임의 에너지 내용을 측정하는 부분(804)과, 에너지 값을 임계값과 비교하는 부분(808)과, 그리고 경보를 개시하는 부분을 포함한다. SMP는 또한 프레임의 스트림 또는 시퀀스를 저장하는 수단(806)을 포함한다.8 illustrates in more detail the SMP-module 802 connected to the monitor 801. The frame sequence arrives at the SMP-unit 803. The frame passes through a system 807 that functions to detect context changes. System 807 includes a portion 804 for measuring the energy content of the frame, a portion 808 for comparing the energy value with a threshold, and a portion for initiating an alert. The SMP also includes means 806 for storing a stream or sequence of frames.
본 발명은 앞서 설명하고 기술한 예시적인 실시예에 제한되는 것이 아니라, 다음에 오는 특허청구범위의 범위내에서 변형이 가능하다는 것을 알아야 한다.It is to be understood that the invention is not limited to the exemplary embodiments described and described above, but that modifications are possible within the scope of the following claims.
Claims (21)
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
SE9604241-1 | 1996-11-19 | ||
SE9604241A SE510444C2 (en) | 1996-11-19 | 1996-11-19 | Protection for subliminal messages |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20000057150A KR20000057150A (en) | 2000-09-15 |
KR100349190B1 true KR100349190B1 (en) | 2002-08-21 |
Family
ID=20404671
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1019997004424A KR100349190B1 (en) | 1996-11-19 | 1997-11-13 | Subliminal message protection |
Country Status (5)
Country | Link |
---|---|
JP (1) | JP2001504656A (en) |
KR (1) | KR100349190B1 (en) |
AU (1) | AU5076398A (en) |
SE (1) | SE510444C2 (en) |
WO (1) | WO1998023087A1 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3622527B2 (en) | 1998-08-24 | 2005-02-23 | 株式会社日立製作所 | Video feature scene detection method and apparatus |
US6654067B1 (en) * | 1999-12-30 | 2003-11-25 | Koninklijke Philips Electronics N.V. | Finding hidden images in video based on detected proximity of cuts |
JP4082664B2 (en) | 2002-09-20 | 2008-04-30 | Kddi株式会社 | Video search device |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5099322A (en) * | 1990-02-27 | 1992-03-24 | Texas Instruments Incorporated | Scene change detection system and method |
DE4106246C1 (en) * | 1991-02-28 | 1992-03-26 | Grundig E.M.V. Elektro-Mechanische Versuchsanstalt Max Grundig Hollaend. Stiftung & Co Kg, 8510 Fuerth, De | TV broadcast suppression appts. esp. for avoiding advertisements - stores images which start and end of broadcast and compares current image with memory to control suppression or channel change |
ES2102249T3 (en) * | 1993-08-31 | 1997-07-16 | Interessengemeinschaft Fur Run | PROCEDURE AND EQUIPMENT FOR THE DETECTION OF NON-DESIRABLE VIDEO SEQUENCES. |
-
1996
- 1996-11-19 SE SE9604241A patent/SE510444C2/en not_active IP Right Cessation
-
1997
- 1997-11-13 AU AU50763/98A patent/AU5076398A/en not_active Abandoned
- 1997-11-13 KR KR1019997004424A patent/KR100349190B1/en not_active IP Right Cessation
- 1997-11-13 WO PCT/SE1997/001909 patent/WO1998023087A1/en active IP Right Grant
- 1997-11-13 JP JP52356098A patent/JP2001504656A/en active Pending
Also Published As
Publication number | Publication date |
---|---|
WO1998023087A1 (en) | 1998-05-28 |
AU5076398A (en) | 1998-06-10 |
SE9604241L (en) | 1998-05-20 |
KR20000057150A (en) | 2000-09-15 |
JP2001504656A (en) | 2001-04-03 |
SE9604241D0 (en) | 1996-11-19 |
SE510444C2 (en) | 1999-05-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100869038B1 (en) | A content editor, a video content detector, a method for detecting commercials and content | |
US11070833B2 (en) | Method and system for encoding video with overlay | |
KR101075860B1 (en) | Method for error concealment in video sequences | |
US20060242667A1 (en) | Ad monitoring and indication | |
US10659721B2 (en) | Method of processing a sequence of coded video frames | |
KR20040069345A (en) | Commercial detection in audio-visual content based on scene change distances on separator boundaries | |
WO2001089223A3 (en) | Video coding | |
CA2183257A1 (en) | Subtitling transmission system | |
US20070242163A1 (en) | Video abnormality detection | |
US20110271307A1 (en) | Video data stream evaluation systems and methods | |
KR100349190B1 (en) | Subliminal message protection | |
US7853968B2 (en) | Commercial detection suppressor with inactive video modification | |
US6122322A (en) | Subliminal message protection | |
US6384872B1 (en) | Method and apparatus for interlaced image enhancement | |
US20090013360A1 (en) | Monitoring apparatus | |
US20030133012A1 (en) | Observation system | |
US7280698B2 (en) | Method and apparatus for displaying noticeable image and system for remotely monitoring image | |
CN1219324A (en) | Method and apparatus for compression compatible video finger printing | |
CA2551265A1 (en) | System and method for controlling transmission of video and audio signals to at least one display device | |
WO2000048401A1 (en) | Apparatus and method for videosignal watermarking | |
US20080276290A1 (en) | Monitoring Apparatus | |
KR20050012530A (en) | Method of managing caption data in a picture domain | |
US20080211920A1 (en) | Monitoring apparatus | |
EP3531584A1 (en) | Method for transmitting data in a video and electronic device | |
KR20010075334A (en) | TV signal receiver |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20070801 Year of fee payment: 6 |
|
LAPS | Lapse due to unpaid annual fee |