KR20160027576A - 얼굴인식형 인터랙티브 디지털 사이니지장치 - Google Patents

얼굴인식형 인터랙티브 디지털 사이니지장치 Download PDF

Info

Publication number
KR20160027576A
KR20160027576A KR1020140115479A KR20140115479A KR20160027576A KR 20160027576 A KR20160027576 A KR 20160027576A KR 1020140115479 A KR1020140115479 A KR 1020140115479A KR 20140115479 A KR20140115479 A KR 20140115479A KR 20160027576 A KR20160027576 A KR 20160027576A
Authority
KR
South Korea
Prior art keywords
user
unit
display
signage
content
Prior art date
Application number
KR1020140115479A
Other languages
English (en)
Other versions
KR101602828B1 (ko
Inventor
유형근
강전국
이덕수
Original Assignee
유형근
이덕수
강전국
주식회사 디지탈하우스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 유형근, 이덕수, 강전국, 주식회사 디지탈하우스 filed Critical 유형근
Priority to KR1020140115479A priority Critical patent/KR101602828B1/ko
Publication of KR20160027576A publication Critical patent/KR20160027576A/ko
Application granted granted Critical
Publication of KR101602828B1 publication Critical patent/KR101602828B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0269—Targeted advertisements based on user profile or attribute
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/178—Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F19/00—Advertising or display means not otherwise provided for
    • G09F19/22—Advertising or display means on roads, walls or similar surfaces, e.g. illuminated
    • G09F19/228—Ground signs, i.e. display signs fixed on the ground
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/16—Speech classification or search using artificial neural networks

Landscapes

  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Engineering & Computer Science (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Marketing (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명에서는 종래의 디지털 사이니지 장치가 단순히 선택된 콘텐츠를 재생하거나, 미리 정해진 스케줄에 따라서 콘텐츠 제공 서버로부터 수신되는 콘텐츠를 출력하는 등 수동적 역할만 하는 문제점과, 항상 켜져있는 상태에서 특정 컨텐츠만을 반복해서 표출시키므로, 전력소비가 많이 발생되고, 디지털 사이니지 장치를 사용하는 사용자의 기호품, 구매도, 취미에 관한 기본정보가 전혀 없어, 디지털 사이니지 장치를 통한 인터랙티브방식의 구매유도를 제시하지 못해 점차 디지털 사이니지 장치의 수요가 줄어드는 문제점을 개선하고자, 사이니지본체, 영상카메라, 음성입력부, 인체감지센서부, 초음파센서부, 인터랙티브 사이니지제어부, 사이니지디스플레이부로 구성됨으로서, 사용자의 기호품, 구매도, 취미에 관한 기본정보를 유추하고, 유추한 사용자 기본정보에 따라 컨텐츠목록을 재구성하여 사이니지디스플레이부에 1:1 맞춤형컨텐츠를 표출시키도록 제어할 수 있고, 음성입력부로부터 입력된 음성데이터를 기준명령호출음성데이터와 비교분석한 후, 분석한 기준명령호출음성데이터와 매칭된 1:1 호출형컨텐츠를 불러와서 사이니지디스플레이부에 표출시키도록 제어할 수 있어, 고객의 연령별, 성별에 맞는 맞춤형 광고를 제공하여 광고 효율을 극대화시킬 수 있고, 인식 정보를 기반으로 고객의 구매확률이 최상인 제품의 광고를 실시간으로 제공할 수 있어, 제품구매율을 기존에 비해 70% 향상시킬 수 있으며, 사이니지본체 주변에 인체가 감지되지 않으면 광고를 보는 사람이 없는 것으로 판단을 하고, 자동으로 사이니지본체를 휴면(sleep) 모드로 전환시켜서 불필요한 전원의 소모를 차단하여 전력효율을 극대화할 수 있으며, 무엇보다 사용자의 기쁨, 슬픔, 화냄, 혐오, 두려움, 놀람에 대한 감성에 따라 그래픽, 텍스트메세지, 사운드 중 어느 하나 또는 둘 이상을 선택해서 믹싱시킨 감성컨텐츠를 사이니지디스플레이부상에 표출시킬 수 있어, 디지털사이니지장치의 접근을 기계적인 접근이 아닌 감성적인 접근으로 유도시킬 수 있는 얼굴인식형 인터랙티브 디지털 사이니지장치를 제공하는데 그 목적이 있다.

Description

얼굴인식형 인터랙티브 디지털 사이니지장치{THE INTERACTIVE DIGITAL SIGNAGE}
본 발명에서는 사용자의 기호품, 구매도, 취미에 관한 기본정보를 유추하고, 유추한 사용자 기본정보에 따라 컨텐츠목록을 재구성하여 사이니지디스플레이부에 1:1 맞춤형컨텐츠를 표출시킬 수 있고, 음성입력부로부터 입력된 음성데이터를 기준명령호출음성데이터와 비교분석한 후, 분석한 기준명령호출음성데이터와 매칭된 1:1 호출형컨텐츠를 불러와서 사이니지디스플레이부에 표출시킬 수 있는 얼굴인식형 인터랙티브 디지털 사이니지장치에 관한 것이다.
네트워크를 사용활용한 디지털 사이니지의 사전적 정의는 공공장소와 상업공간에서 다양한 정보와 광고 등의 메시지를 인터랙티브한 방식으로 제공하는 장치로서, 기존 디지털 정보 디스플레이에 다양한 IT기술이 접목된 정보 매체를 일컫는다.
디지털사이니지는 기존 옥외광고를 넘어서 네트워크를 통한 원격제어가 가능한 디지털 디스플레이를 공공장소나 상업공간에 설치하여 정보, 엔터테인먼트 프로모션, 광고를 하고 있다.
특히 디지털 사이니지는 구매 접점에서 노출된다는 점이나 크기 소재등의 제한이 없다는 점에서 옥외광고의 장점을 극대화시킬 수 있으며, 또한 디지털 디스플레이를 활용하여 다양한 콘텐츠와 광고를 표출할 수 있다는 점에서 다양하게 활용할 수가 있다.
과거에는 한정된 공간에서만 접할 수 있었지만, 최근에는 그 공간이 점점 커지게 되면서 디지털 사이니지가 더 주목을 받고 있다.
또한, 과거 커버리지 형태의 기능을 수행하는 것으로, 인식되었던 옥외 광고가 인터랙티브 기능을 만남으로서 과거 버스 쉘터, 매장 디스플레이 등 광고가 상
품 구매로 직접적으로 연결되는 고리로 활용할 수 있는 많은 변화를 맞이하고 있다.
좀도 구체적으로, 디지털 사이니지는 옥외의 일정한 장소 혹은 스트리트 퍼니처(street furniture) 등의 장치에 LCD(Liquid Crystal Display), PDP(Plasma Display Panel), OLED(Organic Light Emitting Diode) 등의 디스플레이 장치를 설치하여 다양한 콘텐츠와 상업 광고 등을 표출하는 매체로서 현재 아파트 엘리베이터, 지하철 역내, 지하철 내, 버스 내, 대학교, 은행, 편의점, 할인점, 쇼핑몰 등 대중이 움직이는 모든 동선 상에 설치되어 있다.
이러한 디지털 사이니지의 초기 형태는 단순한 대형 전광판, 지하철이나 버스 내의 LCD 동영상, 역사 내 PDP 광고 및 DID(Digital Information Display) 등이 주를 이루었다.
최근의 디지털 사이니지는 단순한 정보의 제공 및 광고의 노출 기능을 넘어서, 터치패드 기술과 초고속 인터펫 기술 등에 힘입어 일반 대중들의 참여를 유도할 수 있는 양방향 커뮤니케이션(interactive communication)을 가능케 하는 방향으로 진화하였다.
그러나, 종래의 디지털 사이니지 장치는 단순히 선택된 콘텐츠를 재생하거나, 미리 정해진 스케줄에 따라서 콘텐츠 제공 서버로부터 수신되는 콘텐츠를 출력하는 등 수동적 역할만 하는 문제점이 있었다.
또한, 항상 켜져있는 상태에서 특정 컨텐츠만을 반복해서 표출시키므로, 전력소비가 많이 발생되고, 디지털 사이니지 장치를 사용하는 사용자의 기호품, 구매도, 취미에 관한 기본정보가 전혀 없어, 디지털 사이니지 장치를 통한 인터랙티브방식의 구매유도를 제시하지 못해 점차 디지털 사이니지 장치의 수요가 줄어드는 문제점이 있었다.
국내등록특허공보 제10-1271483호
상기의 문제점을 해결하기 위해 본 발명에서는 사용자의 기호품, 구매도, 취미에 관한 기본정보를 유추하고, 유추한 사용자 기본정보에 따라 컨텐츠목록을 재구성하여 사이니지디스플레이부에 1:1 맞춤형컨텐츠를 표출시킬 수 있고, 음성입력부로부터 입력된 음성데이터를 기준명령호출음성데이터와 비교분석한 후, 분석한 기준명령호출음성데이터와 매칭된 1:1 호출형컨텐츠를 불러와서 사이니지디스플레이부에 표출시킬 수 있으며, 사이니지본체 주변에 인체가 감지되지 않으면 광고를 보는 사람이 없는 것으로 판단을 하고, 자동으로 사이니지본체를 휴면(sleep) 모드로 전환시켜서 불필요한 전원의 소모를 차단시킬 수 있고, 무엇보다 사용자의 기쁨, 슬픔, 화냄, 혐오, 두려움, 놀람에 대한 감성에 따라 그래픽, 텍스트메세지, 사운드 중 어느 하나 또는 둘 이상을 선택해서 믹싱시킨 감성컨텐츠를 사이니지디스플레이부상에 표출시킬 수 있는 얼굴인식형 인터랙티브 디지털 사이니지장치를 제공하는데 그 목적이 있다.
상기의 목적을 달성하기 위해 본 발명에 따른 얼굴인식형 인터랙티브 디지털 사이니지장치는
사각판넬형상으로 이루어져 각 기기를 외압으로부터 보호하고 지지하는 사이니지본체(100)와,
사이니지본체의 상단 중앙 일측과 하단 중앙 일측에 위치되어, 사용자의 얼굴을 촬영하는 영상카메라(200)와,
사이니지본체의 양측면 일측과 하단 일측에 위치되어, 사용자의 음성을 입력받아 저장하는 음성입력부(300)와,
사이니지본체의 상단 일측 및 하단 일측에 위치되어 사용자의 접근을 감지하는 인체감지센서부(400)와,
사이니지본체의 상단 좌우 일측과 하단 좌우 일측에 위치되어 사용자의 접근거리를 초음파 파장을 통해 최대거리에서 최소거리로 순차적으로 감지하는 초음파센서부(500)와,
상기 인체감지센서부를 통해 사용자의 접근감지신호가 입력되고, 초음파센서부를 통해 사용자의 접근거리감지신호가 입력되어, 기준설정치 범위내에 들어오면, 영상카메라를 구동시켜 사용자의 얼굴을 촬영시키도록 제어시키고, 영상카메라를 통해 촬영한 사용자의 얼굴데이터를 입력받아, 미리설정된 기준얼굴데이터와 비교 분석한 후, 사용자의 성별, 연령별을 추정하여 사용자의 기호품, 구매도, 취미에 관한 기본정보를 유추하고, 유추한 사용자 기본정보에 따라 컨텐츠목록을 재구성하여 사이니지디스플레이부에 1:1 맞춤형컨텐츠를 표출시키도록 제어하고, 음성입력부로부터 입력된 음성데이터를 기준명령호출음성데이터와 비교분석한 후, 분석한 기준명령호출음성데이터와 매칭된 1:1 호출형컨텐츠를 불러와서 사이니지디스플레이부에 표출시키도록 제어하는 인터랙티브 사이니지제어부(600)와,
인터랙티브 사이니지제어부의 제어신호에 따라 사용자의 성별,연령별에 맞는 1:1 맞춤형컨텐츠를 표출시키거나, 또는 사용자의 음성데이터에 맞는 1:1 호출형컨텐츠를 표출시키는 사이니지디스플레이부(700)로 구성됨으로서 달성된다.
이상에서 설명한 바와 같이, 본 발명에서는 사용자의 기호품, 구매도, 취미에 관한 기본정보에 따른 1:1 맞춤형컨텐츠를 표출시키고, 음성입력부로부터 입력된 음성데이터에 따른 1:1 호출형컨텐츠를 불러와서 사이니지디스플레이부에 표출시킬 수 있어, 고객의 연령별, 성별에 맞는 맞춤형 광고를 제공하여 광고 효율을 극대화시킬 수 있고, 인식 정보를 기반으로 고객의 구매확률이 최상인 제품의 광고를 실시간으로 제공할 수 있어, 제품구매율을 기존에 비해 70% 향상시킬 수 있으며, 인체감지여부에 따라 자동으로 사이니지본체를 휴면(sleep) 모드로 전환시켜서 불필요한 전원의 소모를 차단하여 전력효율을 극대화할 수 있으며, 무엇보다 사용자의 감성에 따라 맞춤형 감성컨텐츠를 사이니지디스플레이부상에 표출시킬 수 있어, 디지털사이니지장치의 접근을 기계적인 접근이 아닌 감성적인 접근으로 유도시킬 수 있는 좋은 효과가 있다.
도 1은 본 발명에 따른 얼굴인식형 인터랙티브 디지털 사이니지장치(1)의 구성요소를 도시한 사시도,
도 2는 본 발명에 따른 얼굴인식형 인터랙티브 디지털 사이니지장치(1)의 구성요소를 도시한 블럭도,
도 3은 본 발명에 따른 인터랙티브 사이니지제어부의 구성요소를 도시한 블럭도,
도 4는 본 발명에 따른 모델기반얼굴인식알고리즘엔진부의 PCA(Principle Componet Analysis)와 HMM(Hidden Markov Model)을 통해 특징점을 찾아 특징점간의 관계를 이용하여 표정을 인식시키는 과정을 도시한 일실시예도,
도 5는 본 발명에 따른 모델기반얼굴인식알고리즘엔진부를 통해 분석한 사용자의 성별, 연령별을 추정하여 사용자의 기호품, 구매도, 취미에 관한 기본정보를 유추하고, 유추한 사용자 기본정보에 따라 컨텐츠목록을 재구성하여 사이니지디스플레이부에 1:1 맞춤형컨텐츠를 표출시키는 것을 도시한 일실시예도,
도 6은 본 발명에 따른 사이니지디스플레이부(700)의 구성요소를 도시한 사시도,
도 7은 본 발명에 따른 OLED 사이니지용 터치스크린부의 구성요소를 도시한 블럭도,
도 8은 본 발명에 따른 얼굴인식형 인터랙티브 디지털 사이니지장치를 마트의 진열대에 적용시켜, 1:1 맞춤형컨텐츠 및 1:1 호출형컨텐츠를 사이니지디스플레이부에 표출시키는 것을 도시한 일실시예도,
도 9는 본 발명에 따른 얼굴인식형 인터랙티브 디지털 사이니지장치를 지하철스크린상에 적용시켜, 1:1 맞춤형컨텐츠 및 1:1 호출형컨텐츠를 사이니지디스플레이부에 표출시키는 것을 도시한 일실시예도.
먼저, 본 발명에서 설명되는 인터랙티브란 미디어와 이용자 간 커뮤니케이션이 가능한 상태를 의미하는 상호 작용성으로, 뉴미디어의 주요 특성으로 뉴미디어 관련 연구시 매체특성이자 이용자 특성을 말한다.
그리고, 사용자 미디어를 직접 조작하고 미디어를 통하여 미디어와 자기 자신에 변화를 가져올 수 있으며 타인과 소통할 수 있는 특성을 지닌다.
이하, 본 발명에 따른 바람직한 실시예를 도면을 첨부하여 설명한다.
도 1은 본 발명에 따른 얼굴인식형 인터랙티브 디지털 사이니지장치(1)의 구성요소를 도시한 사시도에 관한 것으로, 이는 사이니지본체(100), 영상카메라(200), 음성입력부(300), 인체감지센서부(400), 초음파센서부(500), 인터랙티브 사이니지제어부(600), 사이니지디스플레이부(700)에 관해 설명한다.
또한, 본 발명에 따른 얼굴인식형 인터랙티브 디지털 사이니지장치(1)은 상기 초음파센서부를 대신하여, 근접센서, 적외선센서가 구성된다.
먼저, 본 발명에 따른 사이니지본체(100)에 관해 설명한다.
상기 사이니지본체(100)는 사각판넬형상으로 이루어져 각 기기를 외압으로부터 보호하고 지지하는 역할을 한다.
이는 도 1에 도시한 바와 같이, 상단 중앙일측과 하단 중앙 일측에 영상카메라가 구성되고, 양측면 일측과 하단 일측에 음성입력부가 구성되며, 상단 일측 및 하단 일측에 인체감지센서부가 구성되고, 사이니지본체의 상단 좌우 일측과 하단 좌우 일측에 4개의 초음파센서부가 구성되며, 본체 중앙부위를 중심으로 사이니지디스플레이부가 구성되고, 사이니지디스플레이부 후단에 인터랙티브 사이니지제어부가 구성된다.
다음으로, 본 발명에 따른 영상카메라(200)에 관해 설명한다.
상기 영상카메라(200)는 사이니지본체의 상단 중앙 일측과 하단 중앙 일측에 위치되어, 사용자의 얼굴을 촬영하는 역할을 한다.
이는 PTZ구조의 HD카메라로 구성되어, 상하, 좌우, 그리고, 1°~360°로 회전되도록 구성된다.
다음으로, 본 발명에 따른 음성입력부(300)에 관해 설명한다.
상기 음성입력부(300)는 사이니지본체의 양측면 일측과 하단 일측에 위치되어, 사용자의 음성을 입력받아 저장하는 역할을 한다.
이는 마이크로 구성된다.
다음으로, 본 발명에 따른 인체감지센서부(400)에 관해 설명한다.
상기 인체감지센서부(400)는 사이니지본체의 상단 일측 및 하단 일측에 위치되어 사용자의 접근을 감지하는 역할을 한다.
다음으로, 본 발명에 따른 초음파센서부(500)에 관해 설명한다.
상기 초음파센서부(500)는 사이니지본체의 상단 좌우 일측과 하단 좌우 일측에 위치되어 사용자의 접근거리를 초음파 파장을 통해 최대거리에서 최소거리로 순차적으로 감지하는 역할을 한다.
상기 초음파센서부를 대신하여, 본 발명에서는 근접센서, 적외선센서가 선택되어 구성된다.
상기 근접센서는 물체가 접근해 왔을 때의 위치를 검출하기 위한 센서로서, 이는 자기의 영향으로 내부의 전류가 변화하는 홀 소자와 영구 자석을 결합한 센서, 램프나 발광 다이오드와 광센서를 결합시킨 센서, 정전(靜電) 용량의 변화를 검출하는 센서로 구성된다.
상기 적외선센서는 적외선을 이용해 온도, 압력, 방사선의 세기 등의 물리량이나 화학량을 검지하여 신호처리가 가능한 전기량으로 변환하는 센서로서, 이는 기계가 적외선을 발산하여 차단되는 것을 감지하는 센서, 주변의 적외선을 검출하는 센서로 구성된다.
다음으로, 본 발명에 따른 인터랙티브 사이니지제어부(600)에 관해 설명한다.
상기 인터랙티브 사이니지제어부(600)는 상기 인체감지센서부를 통해 사용자의 접근감지신호가 입력되고, 초음파센서부를 통해 사용자의 접근거리감지신호가 입력되어, 기준설정치 범위내에 들어오면, 영상카메라를 구동시켜 사용자의 얼굴을 촬영시키도록 제어시키고, 영상카메라를 통해 촬영한 사용자의 얼굴데이터를 입력받아, 미리설정된 기준얼굴데이터와 비교 분석한 후, 사용자의 성별, 연령별을 추정하여 사용자의 기호품, 구매도, 취미에 관한 기본정보를 유추하고, 유추한 사용자 기본정보에 따라 컨텐츠목록을 재구성하여 사이니지디스플레이부에 1:1 맞춤형컨텐츠를 표출시키도록 제어하고, 음성입력부로부터 입력된 음성데이터를 기준명령호출음성데이터와 비교분석한 후, 분석한 기준명령호출음성데이터와 매칭된 1:1 호출형컨텐츠를 불러와서 사이니지디스플레이부에 표출시키도록 제어하는 역할을 한다.
이는 도 3에 도시한 바와 같이, 모델기반얼굴인식알고리즘엔진부(610), 맞춤형컨텐츠표출제어부(620), 사용자위치분석부(630), 기기구동제어부(640), 호출형컨텐츠표출제어부(650), 감성컨텐츠표출제어부(660), 블루투스형 데이터전송부(670)로 구성된다.
상기 인터랙티브 사이니지제어부(600)는 블루투스형 데이터전송부를 통해 이웃하는 또 다른 얼굴인식형 인터랙티브 디지털 사이니지장치와 블루투스통신망으로 연결되는 것 이외에도, 내부 시스템의 데이터전송라인 I/O(Input Out Line) 인터페이스를 통해 이웃하는 또 다른 얼굴인식형 인터랙티브 디지털 사이니지장치와 연결되도록 구성된다.
첫째, 본 발명에 따른 모델기반얼굴인식알고리즘엔진부(610)에 관해 설명한다.
상기 모델기반얼굴인식알고리즘엔진부(610)는 영상카메라를 통해 촬영한 사용자의 얼굴데이터를 입력받아, 시간에 따라 변하는 표정의 패턴을 표현하기 위해 표정 특성을 공간적으로 분석하는 PCA(Principle Componet Analysis)와 시공간적으로 분석하는 HMM기반의 표정 HMM(Hidden Markov Model)을 통해 특징점을 찾아 특징점간의 관계를 이용하여 표정을 인식시키는 역할을 한다.
이는 학습한 표정 패턴을 기반으로 얼굴영상데이터에서 사람의 얼굴을 검출하고 표정을 분석하여 분류한다.
이때, 얼굴 표정을 인식하는데 있어서 공간적 정보 외에 시간에 따라 변하는 표정의 패턴을 표현하기 위해 표정 특성을 공간적으로 분석하는 PCA(Principle Componet Analysis)와 시공간적으로 분석하는 HMM기반의 표정 HMM을 하이브리드형태로 이용한다.
이는 표정의 공간적 특징추출은 시간적 분석 과정과 밀접하게 연관되어 있기 때문에 다양하게 변화하는 표정을 검출하여 추적하고 분류하는데 HMM의 시공간적 접근방식을 적용하면 효과적이기 때문이다.
따라서, 현재의 시각적 관측치와 이전 시각적 관측치의 결과 간의 사후 확률을 측정하여 얼굴을 분류하게된다.
또한, 본 발명에 따른 모델기반얼굴인식알고리즘엔진부는 얼굴영역을 검출하기위해 얼굴의 피부색조를 이용한다.
먼저, 도 4에 도시한 바와 같이, 빛, 조명 등의 환경적인 영향력에 대해 색상 노출을 정규화하기 위해서 참조 흰색을 이용하여 빛의 조건을 보정하는 구조로 구성으로 얼굴영상데이터를 전처리한다.
이를 이용하여 RGB 칼라 모델에서 YCbCr 칼라모델로 색상을 변경하여 얼굴 피부색과 유사한 색도와 휘도를 갖는 영역을 먼저 추출하고 입 영역과 눈 영역을 포착하는 최적의 타원을 계산하여 얼굴피부 영역을 검출한다.
이후 PCA 분석 모듈을 사용하여 얼굴 영상데이터의 고유벡터를 예측하고 얼굴 분포도의 주요 성분을 찾아내거나 얼굴 영상 데이터 집합의 공분산 행렬의 고유벡터를 찾음으로써 얼굴 영상 데이터간의 변화를 특성화하는 특징 집합을 구할 수 있다.
이때, 얼굴표정을 결정하는 5개의 고유 벡터의 값으로 양 눈의 중심점과 눈썹 시작점간의 거리, 양 눈 중심점과 임의 끝점간의 거리, 입의 양 끝점 간의 거리를 이용한다.
사람의 표정 변화의 움직임 패턴은 시간의 흐름에 따라 초기 상태에서 최고조의 상태로 변화한 뒤 종료의 상태로 변화한다.
이러한 표정의 특징을 학습하고 분류하기 위해 HMM을 사용하는데 이는 시간에 따라 변하는 신호를 분석하는데 적당한 통계적 동작모델로써 시스템 내의 상태 변환 과정과 시스템 종속적인 확률분포에 따라 관측치를 발산하는 과정을 생성한다.
표정 HMM에서는 기쁨, 슬픔, 화냄, 혐오, 두려움, 놀람 등의 표정을 나타내는 대표 표정 변수를 기준설정치로 설정하고, 표정상태의 사후 확률을 예측하도록 구성된다.
사후 확률에서는 샨논(Shannon)의 엔트로피를 확장하여 불확정 감소치를 구하고 이를 분류하고자 하는 해당 표정 특징벡터에서 빼면 서로 다른 표정 벡터 중 더 큰 값만 남게 되어 표정인식의 신뢰도를 높여 약한 얼굴 표정 분류의 오류를 낮출 수가 있다.
즉, 사후확률을 이용하여 정도가 약한 얼굴 표정을 대표 표정 중 하나로 분류하도록 구성된다.
둘째, 본 발명에 따른 맞춤형컨텐츠표출제어부(620)에 관해 설명한다.
상기 맞춤형컨텐츠표출제어부(620)는 도 5에 도시한 바와 같이, 모델기반얼굴인식알고리즘엔진부를 통해 분석한 사용자의 성별, 연령별을 추정하여 사용자의 기호품, 구매도, 취미에 관한 기본정보를 유추하고, 유추한 사용자 기본정보에 따라 컨텐츠목록을 재구성하여 사이니지디스플레이부에 1:1 맞춤형컨텐츠를 표출시키도록 제어하는 역할을 한다.
셋째, 본 발명에 따른 사용자위치분석부(630)에 관해 설명한다.
상기 사용자위치분석부(630)는 초음파센서부를 통해 사용자의 접근거리감지신호를 입력받아, 사용자의 접근거리에 따른 사용자의 위치정보를 분석시키는 역할을 한다.
넷째, 본 발명에 따른 기기구동제어부(640)에 관해 설명한다.
상기 기기구동제어부(640)는 사용자위치분석부를 통해 분석된 사용자의 위치정보에 따라 각 기기의 구동을 순차적으로 제어하는 역할을 한다.
다섯째, 본 발명에 따른 호출형컨텐츠표출제어부(650)에 관해 설명한다.
상기 호출형컨텐츠표출제어부(650)는 음성입력부를 통해 입력된 음성데이터를 기준명령호출음성데이터와 비교분석한 후, 분석한 기준명령호출음성데이터와 매칭된 1:1 호출형컨텐츠를 불러와서 사이니지디스플레이부에 표출시키도록 제어시키는 역할을 한다.
여섯째, 본 발명에 따른 감성컨텐츠표출제어부(660)에 관해 설명한다.
상기 감성컨텐츠표출제어부(650)는 1:1 맞춤형컨텐츠와 1:1 호출형컨텐츠에 그래픽, 텍스트메세지, 사운드 중 어느 하나 또는 둘 이상을 선택해서 믹싱시킨 감성컨텐츠를 사이니지디스플레이부상에 표출시키도록 제어하는 역할을 한다.
일곱째, 본 발명에 따른 블루투스형 데이터전송부(670)에 관해 설명한다.
상기 블루투스형 데이터전송부(670)는 도 8에 도시한 바와 같이, 이웃하는 또 다른 얼굴인식형 인터랙티브 디지털 사이니지장치와 블루투스통신망으로 연결되어 지나가는 사용자의 이동속도에 맞게 1:1 맞춤형컨텐츠 및 1:1 호출형컨텐츠를 순차적으로 디스플레이시키도록 1:1 맞춤형컨텐츠 및 1:1 호출형컨텐츠를 전송시키는 역할을 한다.
또한, 본 발명에 따른 인터랙티브 사이니지제어부(600)는 호출형컨텐츠표출제어부를 통해 음성데이터를 기준명령호출음성데이터와 비교분석한 후, 분석한 기준명령호출음성데이터와 매칭된 1:1 호출형컨텐츠를 불러와서 사이니지디스플레이부에 표출시키도록 제어시키도록 구성된다.
이때, 음성인식 속도를 높이고, 에러 발생율을 낮추도록 하기 위해 히든 마르코프모델알고리즘엔진부(680)가 포함되어 구성된다.
상기 히든 마르코프모델알고리즘엔진부(680)는 음성입력부를 통해 입력된 음성데이터의 시간적 변화를 모델링하는 천이확률과 스펙트럼 변화를 출력함수로 나타낸 후, 주어진 모델과의 확률적인 추정값을 이용하여 모델의 유사도를 연산시켜 음성인식 속도를 높이는 역할을 한다.
여기서, 음성인식을 위한 히든마르코프모델은 사용자의 음성 바로 전 상태에 의해서 다음 상태가 결정되는 일차 마르코프 과정이 주로 사용된다.
즉, 음성의 시간적 제약은 음성을 시간의 함수로 표시할 수 있다는 점이다.
이것은 음성이 시작되고 지속적으로 변화하여 미치게 되는 과정이어서 히든마르코프 모델을 좌향우천이(left to right transiton)만 허용하는 모델로 단순화시킨다.
본 발명에 따른 히든 마르코프모델알고리즘엔진부는 사용자의 발성하는 기관의 시간적 상태 또는 생성된 음운은 은닉되고 관측되는 음성을 출력으로 하여 인식시키는 과정을 말한다.
상기 히든 마르코프모델은 다음과 같이 표현된다.
즉, 서로 다른 한개의 상태 N이 있고, 이 상태는 관측되지 아니하고 은닉(Hidden)되어 있다. 한 상태에서 다른 상태도 도달 가능하다. 여기서는 개별상태를 숫자로만 표시하여 {1,2...,N}으로 표시하고, t시간에서 정해진 상태를 qt로 표시한다.
그리고, 상태에 따른 출력 심벌의 구별 가능한 총수는 유한 개이고, 그 수는 M이라 한다. 출력의 표시는 V={v1,v2,...,vM}으로 한다.
이때, 천이확률분포 A={aij}로 정의한다.
이는 수학식 1과 같이 표현된다.
Figure pat00001
그리고, 관측된 심벌의 확률분포는 B={bj(k)}라 한다.
이는 수학식 2와 같이 표현된다.
Figure pat00002
여기서, qt=j는 시간 t에서 상태가 j임을 나타내며, ot=vk는 시간 t에서 관측된 출력 심벌 vk인 것을 나타낸다.
각 상태 j에 대해서 정의된다.
그리고, 초기 상태 분포 ∏={πi}가 주어진다.
여기서, πi=P[q1 =i],1≤i≤N
상기 천이확률분포 A, 심벌의 확률분포 B, 초기 상태 분포 ∏를 통해 본 발명에 따른 히든 마르코프모델은 다음의 수학식 3과 같이 표현된다.
Figure pat00003
본 발명에 따른 히든 마르코프모델을 통해 음성인식 속도를 높이기 위해 다음과 같은 과정을 수행한다.
먼저, 관측 시퀀스 O=(o1,o2,...,oT)와 모델 λ=(A,B,∏)가 주어졌을 때, 주어진 모델에서 효과적으로 관측시퀀스의 확률을 구한다.
이는 주어진 모델이 주어진 관측 시퀀스와 얼마나 잘 매칭되는지를 평가한다.
즉, 여러개의 경합하는 모델이 있을 경우 하나를 선택해야 한다면, 상기 관측시퀀스의 확률을 구해서 관측과 최상의 매칭이 되는 모델을 설정한다.
이어서, 관측 시퀀스 O=(o1,o2,...,oT)와 모델 λ=(A,B,∏)가 주어지면, 여기에 대응하는 상태 시퀀스 q=(q1,q2,...,qT)를 고려하여 최상의 것을 선택한다.
이는 적절한 상태 시퀀스를 발견함으로서 모델의 은닉된 부분을 밝히고, 실제적 상황에서는 가능한 최상의 해를 구하기 위해서 최적평가함수를 도입해서 사용하도록 구성된다.
이로 인해 몇가지 합리적인 최적 평가 함수를 적용할 수 있게 되고, 이렇게 선택된 평가함수는 잘 알려진 상태 시퀀스에 대해 의도적으로 적용하여 사용되는 시스템에 강력한 기능을 부여하게 된다.
끝으로, 음성인식을 극대화하기 위해 모델 파라미터 λ=(A,B,∏)에 수정을 가해서 모델 파라미터를 최적화시킨다.
이는 히든 마르코프모델을 학습시키는 과정이므로, 모델 파라미터를 수정하기 위해서 사용되는 관측된 출력 시퀀스를 학습시켜 학습데이터를 생성시킨다.
이처럼 관측된 학습 데이터에 적용되는 최적의 모델 파라미터를 구하여 실제 음성인식에 가장 부합하는 모델을 선택시킨다.
또한, 본 발명에 따른 인터랙티브 사이니지제어부(600)는 사이니지본체 주변에 인체가 감지되지 않으면 광고를 보는 사람이 없는 것으로 판단을 하고, 자동으로 사이니지본체를 휴면(sleep) 모드로 전환시켜서 불필요한 전원의 소모를 차단시키는 휴먼모드구동제어부가 포함되어 구성된다.
다음으로, 본 발명에 따른 사이니지디스플레이부(700)에 관해 설명한다.
상기 사이니지디스플레이부(700)는 인터랙티브 사이니지제어부의 제어신호에 따라 사용자의 성별,연령별에 맞는 1:1 맞춤형컨텐츠를 표출시키거나, 또는 사용자의 음성데이터에 맞는 1:1 호출형컨텐츠를 표출시키는 역할을 한다.
이는 도 6에 도시한 바와 같이, OLED 사이니지용 터치스크린부(710), OLED 사이니지용 애노드전극부(720), OLED 사이니지용 유기체필름부(730), OLED 사이니지용 캐소드전극부(740), OLED 사이니지용 유리 플레이트부(750)로 구성된다.
첫째, 본 발명에 따른 OLED 사이니지용 터치스크린부(710)에 관해 설명한다.
상기 OLED 사이니지용 터치스크린부(710)는 디스플레이창의 정면 표면에 형성되어, 사용자가 닿는 표면에 전기적 유도층과 저항층을 입히고, 이를 미세한 도트로 분리시켜 형성시킨 후, 좌우상하로 적외선을 흘러보내, 화면에 복수개의 사각형 격자를 생성시켜 손끝이나 터치펜이 격자에 접촉하면 그 위치를 파악해서 입력시키는 역할을 한다.
이는 PL(Polyester Laminated)구조로 이루어지고, 애노드전극부 위에 필름이 2겹으로 겹쳐져서 필름과 필름의 접촉에 의해 동작된다.
그리고, 하단에 OLED 사이니지용 애노드전극부와 OLED 사이니지용 유기체필름부가 형성된다.
상기 OLED 사이니지용 터치스크린부(710)는 도 7에 도시한 바와 같이, 압력식 저항막 방식(Registive overlay) 터치스크린(711), 적외선감지방식(Infrared Beam) 스크린(712), 표면 초음파 전도 방식(Surface Acoustic Wave) 스크린(713), 적분식 장력측정 방식(Integral Strain Guage) 스크린(714), 피에조 효과 방식(Piezo Electric) 스크린(715) 중 어느 하나가 선택되어 구성된다.
상기 압력식 저항막 방식(Registive overlay) 터치스크린(711)은 유리나 투명한 플라스틱 판 위에 저항 성분의 물질을 입히고, 그 위에 폴리에스틸렌 필름을 덮어씌운 형태로 형성되며, 두면이 서로 닿지 않도록 0.1mm~2mm 간격으로 절연봉이 설치되어, 터치되는 손의 압력에 의해 접촉되는 두면의 저항값 변화를 읽어와서 터치된 손의 위치를 파악하는 역할을 한다.
이는 저항막의 양단에서 일정한 전류를 흘려주면 저항막이 저항 성분을 갖는 저항체와 같이 작용하기 때문에 양단에 전압이 걸리게 된다.
이어서, 손으로 접촉을 하게 되면, 위쪽표면의 폴리에스틸 필름이 휘어 두면이 접속하게 된다.
따라서, 두면의 저항 성분 때문에 저항의 병렬접속과 같은 형태가 되고, 저항값의 변화가 일어나게 된다.
이때, 양단에 흐르는 전류에 의하여 전압의 변화도 일어나게 되는데, 바로 이러한 전압의 변화정도로써 접촉된 손의 위치를 알 수 있다.
상기 적외선감지방식(Infrared Beam) 스크린(712)은 발광소자인 적외선 발광 다이오드(Infrared LED)와 수광소자인 포토 트랜지스터(Photo-Transistor)가 서로 마주보도록 배치하여 손가락에 의해 발광된 빛이 차단되면 반대편의 포토트랜지스터에서 감지가 되지 않으므로, 몇번째의 셀에서 빛이 차단되었는지 위치를 감지하는 역할을 한다.
이는 Opto-Matrix Frame이 장착된 모니터에서 손가락과 같이 빛을 차단할 수 있는 물체로 화면을 선택하면, 적외선 발광 다이오드에서 발광된 빛이 손가락에 의해서 차단되고, 반대편의 포토 트랜지스터에서 감지가 되지 않으므로 몇 번째의 Cell에서 차단되었는지 위치를 감지하도록 구성된다.
상기 표면 초음파 전도 방식(Surface Acoustic Wave) 스크린(713)은 음파를 발사하는 트랜스미터(Transmitter)를 유리의 한쪽 귀퉁이에 부착하고, 일정한 간격으로 음파를 반사 시키는 리플렉터(Reflector)를 부착하며, 트랜스미터의 반대쪽에는 소리를 수신하는 리시버(Receiver)를 부착해서 손가락 같이 소리를 방해하는 물체가 소리의 진행 경로에 있게 되면 리시버에 수신되지 않으므로, 차단된 시점을 계산하여 접촉된 손의 위치를 감지하는 역할을 한다.
이는 트랜스미터에서 소리를 발사하면 리플렉터는 소리 중 일부를 반사 시키고, 일부는 투과 시키며, 일부 투과된 소리는 다시 다음에 위치한 리플렉터에 의해 일부 반사하고, 일부는 투과시킨다.
이러한 과정이 반복되며, 이때 반사한 초음파는 리시버에 수신되는데, 리플렉터간의 간격이 일정하기 때문에 소리가 반사되어 리시버에 수신되는 시간간격도 일정하게 된다.
이때, 손가락 같이 소리를 방해하는 물체가 소리의 진행 경로에 있게 되면 리시버에 수신되지 않으므로, 차단된 시점을 계산하여 접촉된 손의 위치를 알 수 있다.
상기 적분식 장력측정 방식(Integral Strain Guage) 스크린(714)은 네 귀퉁이에 늘어나는 힘을 측정할 수 있는 장력 측정 센서(Strain gauge)를 부착하여 네귀퉁이의 전기적인 신호의 비율을 계산해서 어느 지점에서 터치되었는지를 감지하는 역할을 한다.
이는 한쪽의 귀퉁이를 손으로 누르면 네 귀퉁이의 장력 측정 장치 중, 눌려진 쪽의 것이 가장 많은 힘을 받게 되며, 늘어나는 힘의 정도에 따라 전기적인 신호로 변경되어 콘트롤러에 전달된다.
이때, 콘트롤러는 네 귀퉁이의 전기적인 신호의 비율을 계산하여 어느 지점에서 터치 되었는지감지해내도록 구성된다.
상기 피에조 효과 방식(Piezo Electric) 스크린(715)은 터치하는 것을 감지하기 위해서 압력에 민감한 수정 발진자(Crystal)를 화면의 네 귀퉁이에 부착한 형태로서, 사용자가 터치하였을 때, 그 압력의 정도와 위치에 따라 네 귀퉁이에서 받는 압력을 정도가 각기 다르게 되어, 이렇게 다른 네 귀퉁이의 압력을 콘트롤러가 비율을 계산하여 좌표값을 연산시켜 위치를 감지하는 역할을 한다.
둘째, 본 발명에 따른 OLED 사이니지용 애노드전극부(720)에 관해 설명한다.
상기 OLED 사이니지용 애노드전극부(720)는 OLED 사이니지용 유기체필름부 상단 표면에 수직방향으로 패턴화되어 데이터라인을 형성시키는 역할을 한다.
이는 투명하고 일함수가 커서 정공주입을 용이하게 해주는 ITO(Indium Tin Oxide) 금속산화복합물을 사용한다.
본 발명에서는 OLED 사이니지용 유기체필름부가 액자형 본체의 상단 방향쪽으로 자체 발광시키도록 하기 위해, OLED 사이니지용 애노드전극부가 OLED 사이니지용 터치스크린부와 OLED 사이니지용 유기체필름부사이에 형성된다.
셋째, 본 발명에 따른 OLED 사이니지용 유기체필름부(730)에 관해 설명한다.
상기 OLED 사이니지용 유기체필름부(730)는 OLED 사이니지용 애노드전극부를 통해 전자가 주입되고, OLED 사이니지용 캐소드전극부를 통해 정공이 주입되어, 전자와 정공이 만나면 재결합을 통하여 여기자(Exciton)를 형성시키고, 여기자가 기저상태로 전이되면서 액자형본체의 상단 방향쪽으로 자체 발광시키는 역할을 한다.
이는 다층(multi-layer)의 유기물층으로 구성된다.
즉, 정공 주입층(Hole Injection Layer, HIL), 정공수송층(Hole Transport Layer, HTL), 발광층(Emissive Layer, EML), 전자 수송층(Electron Transport Layer, ETL), 완충층(Buffer Layer)의 구조로 이루어진다.
상기 정공 수송층(Hole Transport Layer :HTL)은 정공의 이동을 좀 더 효율적으로 하기 위한 층으로서, NPB(N,N'-bis-(1-naphyl)-N,N'-diphenyl-1.1'-biphenyl-4.4'-diamine)와 TCTA(4,4'4"-tris-(N-carbazolyl)-triphenlyamine)로 구성된다.
상기 발광층(Emission Layer : EML)은 전자와 정공이 만나서 여기자(Exciton)를 형성시키고, 여기자가 기저상태로 전이되면서 스위치모듈본체의 상단 방향쪽으로 자체 발광시키는 것으로서, 이는 기능에 따라 형광모체(Host)와 활성제(Dopant)로 구분되고, 발광층은 형광모체만으로 구성하기도 하지만, 좀 더 높은 발광 효율을 얻기 위하여 활성제를 모체에 첨가하여 사용한다.
그리고, 청색발광소자의 형광모체로는 mCP(1,3-bis (9-carbazolyl)benzene)를 활성제로 FIrpic(iridium(III)bis[4.6-di-fluorophenyl)-pyridinato-]picolinate), 적색발광소자의 형광모체로는 CBP(4,4'-N,N-dicarbazol-biphenyl)를 활성제로는 Ir(pq)2acac(iridium(III)bis(1-phenylquinoline) acetylace-tonate)를 첨가하여 구성된다.
상기 전자 수송층(Electron Transport Layer : ETL)은 전자의 이동을 좀 더 효율적으로 하기 위하여 사용되는 것으로서, 이는 BPhen(4.7-diphenyl-1.10-phenanthroline)로 구성된다.
상기 완충층(Buffer Layer)은 캐소드전극부와 전자 수송층 상이에 소자의 효율을 개선하기 위한 것으로서, 이는 전자 주입의 에너지 장벽을 낮추어 구동 전압을 감소시키고, 발광효율을 증가시키는 역할을 한다.
이는 LiF로 구성된다.
본 발명에 따른 OLED 사이니지용 유기체필름부는 정공 주입층(Hole Injection Layer, HIL), 정공수송층(Hole Transport Layer, HTL), 발광층(Emissive Layer, EML), 전자 수송층(Electron Transport Layer, ETL), 완충층(Buffer Layer)의 구조로 이루어짐으로서, OLED 사이니지용 캐소드전극부와 OLED 사이니지용 애노드전극부로부터 발광층까지 다층 박막을 통해 전자와 정공이 주입되어 이동하여 발광층에 도달하면 재결합을 통해 여기자(Excition)가 형성되며 여기자가 기저상태로 전이하면서 밴드갭 에언지에 해당하는 파장의 빛을 발산하며, 발광된 빛은 흡수스펙트럼에 대해 스토크 이동(Stoke's Shift)를 보여준다.
넷째, 본 발명에 따른 OLED 사이니지용 캐소드전극부(740)에 관해 설명한다.
상기 OLED 사이니지용 캐소드전극부(740)는 OLED 사이니지용 유기체필름부의 하단 표면에 수평방향으로 패턴화되어 스캔라인을 형성시키는 역할을 한다.
이는 일함수가 낮은 금속과 일함수는 높지만, 증착이 용이하고 안정성이 우수한 금속으로 이루어지는데, 본 발명에서는 Al으로 구성된다.
다섯째, 본 발명에 따른 OLED 사이니지용 유리 플레이트부(750)에 관해 설명한다.
상기 OLED 사이니지용 유리 플레이트부(750)는 OLED 사이니지용 캐소드전극부를 하단방향에서 지지해주는 역할을 한다.
이는 보형물의 바닥면과 접촉되면서 OLED 사이니지용 캐소드전극부와 OLED 사이니지용 터치스크린부를 지지해주도록 사각형상의 판재로 이루어진다.
이하, 본 발명에 따른 얼굴인식형 인터랙티브 디지털 사이니지장치의 구체적인 동작과정에 관해 설명한다.
먼저, 초음파센서부를 통해 사용자의 접근거리를 초음파 파장을 통해 최대거리에서 최소거리로 순차적으로 감지한다.
다음으로, 인체감지센서부에서 사용자의 접근을 감지한다.
다음으로, 인터랙티브 사이니지제어부의 제어하에, 인체감지센서부를 통해 사용자의 접근감지신호가 입력되고, 초음파센서부를 통해 사용자의 접근거리감지신호가 입력되어, 기준설정치 범위내에 들어오면, 영상카메라와 음성입력부를 구동시킨다.
다음으로, 영상카메라에서 사용자의 얼굴을 촬영한다.
다음으로, 음성입력부에서 사용자의 음성을 입력받아 저장한다.
다음으로, 인터랙티브 사이니지제어부의 제어하에, 영상카메라를 통해 촬영한 사용자의 얼굴데이터를 입력받아, 미리설정된 기준얼굴데이터와 비교 분석한 후, 사용자의 성별, 연령별을 추정하여 사용자의 기호품, 구매도, 취미에 관한 기본정보를 유추하고, 유추한 사용자 기본정보에 따라 컨텐츠목록을 재구성하여 사이니지디스플레이부에 1:1 맞춤형컨텐츠를 표출시킨다.
다음으로, 인터랙티브 사이니지제어부의 제어하에, 음성입력부로부터 입력된 음성데이터를 기준명령호출음성데이터와 비교분석한 후, 분석한 기준명령호출음성데이터와 매칭된 1:1 호출형컨텐츠를 불러와서 사이니지디스플레이부에 표출시킨다.
다음으로, 감성컨텐츠표출제어부에서 1:1 맞춤형컨텐츠와 1:1 호출형컨텐츠에 그래픽, 텍스트메세지, 사운드 중 어느 하나 또는 둘 이상을 선택해서 믹싱시킨 감성컨텐츠를 사이니지디스플레이부상에 표출시킨다.
끝으로, 블루투스형 데이터전송부를 통해 이웃하는 또 다른 얼굴인식형 인터랙티브 디지털 사이니지장치와 블루투스통신망으로 연결되어 지나가는 사용자의 이동속도에 맞게 1:1 맞춤형컨텐츠 및 1:1 호출형컨텐츠를 순차적으로 디스플레이시키도록 1:1 맞춤형컨텐츠 및 1:1 호출형컨텐츠를 전송시킨다.
여기서, 블루투스형 데이터전송부를 대신해서 내부 시스템의 데이터전송라인 I/O(Input Out Line) 인터페이스를 통해 이웃하는 또 다른 얼굴인식형 인터랙티브 디지털 사이니지장치와 연결된다.
도 8은 본 발명에 따른 얼굴인식형 인터랙티브 디지털 사이니지장치를 마트의 진열대에 적용시켜, 1:1 맞춤형컨텐츠 및 1:1 호출형컨텐츠를 사이니지디스플레이부에 표출시키는 것을 도시한 일실시예도에 관한 것이고, 도 9는 본 발명에 따른 얼굴인식형 인터랙티브 디지털 사이니지장치를 지하철스크린상에 적용시켜, 1:1 맞춤형컨텐츠 및 1:1 호출형컨텐츠를 사이니지디스플레이부에 표출시키는 것을 도시한 일실시예도이다.
1 : 얼굴인식형 인터랙티브 디지털 사이니지장치
100 : 사이니지본체 200 : 영상카메라
300 : 음성입력부 400 : 인체감지센서부
500 : 초음파센서부 600 : 인터랙티브 사이니지제어부
700 : 사이니지디스플레이부

Claims (5)

  1. 사각판넬형상으로 이루어져 각 기기를 외압으로부터 보호하고 지지하는 사이니지본체(100)와,
    사이니지본체의 상단 중앙 일측과 하단 중앙 일측에 위치되어, 사용자의 얼굴을 촬영하는 영상카메라(200)와,
    사이니지본체의 양측면 일측과 하단 일측에 위치되어, 사용자의 음성을 입력받아 저장하는 음성입력부(300)와,
    사이니지본체의 상단 일측 및 하단 일측에 위치되어 사용자의 접근을 감지하는 인체감지센서부(400)와,
    사이니지본체의 상단 좌우 일측과 하단 좌우 일측에 위치되어 사용자의 접근거리를 초음파 파장을 통해 최대거리에서 최소거리로 순차적으로 감지하는 초음파센서부(500)와,
    상기 인체감지센서부를 통해 사용자의 접근감지신호가 입력되고, 초음파센서부를 통해 사용자의 접근거리감지신호가 입력되어, 기준설정치 범위내에 들어오면, 영상카메라를 구동시켜 사용자의 얼굴을 촬영시키도록 제어시키고, 영상카메라를 통해 촬영한 사용자의 얼굴데이터를 입력받아, 미리설정된 기준얼굴데이터와 비교 분석한 후, 사용자의 성별, 연령별을 추정하여 사용자의 기호품, 구매도, 취미에 관한 기본정보를 유추하고, 유추한 사용자 기본정보에 따라 컨텐츠목록을 재구성하여 사이니지디스플레이부에 1:1 맞춤형컨텐츠를 표출시키도록 제어하고, 음성입력부로부터 입력된 음성데이터를 기준명령호출음성데이터와 비교분석한 후, 분석한 기준명령호출음성데이터와 매칭된 1:1 호출형컨텐츠를 불러와서 사이니지디스플레이부에 표출시키도록 제어하는 인터랙티브 사이니지제어부(600)와,
    인터랙티브 사이니지제어부의 제어신호에 따라 사용자의 성별,연령별에 맞는 1:1 맞춤형컨텐츠를 표출시키거나, 또는 사용자의 음성데이터에 맞는 1:1 호출형컨텐츠를 표출시키는 사이니지디스플레이부(700)로 구성되는 것을 특징으로 하는 얼굴인식형 인터랙티브 디지털 사이니지장치.
  2. 제1항에 있어서, 상기 인터랙티브 사이니지제어부(600)는
    영상카메라를 통해 촬영한 사용자의 얼굴데이터를 입력받아, 시간에 따라 변하는 표정의 패턴을 표현하기 위해 표정 특성을 공간적으로 분석하는 PCA(Principle Componet Analysis)와 시공간적으로 분석하는 HMM기반의 표정 HMM(Hidden Markov Model)을 통해 특징점을 찾아 특징점간의 관계를 이용하여 표정을 인식시키는 모델기반얼굴인식알고리즘엔진부(610)와,
    모델기반얼굴인식알고리즘엔진부를 통해 분석한 사용자의 성별, 연령별을 추정하여 사용자의 기호품, 구매도, 취미에 관한 기본정보를 유추하고, 유추한 사용자 기본정보에 따라 컨텐츠목록을 재구성하여 사이니지디스플레이부에 1:1 맞춤형컨텐츠를 표출시키도록 제어하는 맞춤형컨텐츠표출제어부(620)와,
    초음파센서부를 통해 사용자의 접근거리감지신호를 입력받아, 사용자의 접근거리에 따른 사용자의 위치정보를 분석시키는 사용자위치분석부(630)와,
    사용자위치분석부를 통해 분석된 사용자의 위치정보에 따라 각 기기의 구동을 순차적으로 제어하는 기기구동제어부(630)와,
    음성입력부를 통해 입력된 음성데이터를 기준명령호출음성데이터와 비교분석한 후, 분석한 기준명령호출음성데이터와 매칭된 1:1 호출형컨텐츠를 불러와서 사이니지디스플레이부에 표출시키도록 제어시키는 호출형컨텐츠표출제어부(640)와,
    1:1 맞춤형컨텐츠와 1:1 호출형컨텐츠에 그래픽, 텍스트메세지, 사운드 중 어느 하나 또는 둘 이상을 선택해서 믹싱시킨 감성컨텐츠를 사이니지디스플레이부상에 표출시키도록 제어하는 감성컨텐츠표출제어부(650)와,
    이웃하는 또 다른 얼굴인식형 인터랙티브 디지털 사이니지장치와 블루투스통신망으로 연결되어 지나가는 사용자의 이동속도에 맞게 1:1 맞춤형컨텐츠 및 1:1 호출형컨텐츠를 순차적으로 디스플레이시키도록 1:1 맞춤형컨텐츠 및 1:1 호출형컨텐츠를 전송시키는 블루투스형 데이터전송부(660)로 구성되는 것을 특징으로 하는 얼굴인식형 인터랙티브 디지털 사이니지장치.
  3. 제1항에 있어서, 상기 인터랙티브 사이니지제어부(600)는
    음성입력부를 통해 입력된 음성데이터의 시간적 변화를 모델링하는 천이확률과 스펙트럼 변화를 출력함수로 나타낸 후, 주어진 모델과의 확률적인 추정값을 이용하여 모델의 유사도를 연산시켜 음성인식 속도를 높이는 히든 마르코프모델알고리즘엔진부(680)가 포함되어 구성되는 것을 특징으로 하는 얼굴인식형 인터랙티브 디지털 사이니지장치.
  4. 제1항에 있어서, 상기 사이니지디스플레이부(700)는
    디스플레이창의 정면 표면에 형성되어, 사용자가 닿는 표면에 전기적 유도층과 저항층을 입히고, 이를 미세한 도트로 분리시켜 형성시킨 후, 좌우상하로 적외선을 흘러보내, 화면에 복수개의 사각형 격자를 생성시켜 손끝이나 터치펜이 격자에 접촉하면 그 위치를 파악해서 입력시키는 OLED 사이니지용 터치스크린부(710)와,
    OLED 사이니지용 유기체필름부 상단 표면에 수직방향으로 패턴화되어 데이터라인을 형성시키는 OLED 사이니지용 애노드전극부(720)와,
    OLED 사이니지용 애노드전극부를 통해 전자가 주입되고, OLED 사이니지용 캐소드전극부를 통해 정공이 주입되어, 전자와 정공이 만나면 재결합을 통하여 여기자(Exciton)를 형성시키고, 여기자가 기저상태로 전이되면서 액자형본체의 상단 방향쪽으로 자체 발광시키는 OLED 사이니지용 유기체필름부(730)와,
    OLED 사이니지용 유기체필름부의 하단 표면에 수평방향으로 패턴화되어 스캔라인을 형성시키는 OLED 사이니지용 캐소드전극부(740)와,
    OLED 사이니지용 캐소드전극부를 하단방향에서 지지해주는 OLED 사이니지용 유리 플레이트부(750)로 구성되는 것을 특징으로 하는 얼굴인식형 인터랙티브 디지털 사이니지장치.
  5. 제4항에 있어서, 상기 OLED 사이니지용 터치스크린부(710)는
    유리나 투명한 플라스틱 판 위에 저항 성분의 물질을 입히고, 그 위에 폴리에스틸렌 필름을 덮어씌운 형태로 형성되며, 두면이 서로 닿지 않도록 0.1mm~2mm 간격으로 절연봉이 설치되어, 터치되는 손의 압력에 의해 접촉되는 두면의 저항값 변화를 읽어와서 터치된 손의 위치를 파악하는 압력식 저항막 방식(Registive overlay) 터치스크린(711)과,
    발광소자인 적외선 발광 다이오드(Infrared LED)와 수광소자인 포토 트랜지스터(Photo-Transistor)가 서로 마주보도록 배치하여 손가락에 의해 발광된 빛이 차단되면 반대편의 포토트랜지스터에서 감지가 되지 않은 원리를 통해, 몇번째의 셀에서 빛이 차단되었는지 위치를 감지하는 적외선감지방식(Infrared Beam) 스크린(712)과,
    음파를 발사하는 트랜스미터(Transmitter)를 유리의 한쪽 귀퉁이에 부착하고, 특정 간격으로 음파를 반사 시키는 리플렉터(Reflector)를 부착하며, 트랜스미터의 반대쪽에는 소리를 수신하는 리시버(Receiver)를 부착해서 손이 터치되어 소리의 진행 경로에 있게 되면 리시버에 수신되지 않으므로, 차단된 시점을 계산하여 접촉된 손의 위치를 감지하는 표면 초음파 전도 방식(Surface Acoustic Wave) 스크린(713)과,
    네 귀퉁이에 늘어나는 힘을 측정할 수 있는 장력 측정 센서(Strain gauge)를 부착하여 네귀퉁이의 전기적인 신호의 비율을 계산해서 특정 지점에서 터치되었는지를 감지하는 적분식 장력측정 방식(Integral Strain Guage) 스크린(714)과,
    터치하는 것을 감지하기 위해서 압력에 민감한 수정 발진자(Crystal)를 화면의 네 귀퉁이에 부착한 형태로서, 사용자가 터치하였을 때, 그 압력의 정도와 위치에 따라 네 귀퉁이에서 받는 압력을 정도가 각기 달라지는 원리를 통해, 상기 다른 네 귀퉁이의 압력을 콘트롤러가 비율을 계산하여 좌표값을 연산시켜 위치를 감지하는 피에조 효과 방식(Piezo Electric) 스크린(715) 중 어느 하나가 선택되어 구성되는 것을 특징으로 하는 얼굴인식형 인터랙티브 디지털 사이니지장치.
KR1020140115479A 2014-09-01 2014-09-01 얼굴인식형 인터랙티브 디지털 사이니지장치 KR101602828B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140115479A KR101602828B1 (ko) 2014-09-01 2014-09-01 얼굴인식형 인터랙티브 디지털 사이니지장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140115479A KR101602828B1 (ko) 2014-09-01 2014-09-01 얼굴인식형 인터랙티브 디지털 사이니지장치

Publications (2)

Publication Number Publication Date
KR20160027576A true KR20160027576A (ko) 2016-03-10
KR101602828B1 KR101602828B1 (ko) 2016-03-14

Family

ID=55538921

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140115479A KR101602828B1 (ko) 2014-09-01 2014-09-01 얼굴인식형 인터랙티브 디지털 사이니지장치

Country Status (1)

Country Link
KR (1) KR101602828B1 (ko)

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017164478A1 (ko) * 2016-03-25 2017-09-28 한국과학기술원 미세 얼굴 다이나믹의 딥 러닝 분석을 통한 미세 표정 인식 방법 및 장치
KR20170112857A (ko) * 2016-03-25 2017-10-12 한국과학기술원 미세 얼굴 다이나믹의 딥 러닝 분석을 통한 미세 표정 인식 방법 및 장치
WO2017175929A1 (ko) * 2016-04-06 2017-10-12 주식회사 동진컴퍼니 스마트 필름 스크린을 이용한 광고 디스플레이시스템
KR20180029308A (ko) * 2016-09-12 2018-03-21 주식회사 동진컴퍼니 스마트 필름 스크린을 이용한 광고 디스플레이를 제어하기 위한 스마트필름 광고 셋탑박스 시스템
KR20180048058A (ko) * 2016-11-02 2018-05-10 삼성전자주식회사 객체의 속성에 기반하여 객체를 인식 및 트레이닝하는 방법 및 장치
KR20180130315A (ko) * 2017-05-29 2018-12-07 엘지전자 주식회사 홈 어플라이언스 및 그 동작 방법
CN109345312A (zh) * 2018-10-08 2019-02-15 四川长虹电器股份有限公司 基于语音交互和人脸识别分类投放广告的方法及系统
KR20190107623A (ko) 2019-09-02 2019-09-20 엘지전자 주식회사 사이니지 장치 및 이의 동작 방법
KR20190108474A (ko) * 2018-11-29 2019-09-24 장명호 디스플레이 제어 장치
CN110413096A (zh) * 2019-08-02 2019-11-05 梁彩连 一种基于大数据的广告智能显示系统
KR20200004014A (ko) 2018-07-03 2020-01-13 배솜이 의류피팅 디지털 사이니지 시스템 및 디지털 사이니지 시스템을 이용한 상품 디스플레이 방법
WO2020018349A3 (en) * 2018-07-16 2020-03-12 Ensing Maris J Systems and methods for generating targeted media content
WO2020054957A1 (ko) * 2018-09-14 2020-03-19 나모웹비즈주식회사 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버
KR102177015B1 (ko) 2019-08-20 2020-11-10 정봉근 재난 재해 정보를 처리하는 디지털 사이니지 시스템
KR102183475B1 (ko) * 2020-09-24 2020-11-26 주식회사 이노피아테크 단일 영상인식 서비스 운영환경에서 구간분할형 이종 영상인식 서비스 제공 방법 및 장치
US10885317B2 (en) 2018-01-08 2021-01-05 Samsung Electronics Co., Ltd. Apparatuses and methods for recognizing object and facial expression robust against change in facial expression, and apparatuses and methods for training
WO2021013137A1 (zh) * 2019-07-25 2021-01-28 华为技术有限公司 一种语音唤醒方法及电子设备
KR102234515B1 (ko) * 2019-10-15 2021-03-30 서울과학기술대학교 산학협력단 사이니지 컨텐츠 표출장치
WO2021221197A1 (ko) * 2020-04-28 2021-11-04 주식회사 이노스피치 안면 인식 및 iot 기반 애드큐레이션 사이니지 시스템
KR20220165227A (ko) * 2020-03-03 2022-12-14 주식회사 코아소프트 디지털사이니지를 이용한 맞춤형 고객 대응 장치
US11615134B2 (en) 2018-07-16 2023-03-28 Maris Jacob Ensing Systems and methods for generating targeted media content
CN117037789A (zh) * 2023-10-09 2023-11-10 深圳市加推科技有限公司 一种客服语音识别方法、装置、计算机设备及存储介质
KR102655761B1 (ko) * 2023-08-29 2024-04-08 주식회사 넥스트페이먼츠 사람의 특성을 인식하고 제품을 추천하는 전자 장치 및 전자 장치의 동작 방법

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102581583B1 (ko) 2021-05-03 2023-09-25 주식회사 모드랩 커스터마이징 상품 주문이 가능한 디지털 사이니지 장치
KR20240042966A (ko) * 2022-09-26 2024-04-02 주식회사 네오툰 팬덤 인터랙티브 영상 교류 서비스 제공방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110083174A (ko) * 2010-01-13 2011-07-20 엘지전자 주식회사 디지털 사이니지 장치 및 제어 방법
KR20120096232A (ko) * 2011-02-22 2012-08-30 핑거터치인터내셔널 주식회사 인체감지 회전형 디지털 정보 디스플레이 장치
KR101271483B1 (ko) 2011-06-17 2013-06-05 한국항공대학교산학협력단 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기
KR20140089876A (ko) * 2013-01-07 2014-07-16 삼성전자주식회사 대화형 인터페이스 장치 및 그의 제어 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110083174A (ko) * 2010-01-13 2011-07-20 엘지전자 주식회사 디지털 사이니지 장치 및 제어 방법
KR20120096232A (ko) * 2011-02-22 2012-08-30 핑거터치인터내셔널 주식회사 인체감지 회전형 디지털 정보 디스플레이 장치
KR101271483B1 (ko) 2011-06-17 2013-06-05 한국항공대학교산학협력단 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기
KR20140089876A (ko) * 2013-01-07 2014-07-16 삼성전자주식회사 대화형 인터페이스 장치 및 그의 제어 방법

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170112857A (ko) * 2016-03-25 2017-10-12 한국과학기술원 미세 얼굴 다이나믹의 딥 러닝 분석을 통한 미세 표정 인식 방법 및 장치
WO2017164478A1 (ko) * 2016-03-25 2017-09-28 한국과학기술원 미세 얼굴 다이나믹의 딥 러닝 분석을 통한 미세 표정 인식 방법 및 장치
WO2017175929A1 (ko) * 2016-04-06 2017-10-12 주식회사 동진컴퍼니 스마트 필름 스크린을 이용한 광고 디스플레이시스템
KR20180029308A (ko) * 2016-09-12 2018-03-21 주식회사 동진컴퍼니 스마트 필름 스크린을 이용한 광고 디스플레이를 제어하기 위한 스마트필름 광고 셋탑박스 시스템
KR20180048058A (ko) * 2016-11-02 2018-05-10 삼성전자주식회사 객체의 속성에 기반하여 객체를 인식 및 트레이닝하는 방법 및 장치
KR20180130315A (ko) * 2017-05-29 2018-12-07 엘지전자 주식회사 홈 어플라이언스 및 그 동작 방법
US10885317B2 (en) 2018-01-08 2021-01-05 Samsung Electronics Co., Ltd. Apparatuses and methods for recognizing object and facial expression robust against change in facial expression, and apparatuses and methods for training
KR20200004014A (ko) 2018-07-03 2020-01-13 배솜이 의류피팅 디지털 사이니지 시스템 및 디지털 사이니지 시스템을 이용한 상품 디스플레이 방법
WO2020018349A3 (en) * 2018-07-16 2020-03-12 Ensing Maris J Systems and methods for generating targeted media content
US11615134B2 (en) 2018-07-16 2023-03-28 Maris Jacob Ensing Systems and methods for generating targeted media content
US11157548B2 (en) 2018-07-16 2021-10-26 Maris Jacob Ensing Systems and methods for generating targeted media content
US10831817B2 (en) 2018-07-16 2020-11-10 Maris Jacob Ensing Systems and methods for generating targeted media content
WO2020054957A1 (ko) * 2018-09-14 2020-03-19 나모웹비즈주식회사 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버
CN109345312A (zh) * 2018-10-08 2019-02-15 四川长虹电器股份有限公司 基于语音交互和人脸识别分类投放广告的方法及系统
KR20190108474A (ko) * 2018-11-29 2019-09-24 장명호 디스플레이 제어 장치
WO2021013137A1 (zh) * 2019-07-25 2021-01-28 华为技术有限公司 一种语音唤醒方法及电子设备
CN110413096A (zh) * 2019-08-02 2019-11-05 梁彩连 一种基于大数据的广告智能显示系统
CN110413096B (zh) * 2019-08-02 2021-12-14 深圳市米优文化网络有限公司 一种基于大数据的广告智能显示系统
KR102177015B1 (ko) 2019-08-20 2020-11-10 정봉근 재난 재해 정보를 처리하는 디지털 사이니지 시스템
KR20190107623A (ko) 2019-09-02 2019-09-20 엘지전자 주식회사 사이니지 장치 및 이의 동작 방법
US20200020259A1 (en) * 2019-09-02 2020-01-16 Lg Electronics Inc. Signage apparatus and method for operating thereof
KR102234515B1 (ko) * 2019-10-15 2021-03-30 서울과학기술대학교 산학협력단 사이니지 컨텐츠 표출장치
KR20220165227A (ko) * 2020-03-03 2022-12-14 주식회사 코아소프트 디지털사이니지를 이용한 맞춤형 고객 대응 장치
WO2021221197A1 (ko) * 2020-04-28 2021-11-04 주식회사 이노스피치 안면 인식 및 iot 기반 애드큐레이션 사이니지 시스템
KR102183475B1 (ko) * 2020-09-24 2020-11-26 주식회사 이노피아테크 단일 영상인식 서비스 운영환경에서 구간분할형 이종 영상인식 서비스 제공 방법 및 장치
US11228803B1 (en) 2020-09-24 2022-01-18 Innopia Technologies, Inc. Method and apparatus for providing of section divided heterogeneous image recognition service in a single image recognition service operating environment
KR102655761B1 (ko) * 2023-08-29 2024-04-08 주식회사 넥스트페이먼츠 사람의 특성을 인식하고 제품을 추천하는 전자 장치 및 전자 장치의 동작 방법
CN117037789A (zh) * 2023-10-09 2023-11-10 深圳市加推科技有限公司 一种客服语音识别方法、装置、计算机设备及存储介质
CN117037789B (zh) * 2023-10-09 2023-12-08 深圳市加推科技有限公司 一种客服语音识别方法、装置、计算机设备及存储介质

Also Published As

Publication number Publication date
KR101602828B1 (ko) 2016-03-14

Similar Documents

Publication Publication Date Title
KR101602828B1 (ko) 얼굴인식형 인터랙티브 디지털 사이니지장치
KR101793628B1 (ko) 투명 디스플레이 장치 및 그 디스플레이 방법
JP7431178B2 (ja) 機能パネル
CN109716378B (zh) 信息收集系统、电子货架标签、电子pop广告设备和字符信息显示设备
RU2675043C2 (ru) Прозрачное устройство отображения и способ управления им
WO2018196281A1 (zh) Oled显示面板以及使用oled显示面板进行指纹识别的方法
KR102127356B1 (ko) 투명 디스플레이 장치 및 그 제어 방법
US8665223B2 (en) Display device and method providing display contact information based on an amount of received light
KR102059359B1 (ko) 디스플레이 장치, 디스플레이 장치의 동작 방법 및 제조 방법
WO2004064022A1 (en) Kiosk system
JP7318078B2 (ja) 表示装置
CN109147693A (zh) 具有红外识别的发光二极管显示装置
KR101271767B1 (ko) 투명 엘시디를 이용한 제품 광고 장치
KR20210002009A (ko) 기능 패널, 반도체 장치, 표시 장치, 입출력 장치, 정보 처리 장치
JP2022033894A (ja) 表示パネル及び情報処理装置
KR101971521B1 (ko) 투명 디스플레이 장치 및 그 디스플레이 방법
WO2022172692A1 (ja) 画像処理装置、画像処理方法、画像処理システム
JP7493514B2 (ja) 機能パネル、表示装置、入出力装置、情報処理装置
KR20210045431A (ko) 표시 패널, 표시 장치, 입출력 장치, 정보 처리 장치
WO2020229910A1 (ja) 情報処理装置
KR20210144418A (ko) 무인 점포 시스템 및 이의 비상 상황 판단 방법
WO2020003056A1 (ja) 表示パネル、表示装置、入出力装置、情報処理装置
KR20170125306A (ko) 투명 디스플레이 장치 및 그 디스플레이 방법
JP2010191438A (ja) 表示装置及び表示方法
JP2010118016A (ja) 入力装置、入力方法、入力プログラム、及びコンピュータ読み取り可能な記録媒体

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee