CN104978392A - 输出内容的内容输出装置 - Google Patents

输出内容的内容输出装置 Download PDF

Info

Publication number
CN104978392A
CN104978392A CN201510196564.1A CN201510196564A CN104978392A CN 104978392 A CN104978392 A CN 104978392A CN 201510196564 A CN201510196564 A CN 201510196564A CN 104978392 A CN104978392 A CN 104978392A
Authority
CN
China
Prior art keywords
content
output
timing
data
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510196564.1A
Other languages
English (en)
Other versions
CN104978392B (zh
Inventor
村上文吾
铃木秀夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2014077062A external-priority patent/JP5943215B2/ja
Priority claimed from JP2014223152A external-priority patent/JP6048475B2/ja
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of CN104978392A publication Critical patent/CN104978392A/zh
Application granted granted Critical
Publication of CN104978392B publication Critical patent/CN104978392B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14—Handling requests for interconnection or transfer
    • G06F13/36—Handling requests for interconnection or transfer for access to common bus or bus system
    • G06F13/362—Handling requests for interconnection or transfer for access to common bus or bus system with centralised access control
    • G06F13/3625—Handling requests for interconnection or transfer for access to common bus or bus system with centralised access control using a time dependent access
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • G06F16/9558—Details of hyperlinks; Management of linked annotations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/74—Browsing; Visualisation therefor
    • G06F16/748—Hypervideo
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0277—Online advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8583—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by creating hot-spots
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14—Handling requests for interconnection or transfer
    • G06F13/20—Handling requests for interconnection or transfer for access to input/output bus
    • G06F13/28—Handling requests for interconnection or transfer for access to input/output bus using burst mode transfer, e.g. direct memory access DMA, cycle steal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38—Information transfer, e.g. on bus
    • G06F13/40—Bus structure
    • G06F13/4004—Coupling between buses
    • G06F13/4022—Coupling between buses using switching circuits, e.g. switching matrix, connection or expansion network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38—Information transfer, e.g. on bus
    • G06F13/40—Bus structure
    • G06F13/4004—Coupling between buses
    • G06F13/4027—Coupling between buses using bus bridges

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Marketing (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供一种输出内容的内容输出装置。在输出内容途中有预定指示或用户有反应的情况下，为了能在适当定时执行对应于该指示或反应的处理，本发明的CPU(11)在依次输出用于构成内容的各个数据的输出途中对该输出的数据执行预定的用户指示时，检测出该指示定时，存储在指示信息存储器(130d)中，确定比存储在该指示信息存储器(130d)中的指示定时晚的预定定时，作为对应于该用户指示的处理的执行定时，执行该处理。

Description

输出内容的内容输出装置
技术领域
本发明涉及一种输出Web页面的内容(content)或广告数据内容的内容输出装置。
背景技术
近年来，随着智能手机(多功能型便携电话机)等的普及，存在网络上的通信量增大或Web网站上的信息量也增大的倾向，无法忽视使用者通过Web浏览器能阅览内容的状态之前的浏览器的读入时间。
例如，依次读入用于构成内容(Web页面数据)的各个数据(例如，图像等)，并且边整理该网页整体的体裁边配置显示各个数据，因此使用者看到的数据等因其他新的数据的读入及显示，其位置会移动。
尤其，在Web网站的读入途中，在选择链接到的URL(Uniform ResourceLocator，统一资源定位符)而想要跳转到其他网页的情况下，当指示该链接的点击操作与配置有新的数据的定时重合时，有时会选择非期望的链接目的地后转移。
如上所述，当跳转到错误的链接目的地时，需要返回到最初的网站，除损失时间外，也导致心理压力。另外，即使能正确跳转到期望的链接目的地，存在因突然的数据切换，可能看漏重要数据或看错数据的可能性，并且还存在该切换前后的内容与链接目的地的内容会混同的可能性。
以往，如专利文献1(参照日本特开2013-140542号公报)所示，当在显示内容(动态图像数据)中接受了附加信息的再现请求时，从对应于该再现时间带的链接目的地取得附加信息后进行显示。
另外，如专利文献2(参照日本特开2013-176103号公报)所示，若点击超视频内容，则将该链接信息存储为书签，之后，能根据该书签来执行动作。
另外，如专利文献3(日本特表2009-528623号)所示，显示用于表示将超链接的附加内容延迟预定时间的图示符号。
在上述文献1中，虽然能切换到与再现中的内容场景一致的内容，但在内容再现途中看到关注的数据(链接目的地)时，会通过用户操作(再现请求)跳转到该链接目的地，因此会中断之前的再现，存在即使有想看的部分，该部分也会看漏，或中断前后的内容与链接目的地的内容混同的可能性。即使在这种内容(动态图像数据)的再现途中，也会引起与上述阅览Web页面时一样的问题。
此外，在上述专利文献2中，必需通过点击内容、从超视频中读入该内容的链接信息的读入处理，用于该读入处理的处理负荷增加，有可能对动作中的视频再现处理造成影响。
此外，在上述文献3中，仅能显示用于表示延迟的图示符号。
另外，被称为电子看板、电子广告板的数字标牌装置等广告输出装置能经通信网络或存储介质随时变更广告内容，从而能提供最新数据，并且因为还能显示动画数据，故作为提高视听者关注度的广告介质而普及。
在上述文献1中，经通信单元或2维码来向便携终端装置传送广告数据，对便携终端装置提供的广告未必是顾客感兴趣的广告内容，另外，在再现数据途中顾客看到关注的数据时，若进行该再现请求操作，则因为跳转到该链接目的地的数据并显示，因此中断此前的再现，由于突然切换到其他数据，会中断叙事性(讲故事)。另外，存在看漏重要数据或看错数据的可能性，并且还存在该切换前后的广告内容与链接目的地的内容混同的可能性。
发明内容
本发明的第1课题是能在输出内容途中，对应于用户动作(点击或反应)，在适当定时执行对应于该用户动作的处理。
一种输出内容的内容输出装置，其特征在于，具备：
输出控制部，其使所述内容中的输出内容依次变化后输出；
内容存储部，其将所述内容的各输出内容与其各个输出定时对应起来进行存储；
检测控制部，其在所述内容的输出内容依次变化后输出的途中，且在任意的定时有用户指示时，检测有该指示的指示定时的时刻；
存储控制单元，其使指示存储部将所述检测出的指示定时时刻与所述内容对应起来进行存储；
确定控制部，其在所述内容的输出内容的一连串的输出后的预定时刻，判别在所述指示存储部中是否存储有指示定时时刻，在判别为有存储时，读出存储在该指示存储部中的指示定时时刻，并确定在该指示定时时刻输出的所述内容的输出内容；以及
处理执行控制部，其执行与所述确定的输出内容对应的处理。
一种输出内容的内容输出装置，其特征在于，具备：
输出控制部，其使所述内容中的输出内容依次变化后输出；
内容存储部，其将所述内容的各输出内容与其各个输出定时对应起来进行存储；
检测控制部，其在所述内容的输出内容依次变化后输出的途中，判别在任意的定时是否有用户的反应，有反应时，检测出该反应定时的时刻；
存储控制单元，其使反应存储部将所述检测出的反应定时时刻与所述内容对应起来进行存储；
确定控制部，其在所述内容的输出内容的一连串的输出后的预定时刻，判别在所述反应存储部中是否存储有反应定时时刻，在判别为有存储时，读出存储在该反应存储部中的反应定时时刻，并确定在该反应定时时刻输出的所述内容的输出内容；以及
处理执行控制部，其执行与所述确定的输出内容对应的处理。
附图说明
图1是表示能使用作为输出控制装置应用的平板终端装置的通信系统的框图。
图2是表示平板终端装置100的基本构成要素的框图。
图3A、图3B是用于说明输出信息存储器130c的图。
图4A、图4B、图4C是用于说明指示信息存储器130d的图。
图5是用于说明响应Web浏览器功能的启动开始执行的动作的流程图。
图6是接着图5动作的流程图。
图7A是表示包含数字标牌装置的通信系统的框图。
图7B是广告数据X的例子。
图7C是广告数据Y的例子。
图8是表示数字标牌装置1的基本构成要素的框图。
图9A是用于说明输出信息存储器13c的图。
图9B是用于说明反应信息存储器13d的图。
图10是用于说明通电时开始执行的数字标牌装置1的动作(第1实施方式的特征动作)的流程图。
图11是接着图10动作的流程图。
图12是用于详述反应定时检测处理(图10的步骤A7)的流程图。
图13A是表示广告数据的显示例的图。
图13B是用于说明输出信息存储器13c的图。
图13C是用于说明反应信息存储器13d的图。
图14是用于说明通电时开始执行的数字标牌装置1的动作(第2实施方式的特征动作)的流程图。
图15是用于详述凝视检测处理(图14的步骤B4)的流程图。
具体实施方式
以下，参照附图，详细地说明本发明的实施方式。
(第1实施方式)
首先，参照图1-图6，说明本发明的第1实施方式。
本实施方式示例了作为输出控制装置应用于便携终端装置(平板终端)的情况，图1是表示能使用该平板终端装置的通信系统的框图。
输出控制装置(平板终端装置)100作为其基本功能除具备文章生成功能、计时功能、触摸输入功能、无线通信功能、因特网连接功能、Web浏览器功能外，还具备电视/收音机广播接收功能等。计时功能计时(年月日时分秒毫秒)作为当前时刻，或测量计时器时间。
平板终端装置100能输出各种内容(例如，Web页面数据、电视广播数据、收音机广播数据、动画数据、静止图像群数据、语音数据等)。并且，平板终端装置100将从内容传送装置(服务器装置)2经通信网(无线通信网3、因特网4)接收到的Web页面显示在自己的显示画面上，或将从电视台经电视天线5接收到的电视广播节目的影像数据显示在显示画面上，或从扬声器输出从广播台经收音机天线6接收到的收音机节目的语音数据，或进一步将从可自由拆装的可移动型存储器(记录介质)从外部提供的动画数据、静止图像群数据、电子书籍数据等显示在显示画面上。
另外，平板终端装置100并不限于接收地面波数字广播(电视/收音机节目)的情况，也能经因特网4下载接收。
图2是表示平板终端装置100的基本构成要素的框图。
成为平板终端装置100的核心的CPU11是通过来自电源部(二次电池)120的电力供给来动作，并根据存储部130内的各种程序来控制该平板终端装置100的整体动作的中央运算处理装置。存储部130例如是具有ROM、闪存等的结构，具有用于存储根据图5及图6所示动作顺序来实现本实施方式的程序的程序存储器130a、暂存在该平板终端装置100中成为必要的各种数据(计时时刻、计时器测量时间、标记等)的工作存储器130b、后述的输出信息存储器130c及指示信息存储器130d。
另外，存储部130例如也可以是包含SD卡、IC卡等可自由拆装的可移动型存储器(记录介质)的结构，虽未图示，但在经通信功能与网络连接的状态下，也可包含预定服务器装置侧的存储区域。
CPU11与键操作部140、触摸显示部150、通信部160、电视/收音机广播接收部170、鼠标操作部180、语音输出部190连接作为其输入输出装置，CPU11按照输入输出程序来控制各输入输出装置。键操作部140具备开/关电源的电源键等按钮式键，因此能位置键盘(省略图示)。
触摸显示部150构成用于显示作为软件密钥的功能名，或显示各种图标，或检测触摸操作的位置后输入其坐标数据的触摸屏。
通信部160是能进行高速大容量通信的通信模块，例如是具有无线LAN(Local Area Network，局域网)等的结构，将经因特网4接收到的Web页面显示在触摸显示部(显示画面)150上。电视/收音机广播接收部170接收电视广播信号或收音机广播信号，将其影像信号提供给触摸显示部150来显示，将语音信号提供给语音输出部190来输出语音。鼠标操作部180是作为定点装置的鼠标，进行在显示画面上移动鼠标光标的操作或点击操作等。
图3A、图3B是用于说明输出信息存储器130c的图。
图3A是表示依次读入用于构成从内容传送装置2经通信网(无线通信网3、因特网4)接收到的内容(Web页面数据)的各个数据(例如，图像等)，并且一边整理该网页整体的体裁一边在显示画面上配置显示各个数据的状态的图。图示的例子表示配置显示Web页面上的图像A及图像B的状态的显示画面，图3B是表示此时的输出信息存储器130c的内容的图。
输出信息存储器130c是对每个依次输出用于构成内容的各个数据暂存其输出定时等作为与该输出相关的状况(输出信息)的存储器，如图3B所示，具有“数据序号”、“数据名”、“数据尺寸”、“数据的粘贴位置”、“链接目的地”、“数据读入时的时间戳”等各项目。“数据序号”表示每次输出Web页面上的各个数据时所生成的一连串的序号(数据识别信息)，每次逐次输出数据时，更新该序号。“数据名”是“图像A”、“图像B”等数据识别信息，如图3A所示，表示最初配置显示图像A、接着配置显示图像B的情况。“数据尺寸”表示显示画面上的数据的大小(横宽及纵宽)，如图3A所示，表示图像A为200×100点尺寸，图像B为900×80点尺寸。
“数据的粘贴位置”在将显示画面的左上角部作为原点的平面坐标系中，将数据的左上角部的位置设为其粘贴位置，如图3A所示，图像A的粘贴位置表示X坐标值为50点，Y坐标值为500点，图像B的粘贴位置表示X坐标值为50点，Y坐标值为800点。“链接目的地”是表示针对该数据的处理内容的信息(处理识别信息)，图示的例子表示在内容内的图像A或图像B中有链接目的地的URL(Uniform Resource Locator，统一资源定位符)。
“数据读入时的时间戳”是读入数据时通过计时功能得到的时刻，是表示数据的输出定时的信息，即将数据读入时设为数据输出时的信息。在图示的例子中，作为“数据读入时的时间戳(输出定时)”，在图像A的情况下，表示“2013.03.26.09：47：50：000(年月日时分秒毫秒)”，在图像B的情况下，表示“2013.03.26.09：47：51：500(年月日时分秒毫秒)”。
图4A-图4C是用于说明指示信息存储器130d的图。
图4A表示Web页面读入中的画面，例如表示配置显示图3A所示的图像A时的显示画面，表示对输出的数据(图像A)执行了预定的用户指示的情况。这里，在第1实施方式中，预定的用户指示表示在内容的输出途中，为了跳转到链接目的地，选择指定有该链接目的地的数据的操作(跳转指示操作)，可以是键操作部140的键操作、触摸显示部150的触摸操作(轻敲操作)、鼠标操作部180的点击操作中的某个，但图示的例子表示进行了触摸操作(轻敲操作)的情况。
图4B表示Web页面读入完成时(完成全部数据的显示时)的画面，例如表示接着图像A的显示配置显示图像B时的显示画面。此时，在读入途中的画面和完成全部数据的读入时的画面中，图像A的显示位置不同。即，在Web页面的读入中，根据完成了读入的数据进行配置显示，因此在读入途中和完成全部数据的读入时，图像A的显示位置不同。
因此，如图4A所示，若对任意的数据(图像A)进行用户指示操作(跳转指示操作)，则在执行该跳转处理前进行数据的读入和其显示的结果，成为如图4B所示的画面内容，用户指示偏离数据(图像A)而识别为对数据(图像B)进行指示，从而有时向错误的链接目的地跳转。
在第1实施方式中，在读入内容的途中进行了预定的用户指示时，将该指示状况暂存在指示信息存储器130d中。该指示信息存储器130d是在依次输出用于构成内容的各个数据的输出途中，对该输出的数据进行了预定的用户指示(跳转指示操作)时，暂存此时的时刻(指示定时)和进行了该指示的位置(指示位置)作为该指示状况的存储器，如图4C所示，具有“指示序号”、“指示定时”、“指示位置”等各项目。
“指示序号”表示在内容的输出途中，对每个用户指示生成的一连串的序号(指示识别信息)，“指示定时”表示针对输出的数据进行了跳转指示操作时由计时功能得到的时刻(年月日时分秒毫秒)。“指示位置”表示在数据的输出途中进行了预定的用户指示的显示画面上的位置，图示的例子表示X坐标值为80点，Y坐标值为700点。
使用这样构成的指示信息存储器130d，CPU11对照指示信息存储器130d内的“指示定时’”、“指示位置”与输出信息存储器130c内的“数据尺寸”、“数据的粘贴位置”、“数据读入时的时间戳”，由此确定在“指示定时”的时刻输出的数据。
即，对照表示在数据的输出途中进行了预定的用户指示的定时的“指示定时”与表示输出了数据的定时的“数据读入时的时间戳”，若存在在“指示定时”的时刻输出的数据，则继续对照“指示位置”与“数据尺寸”、“数据的粘贴位置”，若存在向该“指示位置”输出的数据，则确定该数据。然后，CPU11确定对应于该确定的数据的处理内容即输出信息存储器130c内的“链接目的地”作为用户指示的处理内容(指示处理内容)。
另外，在第1实施方式中，与指示操作对应的处理的执行定时，(1)是内容的依次输出结束之后；(2)是从指示定时经过预定时间时中的某个，通过用户操作能从该执行定时(1)、(2)中事先任意地进行选择。执行定时(1)表示内容的结束时刻，在该终止时刻执行对应于指示处理内容的处理。执行定时(2)表示从上述的指示定时经过了预定时间(例如，5秒)的时刻，在该经过时执行对应于指示处理内容的处理。另外，可以通过用户操作任意地变更用于决定该执行定时(2)的预定时间。
接着，参照图5及图6所示的流程图，说明第1实施方式的输出控制装置(平板终端装置)100的动作概念。这里，将在这些流程图中记述的各功能以可读取的程序代码的形式进行存储，并依次执行遵照该程序代码的动作。另外，还能依次执行遵照经网络等传输介质传输的上述程序代码的动作。这在后述的其他实施方式中也一样，除记录介质外，还能利用经传输介质从外部提供的程序/数据来执行本实施方式特有的动作。此外，图5及图6是表示平板终端装置100的整体动作中的、第1实施方式的特征部分的动作概要的流程图，当从该图5及图6的流程中退出时，返回到整体动作的主流程(省略图示)。
图5及图6是用于说明响应Web浏览器功能的启动而开始执行的动作(本实施方式的特征动作)的流程图。
首先，CPU11从内容传送装置(服务器装置)2经通信网(无线通信网3、因特网4)依次接收取得输出对象的内容(Web页面)(图5的步骤S1)，并且开始依次读入用于构成该内容(Web页面)的各个数据后配置显示在触摸显示部150的显示画面上的动作(步骤S2)。之后，对配置显示的每个数据生成与其输出相关的状况(输出信息)，暂存在输出信息存储器130c中(步骤S3)。
此时，CPU11通过对“数据名”、“数据尺寸”、“数据的粘贴位置”、“链接目的地”、“数据读入时的时间戳”等每个项目准备其各数据来生成输出信息。例如，在图3(1)的情况下，作为“数据名”检测出“图像A”，作为“数据尺寸”检测出“200×100点尺寸”，作为“数据的粘贴位置”检测出“X坐标值为50点、Y坐标值为500点”，作为“链接目的地”检测出“URL信息”，作为“数据读入时的时间戳”检测出“2013.03.26.09：47：50：000(年月日时分秒毫秒)”来生成输出信息，更新“数据序号”后，暂存在输出信息存储器130c中。
之后，调查是否读入了全部的输出对象的内容(Web页面)直到其最后为止(是否完成读入)(步骤S4)，若未完成读入(步骤S4中的否)，即为读入途中，则调查是否对有链接目的地的显示画面上的数据进行了预定的用户指示(跳转指示操作)(步骤S5)。若未执行跳转指示操作(步骤S5中的否)，则返回上述步骤S1，进行上述动作。
另外，未进行跳转指示操作(步骤S5中的否)地完成了Web页面的读入时(步骤S4中的是)，调查是否进行了关闭Web页面的操作(步骤S7)，或调查是否进行了其他指示操作(例如，网页的保存指示操作或打印指示操作等)(步骤S8)。这里，进行了其他指示操作时(步骤S8中的是)，作为与该操作对应的处理执行保存处理或打印处理(步骤S9)等后，返回到步骤S7。
另一方面，在完成Web页面的读入前(步骤S4中的否)进行了跳转指示操作时(步骤S5中的是)，调查是否是该指示的等待执行状态，即是否到达该指示的执行定时前(步骤S6)。这里，在开始内容的输出后最初进行了跳转指示操作的情况下，因为不是该指示的等待执行状态(步骤S6中的否)，所以转移到图6的步骤S10，取得显示画面上的坐标位置作为指示位置，并且取得通过计时功能得到的时刻(年月日时分秒毫秒)作为指示定时。之后，进行将该指示位置和指示定时暂存在指示信息存储器130d中的处理(步骤S11)。
接着，确定指示的执行定时(步骤S12)。此时，调查事先由用户操作任意选择的执行定时是否是从指示定时经过了预定时间(例如，5秒)的时，即是否是执行定时(2)(步骤S13)，若是内容的依次输出结束之后，即执行定时(1)(步骤S13中的否)，则直接转移到步骤S15，但若是执行定时(2)(步骤S13中的是)，则在开始了计时器(省略图示)的测量动作(步骤S14)之后，转移到步骤S15，判别是否到达了该执行定时。
这里，在用户选择了执行定时(1)的情况下，调查是否检测出了内容的依次输出的结束，在用户选择了执行定时(2)的情况下，调查该值是否达到了预定时间(例如，5秒)。若未达到指示的执行定时(步骤S15中的否)，则返回到图5的步骤S1，若检测出达到了执行定时(步骤S15中的是)，则对照输出信息存储器130c与指示信息存储器130d的内容来确定用户指示的数据，并且进行用于确定该指示处理内容的处理(步骤S16)。
即，对照指示信息存储器130d内的“指定定时”、“指示位置”与输出信息存储器130c内的“数据尺寸”、“数据的粘贴位置”、“数据读入时的时间戳”，来确定在“指定定时”的时刻输出且输出到该指示位置的数据。之后，确定与该确定的数据对应起来的输出信息存储器130c内的“链接目的地”作为指示处理内容。执行读出由此确定的指示处理内容的“链接目的地”而跳转到其URL所示的链接目的地的处理(步骤A17)后，退出图5及图6的流程，转移到跳转目的地的处理。
如上所述，在第1实施方式中，在依次输出用于构成内容的各个数据的输出途中对该输出的数据进行了预定的用户指示时，CPU11检测出该指示定时，存储在指示信息存储器130d中，将比存储在该指示信息存储器130d中的指示定时晚的预定定时确定为与该用户指示对应的处理的执行定时后执行该处理，因此即使在内容的输出途中执行了预定的用户指示的情况下，也能在适当的定时执行对应于该用户指示的处理，内容输出变得圆滑。
作为与指示处理内容对应的处理的执行定时，即使内容的依次输出结束后，或从该指定定时经过了预定时间后，在内容的输出途中进行了预定的用户指示的情况下，也不会出现因数据的突然切换看漏或看错重要部分等的情况，内容输出变得圆滑。
CPU11确定在内容的输出途中依次输出的已输出数据中的、在指示定时时刻输出的指示信息存储器130d内的数据，并且将与该确定数据对应的处理内容确定为指示处理内容后执行该处理，因此能从指示定时确定指示处理内容。
具有输出信息存储器130c，其对应于构成内容的各个数据存储“数据读入时的时间戳”作为其输出定时，CPU11通过对照输出信息存储器130c内的“数据读入时的时间戳(输出定时)”与指示信息存储器130d内的指示定时来确定在该指示定时时刻输出的数据，因此能从该指示定时准确地确定指示的数据。
输出信息存储器130c除对应于构成内容的各个数据存储该输出定时外，还存储其处理内容，CPU11通过对照输出信息存储器130c内的输出定时与指示信息存储器130d内的指示定时，来确定在该指示定时时刻输出的数据，并且确定对应于该确定数据的处理内容作为指示处理内容后执行该处理，因此能容易且准确地进行确定。
CPU11在每次依次输出用于构成内容的各个数据时，对应于输出的数据生成该输出定时及处理内容作为输出信息，而存储在输出信息存储器130c中，因此即使不事先准备每个内容的输出信息，也能在输出内容时生成该输出信息。
内容是由经通信网(无线通信网3、因特网4的存储部13)接收到的多个数据构成的Web页面数据，CPU11每次将依次接收到的构成Web页面的各个数据依次配置在显示画面上时，对应于配置显示的数据生成该输出定时及处理内容作为输出信息而存储在输出信息存储器130c中，因此仅接收Web页面就能生成输出信息。
CPU11根据是否进行了用于指示依次显示构成内容的各个数据的显示画面上的任意位置的用户操作，来判断是否进行了预定的用户指示的结果，当进行了该用户指示时，在检测出该指示定时及指示位置后存储在指示信息存储器130d中的状态下，参照该指示信息存储器130d，确定用该指示定时及指示位置显示的数据，并且确定对应于该确定数据的处理内容来执行该处理，因此即使在指示定时的时刻输出多个数据，也能与指示的数据一起确切地确定该处理内容。
此外，在上述第1实施方式中，未特别提及输出内容途中的用户指示的次数，但在进行了多次预定的用户指示时，也可以检测出每个该指示的指示定时，存储在指示信息存储器130d中。此时，参照指示信息存储器130d的结果，若存储了多个指示定时，则只要在每个指示定时分别确定对应于该指示处理内容的处理的执行定时而依次执行该处理即可。由此，进行了多个用户指示的情况下，也能够对应。
另外，在指示信息存储器130d中存储有多个指示定时的情况下，不限于对应于该用户指示地依次执行多个处理的情况，例如，也可从通过用户操作从多个指示定时中任意选择指定的指示定时来确定对应于该指示处理内容的处理的执行定时，执行该处理。由此，例如即使在错误地进行了多个用户指示的情况下，也能执行用户期望的处理，另外，即使是正确的用户指示，也能优先执行重要度高的处理。
另外，在上述第1实施方式中，作为对应于指示处理内容的处理的执行定时，将表示结束依次输出内容之后的执行定时设为(1)或将表示从指示定时经过了预定时间的执行定时设为(2)，但不限于此，例如也可是划分检测内容的时，或从开始输出内容起经过每个预定时间。另外，在上述第1实施方式中，能通过用户操作事先从执行定时(1)、(2)中任意选择，但例如也可对每个内容种类固定执行定时。
另外，在上述第1实施方式中，作为内容示例了Web页面，但不限于此，例如也可是再现数码相机摄影的摄影图像(动态图像)数据作为内容的情况。此时，也可将表示从开始再现内容时起至对应于构成该内容的各个数据(帧)再现该数据为止的再现经过时间的输出定时存储在输出信息存储器130c中。此时，也可通过用户操作来指示处理内容(例如，跳转或快进等)。这样，即使内容是摄影图像(动态图像)数据，也能同样适用。
并且，作为摄影图像数据，不限于动态图像数据，也可是多个静止图像(静止图像群)数据，也可以是幻灯片显示(依次切换显示)该多个静止图像的情况。此时，也可在每隔一定时间自动切换显示图像的幻灯片中，将向图像的剩余张数乘以切换时间而得到的值作为输出定时存储在输出信息存储器130c中。另外，此时，也可通过用户操作来指示处理内容(例如，跳转或快进等)。这样，即使在内容以幻灯片形式再现显示摄影图像(静止图像)数据的情况下也能同样适用。
(第2实施方式)
首先，参照图7A-图12来说明本发明的第2实施方式。
本实施方式示例了作为广告输出装置应用于数字标牌装置的情况，图7A是表示包含该数字标牌装置的通信系统的框图。
广告输出装置(数字标牌装置)1例如被设置在大型商店内的入口附近、休息场所附近、出口附近等顾客集中的场所，能输出各种广告数据(例如，Web页面数据、电视广播数据、动画数据、静止图像群数据、语音数据等)，因此作为其基本功能，除具备广告数据输出功能、计时功能、触摸输入功能、通信功能、摄像功能外，还具备图像解析功能、语音解析功能等。
广告数据输出功能是如下功能，对视听者显示输出或语音输出从内容配送装置(服务器装置)2经通信网3，例如因特网、LAN(Local Area Network，局域网)等接收到的广告数据，或经可自由拆装的可移动型存储器(记录介质)从外部提供的广告数据。另外，在本实施方式中，所谓视听者是到商店的顾客，未必是视听广告显示和广告语音的顾客，也可以是仅看广告显示的顾客、仅听广告语音的顾客。计时功能是计时(年月日时分秒毫秒)作为当前时刻或测量计时器时间的功能。另外，其他功能在后面详述。
广告数据是由多个页面(画面)构成的一连串的数据，图7B例子的广告数据X是具有1页面的数据X1、2页面的数据X2、……、6页面的数据X6的结构，数字标牌装置1以1页面(1画面)单位依次输出用于构成该广告X的各个数据X1、X2、……、X6，并且在输出最终页面X6之后，返回到其开头页面X1的输出。如上所述地，依次输出各页面(画面)的数据，在输出一轮后循环地依次切换输出各页面。同样，图7C例子的广告数据Y是具有1页面的数据Y1、2页面的数据Y2、……、5页面的数据Y5的结构，数字标牌装置1以1页面单位依次输出构成该广告Y的各个数据Y1、Y2、……、Y5，并且循环地依次切换输出。
图8是表示数字标牌装置1的基本构成要素的框图。
成为数字标牌装置1的核心的CPU11是通过来自电源部12的电力供给来动作，且对应于存储部13内的各种程序控制该数字标牌装置1的整体动作的中央运算处理装置。存储部13例如是具有ROM、闪存等的结构，具有存储对应于图10-图12所示的动作步骤来实现本实施方式的程序的程序存储器13a、暂存成为在该数字标牌装置1中成为必要的各种数据(计时时刻、计时器测量时间、标识等)的工作存储器13b、后述的输出信息存储器13c及反应信息存储器13d等。另外，存储部13例如也可构成为包含SD卡、IC卡等可自由拆装的可移动型存储器(记录介质)，虽未图示，但在经通信功能连接于通信网3的状态下，也可包含预定服务器装置侧的存储区域。
作为其输入输出装置，在CPU11上连接有触摸显示部14、键操作部15、体感传感器部16、语音输入输出部17、通信部18、摄像部19、面部辨别部20等，CPU11根据输入输出程序来控制各输入输出装置。触摸显示部14显示广告数据或显示作为软件密钥的功能名，构成检测出被触摸操作的位置后输入其坐标数据的触摸屏(触摸输入功能)。键操作部15具备开/关电源的电源键等按钮式键。
体感传感器部16被配置在触摸显示部14的画面(广告画面)侧，是感知在广告画面近旁是否有视听者(顾客)的人体检测用红外线传感器，若检测出有顾客，则CPU11驱动语音输入输出部17和摄像部19，若检测出无顾客，则停止语音输入输出部17及摄像部19的驱动。语音输入输出部17具有麦克风、扬声器，在体感传感器部16检测出顾客的期间，语音输出广告数据或输入来自顾客的语音，从而面向广告画面侧配置。CPU11通过解析从语音输入输出部17输入的顾客的语音，来解析是否包含后述的预定语音。
通信部18是能进行从内容传送装置2经通信网3接收广告数据的高速大容量通信的通信模块(通信功能)。摄像部19被配置在广告画面侧，是在体感传感器部16检测出顾客的期间，以看该广告画面的顾客的面部为中心摄像的数码相机(摄像功能)。面部辨别部20具有解析由摄像部19摄像的顾客的面部图像，并检测出该面部表情的图像解析功能，根据面部表情变化来辨别该顾客是否对广告表示出兴趣。
图9A是用于说明输出信息存储器13c的图，图9B是用于说明反应信息存储器13d的图。
输出信息存储器13c是在每次向广告画面依次输出用于构成广告的各个数据时，暂存其输出定时等作为涉及该输出的状况(输出信息)的存储器，如图9A所示，具有“数据序号”、“数据名”、“数据读入时的时间戳”、‘链接目的地“等各项目。
“数据序号”表示每次输出各个数据时生成的一连串序号(识别存储器内的数据的信息)，每当依次输出数据时，更新该“数据序号”的值。“数据名”是“图像X1”、“图像X2”等的数据识别信息。“数据读入时的时间戳”是读入输出对象数据时由计时功能得到的时刻。在图示的例子中，“数据读入时的时间戳”在图像X1的情况下，表示是“2013.03.26.09：47：50：000(年月日时分秒毫秒)”，在图像X2的情况下，表示是“2013.03.26.09：47：55：500(年月日时分秒毫秒)”。“链接目的地”表示对该数据的详细数据(例如，商品说明信息)或链接目的地的URL(Uniform Resource Locator，统一资源定位符)。
反应信息存储器13d是在输出广告数据的途中，暂存将检测出了顾客对广告有反应时的该定时作为反应定时的存储器，如图9B所示，具有“数据序号”、“数据名”、“反应定时”等各项目。“数据序号”是识别存储器内的数据的一连串的序号。“反应定时”是在输出广告数据的途中，当检测出顾客发出特定词语时，或检测出顾客的面部表情是表示对广告感兴趣的表情时，作为顾客对广告有反应，将在检测出该反应时由计时功能得到的时刻设为反应定时。在图示的例子中，作为“反应定时”，在图像X1的情况下，表示是“2013.03.26.09：47：52：000(年月日时分秒毫秒)”。
这里，所谓顾客的特定词语，例如是“想买”、“好”、“真棒”、“好吃”等肯定的词语，在视听广告画面时，若发出包含这种词语的语音，设顾客对广告有反应。此外，不限于肯定的词语，也可将对广告的否定词语作为顾客的反应。另外，所谓顾客的面部表情表示对广告感兴趣的表情例如是正在看广告画面的顾客不改变其视线方向，凝视一点固定时间以上的情况，在视听广告画面时，若变化为这种表情，设顾客对广告有反应。此外，作为面部表情，不限于凝视一点的情况，也可以是睁大眼睛固定时间以上(吃惊)或张嘴(笑脸)等。
这样，CPU11在检测出顾客有反应时的定时作为第1定时暂存在反应信息存储器13d中之后，检测出比该“反应定时”晚的定时，例如依次输出一轮由多个页面构成的一系列广告数据后的定时(从最终页面返回开头页面的定时)作为第2定时(输出定时)，在该第2定时(输出定时)，确定在反应定时(第1定时)输出的数据，进行涉及该数据的输出控制。此时，直接重新输出确定的数据，或重新输出链接于该数据的详细数据。
下面，参照图10-图12所示的流程图来说明第2实施方式中的数字标牌装置1的动作概念。这里，这些流程图中记述的各功能以可读取的程序代码的形式存储，根据该程序代码，依次执行动作。另外，还能根据经网络等传输介质传输的上述程序代码来依次执行动作。这在后述的其他实施方式中也一样，除记录介质外，还能利用经传输介质从外部提供的程序/数据，执行本实施方式特有的动作。
图10及图11是用于说明通电时开始执行的数字标牌装置1的动作(第2实施方式的特征动作)的流程图。
首先，CPU11变为能从内容传送装置(服务器装置)2经通信网3接收广告数据的状态(图10的步骤A1)，若接收广告数据，则在进行该接收处理并存储管理为输出对象之后，调查是否由体感传感器部16感知到顾客，即顾客是否在广告画面近旁(步骤A2)。若顾客不在(步骤A2中的否)，在暂停当前正输出中的数据的输出(步骤A9)之后，返回到步骤A1，但检测出顾客在广告画面近旁时(步骤A2中的是)，为了对每1页面(1画面)循环地依次切换输出多个页面(画面)的广告数据，读入该1页面(1画面)的数据(步骤A3)。之后，调查是否依次输出一轮，即调查是否是从最终页面(画面)转移到读入开头页面的定时(步骤A4)。
若未依次输出一轮(步骤A4中的否)，则将该读入数据配置显示在触摸显示部14的广告画面上，并且若向该数据附加有语音，则从语音输入输出部17输出该语音数据(步骤A5)。之后，生成“数据名”、“链接目的地”、“数据读入时的时间戳”作为输出的数据的信息，暂存在输出信息存储器13c中(步骤A6)之后，转移到检测出顾客反应的反应定时检测处理(步骤A7)。
图12是用于详述反应定时检测处理(图10的步骤A7)的流程图。
首先，CPU11调查是否从语音输入输出部17有语音输入(步骤A71)，若有语音输入(步骤A71中的是)，则解析该语音，例如调查是否是包含“想买”、“好吃”等肯定词语的预定语音(步骤A73)，若不是预定语音(步骤A73中的否)，则转移到下一步骤A74。若是预定语音(步骤A73中的是)，则判断为顾客对广告有反应，转移到下一步骤A77，进行将在该反应时由计时功能得到的时刻作为反应定时(第1定时)暂存在反应信息存储器13d中的处理。
若无语音输入(步骤A71中的否)，则转移到下一步骤A74，取得由摄像部19摄像的顾客的面部图像。之后，面部辨别部20解析摄像到的图像(步骤A75)。其结果，调查顾客的面部表情是否是表示对广告感兴趣的表情(例如，凝视、吃惊或笑脸)(步骤A76)，若是顾客未表示兴趣的面部表情(步骤A76中的否)，则从图12的流程退出，但若是表示兴趣的面部表情(步骤A76中的是)，则判断为顾客对广告有反应，转移到下一步骤A77，进行将该反应时由计时功能得到的时刻作为反应定时(第1定时)暂存在反应信息存储器13d中的处理。
若这种反应定时检测处理(图4的步骤A7)结束，则调查是否是向下一页面(下一画面)的切换定时(步骤A8)，返回到反应定时检测处理(步骤A7)直到达切换定时为止，当达到切换定时时(步骤A8中的是)，返回到最初的步骤A1。在如此对每1月面依次切换输出广告数据的状态下，若检测出该广告输出了一轮(步骤A4中的是)，则参照反应信息存储器13d，调查是否暂存有反应定时(步骤A10)，若未存储反应定时(步骤A10中的否)，则返回到最初的步骤A1。
若暂存有反应定时(步骤A10中的是)，则转移到图11的流程，通过对照反应信息存储器13d的内容与输出信息存储器13c的内容(步骤A11)，确定在反应定时输出的数据(步骤A12)。在图9A、图9B的例子中，“数据读入时的时间戳”在图像X1中为“……50：000”，在图像X2中为“……55：500”，“反应定时”为“……52：000”，因此确定图像X1的数据作为在反应定时输出的数据。
若如上所述地确定数据，则参照输出信息存储器13c，调查是否将“链接目的地”关联于该确定数据(步骤A13)，若未关联“链接目的地”(步骤A13中的否)，则进行直接再输出该确定数据的处理(步骤A15)。另外，若关联了“链接目的地”(步骤A13中的是)，则在进行跳转到该链接目的地的处理(步骤A14)之后，执行从该链接目的地读出详细数据(商品说明书等)后，进行重新输出的处理(步骤A15)。
在该状态下，调查有无顾客的指示操作(对接触画面的触摸操作)(步骤A16)，若未进行指示操作(步骤A16中的否)，则转移到下一步骤A18，当进行了指示操作时(步骤A16中的是)，在进行了对应于该指示的处理(步骤A17)之后，转移到步骤A18。该步骤A18调查是否经过了固定的输出时间，返回到步骤A15直到经过该输出时间为止，当检测出经过了输出时间时(步骤A18中的是)，返回到图10的最初步骤A1直到关闭电源为止(步骤A19)，下面，重复上述动作。
如上所述，第2实施方式中的数字标牌装置1检测出输出广告途中的视听者(顾客)反应时的定时作为第1定时(反应定时)，并且检测出比该反应定时晚的预定定时作为第2定时(输出定时)，并在达到该输出定时时，确定在反应定时输出的数据，进行涉及该数据的输出控制，因此能在依次输出用于构成广告的各个数据的途中，在适当定时控制用于输出顾客感兴趣的数据。其结果，能防止广告输出中的数据的突然切换，能保持数据的一连串的流动，能防止顾客看漏数据或看错数据，能提高广告主侧(店侧)的宣传效果。
CPU11通过对照对应于构成广告的各个数据地存储其输出信息的输出信息存储器13c的内容与存储顾客反应时的定时(反应定时)的反应信息存储器13d的内容，来确定在反应定时输出的数据，因此能从已输出的数据中容易确定顾客有反应的数据。
从摄像部19摄像到的顾客的图像变化辨别顾客反应来检测出反应定时，所以不必要对顾客要求特别的操作，就能从摄像图像中准确检测出顾客的反应。
解析摄像到的顾客的图像，从顾客的面部表情变化中辨别视听者的反应，因此能更准确地检测出顾客的反应。
从由语音输入输出部17输入的语音中辨别顾客的反应来检测出反应定时，因此不必要对顾客要求特别的操作，就能从自然发出的顾客语音中准确地检测出顾客的反应。
检测出依次输出了一轮用于构成广告的各个数据后的定时(从最终页面转移到开头页面的定时)作为第2定时(输出定时)，因此在输出广告中不会突然切换数据，顾客能在视听一系列数据后视听感兴趣的数据。
当输出定时再次输出在反应定时输出的数据，因此顾客能再次确认感兴趣的数据。
在将链接数据关联于在反应定时输出的数据的情况下，重新取得并输出该链接数据，因此例如在对某个商品有反应的情况下，能切换到该商品详细说明等链接数据的输出。
在进行涉及在反应定时输出的数据的输出控制的状态下进行了顾客的指示操作时，进行对应于该指示操作的处理，因此例如还能在此处进行商品购买画面上的购买申请。
在上述第2实施方式中，从由摄像部19摄像的顾客的图像变化中辨别视听者的反应来检测出反应定时，或从输入的语音辨别视听者的反应来检测反应定时，但也可通过顾客的预定输入操作来检测反应定时。例如，也可在对广告感兴趣的顾客不带有特别目的地无意碰触到广告画面(触摸画面)，或为了输入指示指令而带有特别目的地操作预定的触摸键或按钮的情况下，可检测出此时的时刻作为反应定时，通过这种输入操作也能检测出反应定时。
在上述第2实施方式中，检测出依次输出一轮用于构成广告的各个数据后的定时作为第2定时(输出定时)，但也可检出从开始检测在广告画面近旁的顾客起到依次输出一轮数据后的定时作为第2定时(输出定时)。例如，将顾客开始看广告的数据作为起点，可检测从该起点起依次输出一轮数据后的定时作为输出定时。此时，只要解析由摄像部19摄像的图像，并将顾客的面部面向广告画面时辨别为开始看广告时即可。另外，也可在再次输出顾客开始看广告的数据之后，输出在反应定时输出的数据。
如上所述地在将从顾客开始看广告时起依次输出一轮数据后的定时设为输出定时的情况下，只要局部变更图10的流程图即可。例如，在图10的步骤A2判断为有体感时，摄像顾客的面部，解析该摄像图像之后，判别该面部是否开始面向广告画面，暂存在开始面向时输出的数据的识别信息，在图10的步骤A2中，只要以该数据为起点，判别是否依次输出了一轮数据即可。
如上所述地通过将开始看广告的数据作为起点输出一轮后的定时设为输出定时，顾客能在视听全部数据之后，视听感兴趣的数据。
在上述第2实施方式中，检测出依次输出一轮数据后的定时作为输出定时，但也可检测出从顾客能视听广告输出的状态变化为不能视听的状态的定时作为输出定时。例如，也可检测出顾客离开数字标牌装置1的定时作为输出定时。或者，也可检测出远远地转离眼睛使视线面向广告画面外侧的定时作为输出定时。此时，例如只要解析由摄像部19摄像的图像，根据顾客的面部方向或视线方向，检测出顾客想要离开的定时或远远地转离视线的定时即可。
如上所述地通过将顾客想要离开的定时或眼睛转离的定时设为输出定时，能再次让顾客关注广告。
并且，作为输出顾客有反应的数据的输出定时，也可是该顾客想要到商店外的定时。例如，也可将涉及视听了设置在商店入口附近等的数字标牌装置的顾客表示兴趣的商品的数据发送给设置在商店出口附近的数字标牌装置并使其输出。此时，例如也可以是在商店内的通信系统中，通过在商店内与顾客所持有的便携终端装置通信，追踪管理顾客识别信息并且追踪管理该顾客的位置，当在辨别出该顾客通过商店出口附近之前时，将涉及顾客表示兴趣的商品的数据发送到出口附近的数字标牌装置并指示其输出。
在上述第2实施方式中，虽未特别言及，但多个视听者在数字标牌装置附近的情况也能同样适用。此时，若检出有多个视听者，则只要对每个该视听者检测出反应定时，并且对每个视听者重复进行涉及在各反应定时输出的数据的输出控制即可。
即，在体感传感器部16检测出多个视听者在数字标牌装置近旁的情况下，CPU11只要对每个视听者检测出其反应时的定时作为第1定时即可。此时，虽然检出多个第1定时，但也可在此时计数视听者的人数，按该人数检测出第1定时。接着，CPU11只要对每个视听者确定在第1定时输出的数据(例如，确定视听者人数的数据)，并对每个视听者重复进行涉及该数据的输出控制即可。
此时，例如也可在输出定时依次切换显示各视听者有反应的数据，或通过在广告画面(触摸画面)上的翻页操作(触摸操作)来依次切换显示。另外，例如，即使在检测出3人作为视听者的人数的情况下，若对广告有反应的是2人，则也可检测出2人的第1定时。并且，不限于计数视听者人数的情况，也可通过检测出视听者相对数字标牌装置的位置(右角、正中等)，确定视听者(谁)，并确定在该视听者有反应的定时输出的数据。
(第3实施方式)
下面，参照图13-图15来说明本发明的第3实施方式。
在上述第2实施方式中，想要检测出顾客对广告有反应的定时，但在该第3实施方式中，想要检测出顾客凝视广告画面的显示位置(广告位置)，在确定输出该凝视位置的数据之后的预定定时(输出定时)进行涉及该凝视位置数据的输出控制。此外，在第2实施方式中，想要依次输出用于构成广告的各个数据，但在第3实施方式中，表示始终输出1画面广告数据的情况，另外，作为输出定时，表示顾客想要离开广告画面的定时。这里，在两个实施方式中向基本或名称相同的部分附加相同符号来表示，省略其说明，并且下面以第3实施方式的特征部分为中心进行说明。
图13A表示在广告画面中配置显示图像A、图像B、图像C、图像D作为1画面数据的状态，即表示在1画面内配置显示多个数据的状态，图13B是表示此时的输出信息存储器13c的内容的图。
第3实施方式的输出信息存储器13c具有“数据序号”、“数据名”、“数据尺寸”、“数据的粘贴位置”、“链接目的地”等各项目。
“数据序号”、“数据名”、“链接目的地”与上述图3的情况一样。“数据尺寸”表示广告画面上的数据大小(横宽及纵宽)，如图13A所示，表示图像A为200×200点尺寸，图像B为200×100点尺寸。“数据的粘贴位置”是在以广告画面的左上角部为原点的平面坐标系中，将数据的左上角部的位置设为其粘贴位置(显示位置)，如图13A所示，图像A的粘贴位置表示X坐标值为50点，Y坐标值为500点，图像B的粘贴位置表示X坐标值为1000点，Y坐标值为900点。
图13C是用于说明反应信息存储器13d的图。
第3实施方式的反应信息存储器13d具有“数据序号”、“凝视数据识别信息”等各项目。“凝视数据识别信息”表示显示在顾客凝视的广告画面上的位置的数据的识别信息(数据名)。这里，CPU11解析由摄像部19摄像的图像，并在顾客的视线方向在固定时间以上未改变地凝视一点的情况下，检测出对应于该视线方向凝视的显示位置(广告位置)作为凝视位置。凝视位置不限于以1点单位检测出位置的情况，也可以10点单位或将广告画面分割成多个后的区域单位来检测出大致位置(区域)。在图示的例子中，表示凝视广告画面上的图像A的情况。
图14是用于说明通电时开始执行的数字标牌装置1的动作(第3实施方式的特征动作)的流程图。
首先，CPU11若读入广告数据(步骤B1)，则生成“数据名”、“数据尺寸”、“数据的粘贴位置”、“链接目的地”作为该广告数据的输出信息，并暂存在输出信息存储器13c中(步骤B2)，并且将该广告数据配置显示在广告画面上及语音输出(步骤B3)。之后，转移到凝视位置检出处理(步骤B4)。
图15是用于详述凝视位置检测处理(图14的步骤B4)的流程图。
首先，CPU11取得由摄像部19摄像的图像(步骤B41)。之后，面部辨别部20解析摄像到的图像(步骤B42)。其结果，调查顾客的视线方向是否在预定时间(例如，2秒)以上未改变地凝视一点(步骤B43)。
若未凝视广告画面(步骤B43中的否)，则从图15的流程退出，若凝视(步骤B43中的是)，则转移到检测广告画面上的凝视位置(广告位置)的处理(步骤B44)。此时，以10点单位或将广告画面分割成多个后的区域单位检测大致位置(区域)。之后，参照输出信息存储器13c的“数据尺寸”、“数据的粘贴位置”，确定在凝视位置显示的数据(步骤B45)，调查该确定的数据是否是预定数据(例如，商品名、商品价格等数据)(步骤B46)。这里，若是预定数据以外的数据，例如与广告对象商品无关的背景图像等数据(步骤B46中的否)，则从图9的流程退出，但若是预定数据(步骤B46中的是)，则进行将该数据的识别信息(数据名)作为“凝视数据识别信息”暂存在反应信息存储器13d中的处理(步骤B47)。之后，从图15的流程中退出。
若这种凝视位置检测处理(图14的步骤B4)结束，则取得由摄像部19摄像的图像(步骤B5)，解析该摄像图像(步骤B6)，调查顾客的状态是否从能视听广告输出的状态变化为不能视听的状态，即通过检测顾客面部方向或视线方向来调查顾客是否想要离开(步骤B7)。若顾客未想要离开，即若是继续看广告画面的状态(步骤B6中的否)，则返回到凝视位置检测处理(步骤B4)，但当离开时(步骤B6中的是)，调查是否将“凝视数据识别信息”暂存在反应信息存储器13d中，即调查对广告有反应的顾客是否想要离开(步骤B8)。
当对广告无反应的顾客想要离开时，因为未存储“凝视数据识别信息”(步骤B8中的否)，因此返回到凝视位置检测处理(步骤B4)，但当对广告有反应的顾客想要离开时，将“凝视数据识别信息”暂存在反应信息存储器13d中(步骤B8中的是)，因此为了唤起该顾客的注意，发生输出效果音(大音响、喊停顾客的语音等)(步骤B9)。之后，参照输出信息存储器13c，根据“凝视数据识别信息”确定该数据(步骤B10)，并且调查是否将“链接目的地”关联于该确定数据(步骤B11)。
其结果，若未关联“链接目的地”(步骤B11中的否)，则进行再次输出该确定数据的处理(步骤B13)，若关联有“链接目的地”(步骤B11中的是)，则在进行跳转到该链接目的地的处理(步骤B12)之后，进行重新输出链接目的地的详细数据的处理(步骤B13)。在该状态下，调查是否经过了预定的输出时间(步骤B14)，返回到步骤B13直到经过该输出时间为止，当检测出经过了输出时间时(步骤B14中的是)，返回到上述步骤B3。
如上所述，第3实施方式的数字标牌装置1检测在广告显示中视听者(顾客)在广告画面上的凝视位置，若该凝视位置是预定数据，则暂存用于指定该预定数据的识别信息，在之后的预定定时根据暂存的识别信息确定在凝视位置处显示的预定数据，进行涉及该数据的输出控制，因此能在适当定时控制输出涉及顾客感兴趣的数据，不需要对顾客要求特别的操作，能准确地确定顾客感兴趣的数据，能提高广告主侧(店侧)的宣传效果。
在上述第3实施方式中，示例了始终输出1画面的广告数据的情况，但与第1实施方式一样，也可依次输出用于构成广告的各个数据。另外，在第3实施方式中，检测在广告显示中视听者(顾客)在广告画面上的凝视位置，但不限于检测凝视位置，例如也可在顾客触摸了触摸画面上的任意位置的情况等，检测通过输入操作任意指定的位置。另外，当顾客的眼睛大大张开(吃惊)、张嘴(笑脸)预定时间以上等面部表情变化时，也可将该顾客看的显示位置作为顾客任意指定的位置。
另外，在第3实施方式中，将输出定时设为顾客想要离开广告画面的定时，但与第1实施方式一样，也可将依次输出一轮用于构成广告的各个数据后的定时(从最终页面转移到开头页面的定时)作为输出定时。另外，也可将顾客开始看广告的数据作为起点，检测从该起点起依次输出一轮数据后的定时作为输出定时。另外，也可检测顾客想要走出商店外的定时作为输出定时。通过如此依次输出用于构成广告的各个数据，具有与第2实施方式一样的效果。
并且，也可在顾客通过在商店入口附近出售顾客有反应的数据(商品)的角落的定时，在该出售角落处设置的数字标牌装置中显示该商品的数据。此时，若在商店内通过与顾客所持有的便携终端装置的通信，追踪管理顾客识别信息的，并且追踪管理该顾客的位置，则能实现上述显示。
在上述实施方式2及3中，解析视听者(顾客)的面部图像后，检测其视线方向等作为视听者的反应，但也可检测顾客的姿势作为视听者的反应。另外，顾客的语音不限于反应于广告内容而自然发出的语音，也可检测输入指示指令的语音。
在上述实施方式2及3中，示例了在商店内设置的数字标牌装置，但不限于此，也可以是在车站内或街上设置的数字标牌装置。
另外，将广告画面设为触摸画面，但若是具备投影仪的数字标牌装置，则也可在屏幕上显示投影图像。
另外，在上述各实施方式中所示的所谓“装置”或“部”也可按功能分离成多个框体，不限于单一框体。另外，在上述流程图中记述的各步骤不限于时间系列的处理，也可并列处理多个步骤，或分别独立地进行处理。

Claims (10)

1.一种输出内容的内容输出装置，其特征在于，具备：
输出控制部，其使所述内容中的输出内容依次变化后输出；
内容存储部，其将所述内容的各输出内容与其各个输出定时对应起来进行存储；
检测控制部，其在所述内容的输出内容依次变化后输出的途中，且在任意的定时有用户指示时，检测有该指示的指示定时的时刻；
存储控制单元，其使指示存储部将所述检测出的指示定时时刻与所述内容对应起来进行存储；
确定控制部，其在所述内容的输出内容的一连串的输出后的预定时刻，判别在所述指示存储部中是否存储有指示定时时刻，在判别为有存储时，读出存储在该指示存储部中的指示定时时刻，并确定在该指示定时时刻输出的所述内容的输出内容；以及
处理执行控制部，其执行与所述确定的输出内容对应的处理。
2.根据权利要求1所述的内容输出装置，其特征在于，
所述内容的各输出内容包含与该输出内容对应的链接信息，
所述处理执行控制部根据与由所述确定控制部确定的输出内容对应的所述链接信息，来执行用于输出其链接目的地信息的处理。
3.根据权利要求1所述的内容输出装置，其特征在于，
在所述内容的输出内容中对多个位置均包含信息，
在依次变化后输出的所述内容的输出内容内指定任意的位置，而存在所述定时中的指示时，所述检测控制部检测出存在该指示的定时和所述指定位置，
所述确定控制部通过检索所述内容存储部内，在所述指示定时时刻输出的所述内容的输出内容内确定相当于所述指定位置的信息。
4.一种输出内容的内容输出装置，其特征在于，具备：
输出控制部，其使所述内容中的输出内容依次变化后输出；
内容存储部，其将所述内容的各输出内容与其各个输出定时对应起来进行存储；
检测控制部，其在所述内容的输出内容依次变化后输出的途中，判别在任意的定时是否有用户的反应，有反应时，检测出该反应定时的时刻；
存储控制单元，其使反应存储部将所述检测出的反应定时时刻与所述内容对应起来进行存储；
确定控制部，其在所述内容的输出内容的一连串的输出后的预定时刻，判别在所述反应存储部中是否存储有反应定时时刻，在判别为有存储时，读出存储在该反应存储部中的反应定时时刻，并确定在该反应定时时刻输出的所述内容的输出内容；以及
处理执行控制部，其执行与所述确定的输出内容对应的处理。
5.根据权利要求4所述的内容输出装置，其特征在于：
所述检测控制部在判别出用户位于用于输出所述输出内容的位置近旁时，通过进行基于该用户的语音解析的确定语音的判别，或基于针对该用户的摄影图像解析的图像变化的判别，检测出该判别时刻作为所述反应定时的时刻。
6.根据权利要求4所述的内容输出装置，其特征在于，
所述确定控制部判别在所述内容的一连串的输出结束时，在所述反应存储部中是否存储有所述反应定时，在判别为有所述检测的情况下，确定所述内容的输出内容。
7.根据权利要求4所述的内容输出装置，其特征在于，
所述内容的各输出内容包含与该输出内容对应的链接信息，
所述处理执行控制部根据与由所述确定控制部确定的输出内容对应的所述链接信息来执行用于输出其链接目的地信息的处理。
8.根据权利要求4所述的内容输出装置，其特征在于，
该内容输出装置还具备：判别控制部，其判别是否与由所述确定控制部确定的输出内容对应地包含有链接信息，
在判别为包含有所述链接信息时，所述处理执行控制部根据该链接信息输出其链接目的地信息，在判断为不包含所述链接信息时，所述处理执行控制部执行用于输出由所述确定控制部确定的所述输出内容的处理。
9.一种控制用于输出内容的内容输出装置的方法，该方法的特征在于，包含如下的步骤：
输出步骤，其使所述内容中的输出内容依次变化后输出；
存储步骤，其使内容存储部将所述内容的各输出内容与其各个输出定时对应起来进行存储；
检测步骤，其在所述内容的输出内容依次变化后输出的途中，且在任意的定时有用户指示时，检测有该指示的指示定时的时刻；
存储控制步骤，其使指示存储部将所述检测出的指示定时时刻与所述内容对应起来进行存储；
确定步骤，其在所述内容的输出内容的一连串的输出后的预定时刻，判别在所述指示存储部中是否存储有指示定时时刻，在判别为有存储时，读出存储在该指示存储部中的指示定时时刻，并确定在该指示定时时刻输出的所述内容的输出内容；以及
处理执行步骤，其执行与所述确定的输出内容对应的处理。
10.一种控制用于输出内容的内容输出装置的方法，该方法的特征在于，包含如下的步骤：
输出步骤，其使所述内容中的输出内容依次变化后输出；
存储步骤，其使内容存储部将所述内容的各输出内容与其各个输出定时对应起来进行存储；
检测步骤，其在所述内容的输出内容依次变化后输出的途中，判别在任意的定时是否有用户的反应，有反应时，检测出该反应定时的时刻；
存储控制步骤，其使反应存储部将所述检测出的反应定时时刻与所述内容对应起来存储；
确定步骤，其在所述内容的输出内容的一连串的输出后的预定时刻，判别在所述反应存储部中是否存储有反应定时时刻，在判别为有存储时，读出存储在该反应存储部中的反应定时时刻，并确定在该反应定时时刻输出的所述内容的输出内容；以及
处理执行步骤，其执行与所述确定的输出内容对应的处理。
CN201510196564.1A 2014-04-03 2015-03-17 输出内容的内容输出装置 Active CN104978392B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2014-077062 2014-04-03
JP2014077062A JP5943215B2 (ja) 2014-04-03 2014-04-03 コンテンツ出力装置及びプログラム
JP2014-223152 2014-10-31
JP2014223152A JP6048475B2 (ja) 2014-10-31 2014-10-31 コンテンツ出力装置及びプログラム

Publications (2)

Publication Number Publication Date
CN104978392A true CN104978392A (zh) 2015-10-14
CN104978392B CN104978392B (zh) 2018-12-28

Family

ID=54209873

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510196564.1A Active CN104978392B (zh) 2014-04-03 2015-03-17 输出内容的内容输出装置

Country Status (2)

Country Link
US (1) US9886403B2 (zh)
CN (1) CN104978392B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016185557A1 (ja) * 2015-05-19 2016-11-24 楽天株式会社 情報処理装置、情報処理方法、プログラム
DE112016006689T5 (de) * 2016-03-30 2018-12-20 Kawasaki Jukogyo Kabushiki Kaisha Verarbeitungssystem für Grätschsitz-Fahrzeug
CN107329750B (zh) * 2017-06-26 2020-04-07 厦门美图移动科技有限公司 应用程序中广告页面的识别方法、跳转方法及移动终端
US20210280308A1 (en) * 2020-03-05 2021-09-09 Nervanix, LLC Applying biometrics to the development of digital content
JP2020178359A (ja) * 2020-07-07 2020-10-29 ローレル精機株式会社 データ管理システム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070204239A1 (en) * 2006-02-28 2007-08-30 Microsoft Corporation Indication of Delayed Content Output in a User Interface
CN101833968A (zh) * 2003-10-10 2010-09-15 夏普株式会社 内容再现装置和内容再现方法
US20110307576A1 (en) * 2009-02-23 2011-12-15 Pioneer Corporation Content transmitting apparatus, content output system, transmission control method, transmission control program, and recording medium

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8310443B1 (en) 2007-05-02 2012-11-13 Google Inc. Pie chart time indicator
US8108257B2 (en) 2007-09-07 2012-01-31 Yahoo! Inc. Delayed advertisement insertion in videos
JP2010087778A (ja) * 2008-09-30 2010-04-15 Casio Computer Co Ltd 撮像装置、変速撮像方法、及びプログラム
CN102057350A (zh) 2009-02-17 2011-05-11 松下电器产业株式会社 对象选择装置、对象选择程序、用于对象选择装置的集成电路以及对象选择方法
JP5585721B2 (ja) * 2011-03-22 2014-09-10 富士通株式会社 情報装置、画面切替え方法、及び画面切替えプログラム
JP2013140542A (ja) 2012-01-06 2013-07-18 Toshiba Tec Corp 情報表示装置、情報配信装置およびプログラム
WO2015079527A1 (ja) 2013-11-28 2015-06-04 楽天株式会社 情報処理装置、情報処理方法及び情報処理プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101833968A (zh) * 2003-10-10 2010-09-15 夏普株式会社 内容再现装置和内容再现方法
US20070204239A1 (en) * 2006-02-28 2007-08-30 Microsoft Corporation Indication of Delayed Content Output in a User Interface
US20110307576A1 (en) * 2009-02-23 2011-12-15 Pioneer Corporation Content transmitting apparatus, content output system, transmission control method, transmission control program, and recording medium

Also Published As

Publication number Publication date
CN104978392B (zh) 2018-12-28
US20150286598A1 (en) 2015-10-08
US9886403B2 (en) 2018-02-06

Similar Documents

Publication Publication Date Title
CN111711828B (zh) 一种信息处理方法、装置和电子设备
EP2961172A1 (en) Method and device for information acquisition
CN113420247A (zh) 页面展示方法、装置、电子设备、存储介质及程序产品
CN104978392A (zh) 输出内容的内容输出装置
CN110458360B (zh) 热门资源的预测方法、装置、设备及存储介质
JP6806762B2 (ja) 情報をプッシュするための方法及び装置
CN113992934B (zh) 多媒体信息处理方法、装置、电子设备和存储介质
US12002071B2 (en) Method and system for gesture-based cross channel commerce and marketing
US20130229342A1 (en) Information providing system, information providing method, information processing apparatus, method of controlling the same, and control program
CN108040125A (zh) 内容识别及推送方法及电视伴随式ai助理装置
JP6048475B2 (ja) コンテンツ出力装置及びプログラム
US20200126564A1 (en) Review system for online communication, method, and computer program
CN115190366B (zh) 一种信息展示方法、装置、电子设备、计算机可读介质
CN115426531B (zh) 一种直播间访问方法、装置、设备及介质
US20210065269A1 (en) Listing support method and system
US20150100464A1 (en) Information displaying apparatus and method of object
JP6304348B2 (ja) コンテンツ出力装置及びプログラム
JP6799655B1 (ja) ユーザインタフェース方法、端末プログラム、端末装置、及び広告システム
CN115022702B (zh) 直播间礼物的展示方法、装置、设备及介质
CN117786159A (zh) 文本素材获取方法、装置、设备、介质和程序产品
CN116258435A (zh) 物流信息展示方法、装置、设备、存储介质及产品
CN107526827A (zh) 用于问答展示的方法、设备和计算机可读存储介质
CN114861033A (zh) 直播推荐方法、装置、设备及计算机可读存储介质
US20220172278A1 (en) Shared Shopping System
CN109460277A (zh) 商品抢购流程的展示方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant