WO2016024582A1 - 本、当該本を備える演出システム、および、プログラム - Google Patents

本、当該本を備える演出システム、および、プログラム Download PDF

Info

Publication number
WO2016024582A1
WO2016024582A1 PCT/JP2015/072730 JP2015072730W WO2016024582A1 WO 2016024582 A1 WO2016024582 A1 WO 2016024582A1 JP 2015072730 W JP2015072730 W JP 2015072730W WO 2016024582 A1 WO2016024582 A1 WO 2016024582A1
Authority
WO
WIPO (PCT)
Prior art keywords
page
book
unit
image
communication
Prior art date
Application number
PCT/JP2015/072730
Other languages
English (en)
French (fr)
Inventor
幸司 木村
和生 浦谷
沙織 高阪
Original Assignee
株式会社Ｓｔａｒｒｙｗｏｒｋｓ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社Ｓｔａｒｒｙｗｏｒｋｓ filed Critical 株式会社Ｓｔａｒｒｙｗｏｒｋｓ
Priority to JP2016542583A priority Critical patent/JP6568529B2/ja
Publication of WO2016024582A1 publication Critical patent/WO2016024582A1/ja

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H5/00—Musical or noise- producing devices for additional toy effects other than acoustical
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H30/00—Remote-control arrangements specially adapted for toys, e.g. for toy vehicles
    • A63H30/02—Electrical arrangements
    • A63H30/04—Electrical arrangements using wireless transmission
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H33/00—Other toys
    • A63H33/38—Picture books with additional toy effects, e.g. pop-up or slide displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B42—BOOKBINDING; ALBUMS; FILES; SPECIAL PRINTED MATTER
    • B42D—BOOKS; BOOK COVERS; LOOSE LEAVES; PRINTED MATTER CHARACTERISED BY IDENTIFICATION OR SECURITY FEATURES; PRINTED MATTER OF SPECIAL FORMAT OR STYLE NOT OTHERWISE PROVIDED FOR; DEVICES FOR USE THEREWITH AND NOT OTHERWISE PROVIDED FOR; MOVABLE-STRIP WRITING OR READING APPARATUS
    • B42D1/00—Books or other bound products

Definitions

  • the present invention relates to a book having a page identification function, an effect system including the book, and a program.
  • Patent Document 1 describes a picture book toy that identifies a page by detecting a combination of a light shielding region and an opening region by a plurality of sensors arranged on a straight line.
  • the present invention has been conceived under the above circumstances, and an object of the present invention is to provide a book capable of identifying a page with a narrow detection area.
  • the present invention takes the following technical means.
  • the book provided by the first aspect of the present invention includes a printed page portion having a plurality of pages, a detection area provided on each page, and facing the detection area when each page is closed.
  • An image capturing unit that captures the detection area, an identification unit that identifies an open page based on an image captured by the image capturing unit, and information associated with each page is stored.
  • Storage means and control means for performing control based on information corresponding to the page identified by the identification means.
  • the identification unit converts the photographed image into a binarized image, and identifies whether the predetermined position of the binarized image is white or black. Do.
  • the identification unit converts the captured image into a binarized image and performs identification by pattern matching.
  • the print page portion is provided so as to be replaceable, and the print means is attached to the identification unit based on an image photographed by the photographing unit.
  • the photographing means, the identification means, the storage means, and the control means use functions of a portable device.
  • the “portable device” in the present invention is a smartphone, a mobile phone, a tablet computer, or the like, and is a device having a photographing function, a CPU, and a memory. Also included are cameras that can install application software. Further included is a dedicated device for the book provided by the first aspect of the present invention, which includes a photographing function and a CPU and memory.
  • the book further includes sound output means for outputting sound
  • the information associated with each page is sound information
  • the control means includes the identified page. A sound based on the corresponding information is output to the sound output means.
  • the book further includes communication means for performing communication, and the control means causes the communication means to transmit information corresponding to the identified page.
  • the rendering system provided by the second aspect of the present invention includes a book provided by the first aspect of the present invention, and a home appliance including a receiving means for receiving information transmitted by the communication means. It is characterized by.
  • the “home appliance” in the present invention is an electromechanical apparatus mainly used for home use, such as lighting equipment, white goods such as an air conditioner, video equipment such as a TV, acoustic equipment such as a radio and a speaker, etc. Including electric curtains. Further, the “home appliance” is not limited to the one that directly receives information transmitted by the communication means, but includes one that is received via a relay device or a network.
  • the book provided by the third aspect of the present invention includes a print page section having a plurality of pages, a storage section for storing a portable device having a shooting section, and the shooting section when each page is closed. And a detection area provided at a position facing each other.
  • the program provided by the fourth aspect of the present invention is a program installed in a portable device stored in the storage unit of the book provided by the third aspect of the present invention, wherein the portable device is Identification means for identifying an open page of the book, storage means for storing information associated with each page, and identification means based on an image photographed by the photographing means. It is characterized by functioning as control means for performing control based on the information corresponding to the page.
  • the rendering system provided by the fifth aspect of the present invention comprises a book provided by the third aspect of the present invention and a program provided by the fourth aspect of the present invention. To do.
  • the identification unit identifies an open page based on the image photographed by the photographing unit.
  • the detection area of each page is provided at a position facing the photographing unit when each page is closed, and can be made narrower than the conventional detection area.
  • FIG. 1 is a diagram for explaining a schematic configuration of the rendering system according to the first embodiment.
  • the production system A is a system in which production is performed for enjoying the picture book 1 with production effects.
  • the picture book with production effects 1 the relay device 4, the lighting device 5, the air conditioner 6, the display 7, the electric curtain 8, and the speaker 9. Equipped with household appliances such as.
  • the picture book 1 with a production effect includes a picture book 2 and a portable terminal 3, and identifies the page on which the picture book 2 is open, and performs the production corresponding to the page.
  • the picture book with effect 1 has a communication function, and transmits a communication signal to the relay device 4. Details of the picture book 1 with a production effect will be described later.
  • the relay device 4 relays wireless communication between the picture book 1 with effect and the home appliances 5 to 9.
  • the relay device 4 transmits the communication signal received from the picture book 1 with the effect to the home appliances 5-9.
  • the relay device 4 and the picture book 1 with a rendering effect perform wireless communication by the WiFi (registered trademark) system
  • the relay device 4 and the home appliances 5 to 9 perform wireless communication by the ZigBee (registered trademark) method. It is carried out.
  • Each wireless communication method is not limited to this, and other communication methods such as a Bluetooth (registered trademark) method and an infrared communication method may be used.
  • the picture book with effect 1 and the home appliances 5 to 9 may directly perform wireless communication.
  • each communication is not limited to wireless communication, and wired communication may be used.
  • the relay device 4 and the picture book 1 with a rendering effect may be connected via a communication line to perform wired communication.
  • the relay device 4 and the home appliances 5 to 9 may communicate with each other via power line communication (Power Line Communication: PLC ) May be used.
  • PLC Power Line Communication
  • the picture book with effect 1 and the home appliances 5 to 9 may directly perform wired communication.
  • the relay device 4 and the picture book 1 with a rendering effect may perform communication via the Internet line.
  • the lighting device 5 is a lighting device including an LED, and can change brightness and color.
  • the lighting device 5 has a communication function, and can receive a communication signal from the relay device 4.
  • the lighting device 5 controls on / off of lighting and adjusts brightness and color according to a communication signal input from the picture book 1 with a rendering effect 1 via the relay device 4.
  • the lighting device 5 may be a lighting device including a fluorescent lamp or an incandescent lamp. Even in this case, on / off of the illumination can be controlled in accordance with the communication signal.
  • the air conditioner 6 is an air conditioner and is an air conditioner that adjusts the temperature and humidity in the room.
  • the air conditioner 6 has a communication function and can receive a communication signal from the relay device 4.
  • the air conditioner 6 controls on / off of the power source and adjusts the temperature and humidity in accordance with the communication signal input from the picture book 1 with the effect through the relay device 4.
  • a fan or a heating device having a communication function may be used.
  • the display 7 is a display device that displays an image.
  • the display 7 has a communication function and can receive a communication signal from the relay device 4.
  • the display 7 controls on / off of the power supply according to the communication signal input from the picture book 1 with the effect through the relay device 4 and displays an image such as a moving image or a still image.
  • the display 7 may be a television provided with a communication function.
  • the electric curtain 8 opens and closes the curtain electrically. Further, the electric curtain 8 has a communication function and can receive a communication signal from the relay device 4. The electric curtain 8 controls the opening and closing of the curtain according to a communication signal input from the picture book 1 with a rendering effect 1 via the relay device 4.
  • Speaker 9 is an output device for outputting sound.
  • the speaker 9 has a communication function and can receive a communication signal from the relay device 4.
  • the speaker 9 controls on / off of the power supply according to the communication signal input from the picture book 1 with the effect through the relay device 4 and outputs sound.
  • the speaker 9 does not need to be provided.
  • the speaker 9 may be used without using the speaker 346 of the mobile terminal 3. Further, different sounds may be output from the speaker 346 and the speaker 9 of the mobile terminal 3.
  • the picture book 1 with a production effect is a picture book 2 in which the mobile terminal 3 is stored.
  • the picture effect-added picture book 1 uses the functions of the mobile terminal 3 to perform various effects. Specifically, using a shooting function, a detection area (described later) provided on each page of the picture book 2 is shot, and the currently opened page is identified based on the shot image. And the audio
  • information corresponding to the identified page is transmitted as a communication signal to each home appliance 5 to 9 via the relay device 4 using the communication function of the mobile terminal 3. Each home appliance 5 to 9 that has received the communication signal is controlled based on information corresponding to the identified page.
  • the lighting device 5 changes the lighting to red light
  • the air conditioner 6 is activated at a high set temperature, blows out warm air, and flows to the display 7 A magma image is displayed.
  • the vibration function of the portable terminal 3 works, the picture book 1 with a production effect vibrates, and the description audio
  • FIG. 2 is a diagram for explaining the picture book 1 with a production effect.
  • FIG. 2A shows a perspective view of the picture book 2
  • FIG. 2B shows a state where the mobile terminal 3 is stored in the picture book 2.
  • a picture book 1 with a production effect is a picture book 2 in which a portable terminal 3 is stored.
  • the picture book 2 includes a back cover portion 21, a front cover portion 22, and a print page portion 23.
  • the back cover portion 21 is a back cover (table 4) and a back cover back (table 3) of the picture book 2, and has a thickness that can accommodate the portable terminal 3.
  • the back cover portion 21 is provided with a storage portion 211 that is a hollow portion for storing the mobile terminal 3.
  • a surface on the back side of the back cover of the storage unit 211 is a lid 212 that can be opened and closed.
  • the lid 212 has a left long side fixed to the back cover of the back cover 21 and can be opened as shown in FIG.
  • the right long side, the upper short side, or the lower short side may be fixed to the back of the back cover portion 21 instead of the left long side.
  • An opening 213 is provided in the upper left of the lid 212 when closed. As shown in FIG.
  • the portable terminal 3 is arranged so that the surface on which the photographing lens 332a is arranged is faced up (toward the back cover back side) and is fitted into the storage unit 211 (arrow in the figure). reference). And it is accommodated by closing the lid 212.
  • the opening 213 is disposed so as to match the position of the photographing lens 332 a of the mobile terminal 3 stored in the storage unit 211.
  • the position of the photographing lens 332a of the stored portable terminal 3 is
  • the storage portion 211 is arranged at a position close to the left side of the back cover portion 21 so as to be on the upper left side of the back cover.
  • the arrangement position of the detection region 231 can be set to a position that does not interfere with each page. For example, in the case of FIG. 2, if it is the 12th page of the print page portion 23, the detection area 231 is arranged in the upper right corner of the page.
  • the arrangement location and arrangement direction of the storage unit 211 and the arrangement location of the opening 213 are not limited to those described above. What is necessary is just to arrange
  • the storage unit 211 may be arranged so as to be horizontally long at a position close to the upper side of the back cover part 21.
  • the mobile terminal 3 shown in FIG. 2B is rotated 90 ° counterclockwise and placed on the upper side of the back cover portion 21, and the photographing placed on the upper right side of the mobile terminal 3.
  • the lens 332a is arranged so as to be on the upper left side of the back cover of the back cover part 21. If the position of the detection area 231 is not minded, the location and direction of the storage unit 211 may be designed freely.
  • the front cover part 22 is to be the front cover (Table 1) and back of the picture book 2 (Table 2).
  • the front cover portion 22 and the back cover portion 21 are secured to the left end portion of the front cover portion 22 and the right end portion of the back cover portion 21 so that they can be opened and closed.
  • the right end portion of the front cover portion 22 is fixed to the left end portion of the back cover portion 21.
  • the print page portion 23 is composed of pages on which pictures and characters are printed, and the fixing position between the back cover portion 21 and the front cover portion 22 (the right end portion of the back cover portion 21 and the front cover portion 22 It is fixed to the left end).
  • the print page section 23 is composed of six rectangular sheets of paper, and includes all the pages from the first page that is the left page on the back of the front cover to the twelfth page that is the right page of the back cover. It consists of 12 pages. In addition, you may make it print a picture and a character also on the front cover back and back cover back.
  • a detection region 231 is provided.
  • the detection area 231 of each page is provided with 1 to 6 holes 231a (see FIG. 4A).
  • six holes 231a are provided in the detection region 231 disposed in the upper right corner of the twelfth page (see the leftmost diagram in FIG. 4A).
  • six holes 231a are inevitably provided in the detection region 231 arranged in the upper left corner of the eleventh page.
  • FIG. 3 is a functional block diagram for explaining the internal configuration of the mobile terminal 3.
  • the portable terminal 3 is a smartphone and is a portable terminal device having various functions such as a photographing function and a communication function.
  • the portable terminal 3 includes a control unit (CPU) 31, a storage unit 32, an operation unit 331, an imaging unit 332, a microphone 333, a GPS 334, a gyro sensor 335, a first communication unit 341, a second communication unit 342, a display unit 343, and a vibrator. 344, a light 345, and a speaker 346.
  • the internal configuration of the mobile terminal 3 is common to that of a general smartphone.
  • the operation unit 331 includes a plurality of buttons and a touch panel that are pressed for operation input.
  • the arrangement and function of each button is the same as a general smartphone.
  • the touch panel is provided so as to cover the surface of the display screen.
  • the operation unit 331 outputs an operation signal that varies depending on the button to the control unit 31 when the button is pressed.
  • the control unit 31 recognizes which button is pressed based on the input operation signal and performs corresponding processing.
  • the operation unit 331 outputs information on the contact position detected by the touch panel to the control unit 31.
  • the control unit 31 performs corresponding processing based on the input contact position information.
  • the photographing unit 332 is for photographing an image, and includes a photographing lens 332a and a camera equipped with an image sensor such as a CCD image sensor.
  • the imaging unit 332 outputs captured image data to the control unit 31.
  • the control unit 31 stores the input image data in the storage unit 32 and performs predetermined image processing. In the present embodiment, the imaging unit 332 images the detection area 231.
  • the microphone 333 is an input device for inputting voice.
  • the sound input from the microphone 333 is converted into sound data and output to the control unit 31.
  • the control unit 31 stores the input voice data in the storage unit 32 or causes the first communication unit 341 to output it to the communication line.
  • GPS334 detects a position using a global positioning system.
  • the position information detected by the GPS 334 is output to the control unit 31.
  • the control unit 31 stores the input position information in the storage unit 32 or uses it for predetermined processing.
  • the gyro sensor 335 detects an angle and acceleration.
  • the gyro sensor 335 detects the tilt and acceleration of the mobile terminal 3 and outputs the detected data to the control unit 31.
  • the control unit 31 stores input data such as acceleration in the storage unit 32 or uses it for predetermined processing.
  • the first communication unit 341 performs communication via a communication line.
  • the first communication unit 341 performs wireless communication with a wireless base station and connects to a communication line connected to the wireless base station.
  • the first communication unit 341 outputs the received communication signal to the control unit 31 and transmits the communication signal input from the control unit 31 to the communication line.
  • the second communication unit 342 performs short-range wireless communication.
  • the second communication unit 342 performs wireless communication with the relay device 4 (see FIG. 1) using the WiFi (registered trademark) system.
  • the second communication unit 342 outputs the communication signal received from the relay device 4 to the control unit 31 and transmits the communication signal input from the control unit 31 to the relay device 4.
  • the display unit 343 displays an image and includes, for example, a liquid crystal display screen.
  • the display unit 343 displays an image based on the image data input from the control unit 31.
  • the liquid crystal display screen is arranged on the back side surface.
  • the vibrator 344 is a vibration device including, for example, a motor and a weight with a biased center of gravity, and vibrates by rotating the motor in accordance with a control signal input from the control unit 31.
  • the light 345 is a light emitting device including an LED, for example, and emits light according to a control signal input from the control unit 31.
  • the light 345 is disposed next to the photographing lens 332a.
  • the speaker 346 is an output device for outputting sound.
  • the speaker 346 converts voice data input from the control unit 31 into voice and outputs the voice.
  • the storage unit 32 includes a ROM, a RAM, a nonvolatile memory, and the like.
  • the ROM stores a control program executed by the control unit 31 and the like.
  • the RAM provides an area for temporarily storing information and a work area used when the control unit 31 performs calculations.
  • the nonvolatile memory stores various data such as image data and audio data. Note that a program such as an effect process shown in the flowchart of FIG. 6 to be described later, an effect table shown in FIG. 5 and the like are downloaded as application software via a communication line and stored in a nonvolatile memory. In addition, you may memorize
  • the control unit 31 performs various controls and signal processing of the mobile terminal 3, and is configured using, for example, a CPU.
  • the control unit 31 includes an image acquisition unit 311, a page identification unit 312, an information reading unit 313, and an effect processing unit 314 as functional configurations. Yes.
  • the image acquisition unit 311 acquires an image obtained by photographing the detection area 231.
  • the image acquisition unit 311 causes the imaging unit 332 to perform imaging at a predetermined timing, and acquires image data input from the imaging unit 332.
  • the detection area 231 of each page is arranged at a position facing the photographing lens 332a of the mobile terminal 3, so that an image photographed by the photographing unit 332 Becomes an image when the detection areas 231 of the respective pages are superimposed.
  • the page identification unit 312 identifies a currently open page based on the acquired image data.
  • the page identifying unit 312 performs gray scale conversion and binarization on the acquired image data, and identifies the currently open page based on the binarized image.
  • FIG. 4 is a diagram for explaining a method of identifying a page.
  • FIG. 4A shows an example of the detection area 231 of each page.
  • One hole 231a is provided on the upper left in the detection area 231 (see the rightmost figure) of the second page.
  • a hole 231a is also provided in the upper right.
  • the upper left hole 231a of the detection area 231 of the fourth page is arranged to overlap the hole 231a of the detection area 231 of the second page.
  • the hole 231a is increased by one, and the holes 231a other than the increased hole 231a are arranged so as to overlap the holes 231a of the previous page. Has been.
  • the detection area 231 provided with four holes 231a is arranged in the upper right corner of the eighth page, and the upper left corner of the ninth page.
  • a detection area 231 provided with five holes 231a is arranged (see FIG. 4B).
  • the mobile terminal 3 is disposed on the left side of the back of the ninth page (back side with respect to the paper surface in FIG. 4B), and the detection region 231 is located at a position facing the photographing lens 332a. In FIG. 4B, the detection region 231 is shown larger than the actual size.
  • the detection area 231 of the 12th page (11th page) (see the leftmost figure in FIG. 4A) is located.
  • the image photographed by the photographing unit 332 is the tenth.
  • the area other than the five round portions through which light is transmitted from the five holes 231a in the page detection area 231 is black.
  • the image photographed by the photographing unit 332 is converted into a binarized image by image processing, and a portion through which light is transmitted becomes a white circle, so that it is easy to identify.
  • the binarized image differs depending on the open page. When the 10th page and the 11th page are opened, the image becomes 6 white circles, and the 2nd page and the 3rd page are opened. If there is, an image with two white circles appears.
  • an open page is identified based on whether the position of the point shown in FIG. 4D is white or black in the binarized image.
  • the position of the point shown in FIG. 4D is a position that is substantially the center when there is a white circle in the binarized image.
  • the binarized image when the position of a certain point shown in FIG. 4D is white, it is determined that there is a white circle at the position, and when the position of a certain point is black, the position is white. It is judged that there is no circle. Thereby, the number of white circles appearing in the binarized image can be counted.
  • An open page can be identified by the number of white circles. Even if the image photographed by the photographing unit 332 is slightly deviated, if the deviation is smaller than the radius of the white circle, it can be correctly recognized that there is a white circle.
  • the binarized image is the image of FIG. 4C
  • the position of the lower right point among the points shown in FIG. 4D is black, and therefore it is determined that there is no white circle at the position. Since the positions of the other five points are each white, it is determined that there is a white circle at that position. Therefore, since there are five white circles, it is determined that the eighth and ninth pages are open.
  • the brightness corresponding to the white circle is higher in brightness than the other positions. Therefore, the brightness can be determined by comparing the brightness at each position with a threshold value. Further, an open page may be identified based on the position of the white circle instead of the number of white circles.
  • the page identification method is not limited to that described above.
  • the binarized image when each page is opened is stored as a reference image, and the binarized image photographed by the photographing unit 332 and image-processed is pattern-matched with the reference image to open it. You may make it identify the page which exists.
  • Each reference image may be installed as a part of application software.
  • the information reading unit 313 reads information corresponding to the identified page from the storage unit 32.
  • the storage unit 32 stores an effect table in which information for effects corresponding to each page is set.
  • FIG. 5 is a diagram illustrating an example of the effect table stored in the storage unit 32.
  • audio data of “audio 2” is stored, information indicating that vibration is performed (indicated by “ ⁇ ” in FIG. 5), lighting equipment 5 (information for communication data 1) to be transmitted to the information indicating that the lighting is red, information to be transmitted to the air conditioner 6 (communication data 2) to indicate that hot air is blown out (actually, the air conditioner 6 is used as heating)
  • Information to be activated, high set temperature), moving image information of “video 1” and the like are stored as information (communication data 4) to be transmitted to the display 7.
  • the effect processing unit 314 performs each effect process based on the information read from the effect table in the storage unit 32. For example, when the information corresponding to the second to third pages of the effect table shown in FIG. 5 is read out, the audio data of “voice 2” is output to the speaker 346 and the voice corresponding to “voice 2” (second The sound corresponding to the description on page 3) is output from the speaker 346, and the vibrator 344 vibrates, so that the picture book 1 with a rendering effect vibrates as a whole.
  • corresponding information is transmitted as communication signals from the second communication unit 342 to the lighting device 5, the air conditioner 6, and the display 7 via the relay device 4.
  • the illumination device 5 changes the illumination to red light based on the received communication signal.
  • the air conditioner 6 is activated as heating at a high set temperature based on the received communication signal, and blows out hot air.
  • the display 7 displays the video of “Video 1” based on the received communication signal.
  • FIG. 6 is a flowchart for explaining a process (hereinafter referred to as “effect process”) of performing an effect corresponding to a page performed by the control unit 31.
  • the effect process is started when the application software of the mobile terminal 3 is activated, and is continued until the application software is terminated.
  • the photographing unit 332 performs photographing, image data input from the photographing unit 332 is acquired (S1), and a currently opened page is identified based on the acquired image data (S2). Next, it is determined whether or not the page has been changed (S3). If it is determined that the page has not been changed (S3: NO), the process returns to step S1, and photographing is performed again after a predetermined time has elapsed. Steps S1 to S3 are repeated until the page is changed.
  • Step S2 Shooting by the photographing unit 332 is performed while the portable terminal 3 is stored in the storage unit 211 after the application software of the mobile terminal 3 is activated and the cover of the picture book 2 is closed. Since the image photographed at this time is not a photograph of the detection area 231, the page is not identified. Even when the page cannot be identified in step S2, the process returns to step S1 and photographing is performed again.
  • step S3 If it is determined in step S3 that the page has been changed (S3: YES), information corresponding to the identified page is read from the effect table of the storage unit 32 (S4).
  • the read audio data is output to the speaker 346, and the corresponding audio is output (S5).
  • the read communication data is output to the second communication unit 342 and transmitted to the relay device 4 as a communication signal (S6). Further, it is determined whether or not information indicating vibration is read (S7). If read (S7: YES), the vibrator 344 is turned on (S8) and not read (S7). In S7: NO, vibrator 344 is turned off (S9), and the process returns to step S1.
  • the effect process performed by the control unit 31 is not limited to the one described above.
  • the page on which the control unit 31 is open is identified based on the image photographed by the photographing unit 332.
  • the detection area 231 of each page is provided at a position facing the shooting lens 332a of the shooting unit 332 when each page is closed.
  • the detection area 231 can be narrower than the conventional area.
  • the storage unit 211 that stores the mobile terminal 3 is arranged so that the position of the photographing lens 332a is at the upper left corner of the back cover of the back cover 21. Thereby, the arrangement position of the detection region 231 can be set to a position that does not interfere with each page.
  • various effects can be performed according to the page identified by the control unit 31. Therefore, the reader can enjoy the contents of the picture book 2 with a sense of reality through various effects.
  • the portable terminal 3 is stored in the picture book 2 and the functions of the portable terminal 3 are used. Therefore, the picture book 2 can be manufactured at a much lower cost than when the picture book 2 itself is provided with a photographing function, a communication function, and the like. Moreover, if the portable terminal 3 is multifunctional, the production
  • the detection region 231 is provided with 1 to 6 holes 231a.
  • the present invention is not limited to this.
  • the detection region 231 may be provided with slits 231b having different thicknesses depending on the page (see FIG. 7A).
  • the open page can be identified.
  • the shape of the slit 231b as shown in FIG. 7B, for example, it is possible to cope with an increase in the number of pages of the print page portion 23.
  • a cover 212 may be provided on the back cover side surface so as to be housed from the back cover side.
  • a side opening 214 may be provided on the side surface of the back cover portion 21 so that the mobile terminal 3 is stored in the storage portion 211 from the side opening 214. Note that the side opening 214 may be provided on the upper side surface or the lower side surface of the back cover portion 21.
  • the portable terminal 3 is accommodated in the accommodating portion 217 provided on the mount 216, and the mount 216 in which the portable terminal 3 is accommodated is provided on a side opening provided on the side of the back cover portion 21 You may make it accommodate in the accommodating part 211 from 214.
  • FIG. In this case, the picture book 2 can be used in common by preparing each mount 216 on which the storage unit 217 is arranged according to the mobile terminal 3 to be used.
  • the portable terminal 3 has a size that can be stored in the picture book 2, has a photographing function, and has only a CPU and a memory for installing application software. There may be. Further, a camera or the like that can install application software may be used instead of the mobile terminal 3.
  • a dedicated for the picture book 1 with a rendering effect which includes modules corresponding to the photographing unit 332, the control unit 31, the storage unit 32, the second communication unit 342, and the speaker 346. May be used as the portable terminal 3.
  • the dedicated portable terminal 3 may be attached to a predetermined position on the back cover of the back cover 21 or fixed with a clip or the like (see FIG. 11B). Since it is not necessary to store the portable terminal 3 inside, the thickness of the back cover portion 21 can be reduced.
  • the place where the dedicated portable terminal 3 is fixed is the storage unit 211, and fixing the dedicated portable terminal 3 in the place is storing.
  • the shape of the dedicated mobile terminal 3 is not limited, and may be a thinner card shape.
  • each home appliance 5 to 9 is operated using the communication function, but the communication function may not be used. In this case, there is no need to prepare home appliances 5 to 9 having a communication function and the relay device 4. Various effects can be enjoyed only by the functions of the mobile terminal 3 itself.
  • the sound is output from the speaker 346 of the mobile terminal 3 and is vibrated by the vibrator 344.
  • the present invention is not limited to this.
  • the opening 213 may be slightly widened, and the light 345 disposed next to the photographing lens 332a may be used for production.
  • an opening may be provided on the back cover side of the back cover part 21 so that an image is displayed on the liquid crystal display screen.
  • the first communication unit 341 may be used to connect to the Internet to obtain new programs and information, or to make a call. Moreover, you may make it utilize the other function with which the portable terminal 3 is equipped.
  • information input from the operation unit 331, the microphone 333, the GPS 334, and the gyro sensor 335 may be used for production. For example, it is urged to knock on the door described on the page of picture book 2, and it is determined whether or not the knock has been made based on the audio data input from microphone 333 and the acceleration data input from gyro sensor 335. The production may be changed according to the determination result. Further, for example, if it is determined from the position information input from the GPS 334 that the current location is Osaka, the data of the Osaka dialect may be used as voice data. Moreover, you may make it utilize the other sensors with which the portable terminal 3 is equipped.
  • the photographed image includes the reader's face.
  • the face of the reader is recognized from the image, if it is determined to be a boy, it will output a voice saying "Boy and good night.”
  • the curtain may be closed by 8, the lighting device 5 may be turned off, and the mobile terminal 3 may be turned off.
  • FIG. 11A is a diagram for explaining a picture book 2 ′ according to the second embodiment.
  • the same or similar elements as those in the picture book 2 shown in FIG.
  • the picture book 2 ' is different from the picture book 2 according to the first embodiment in that the print page portion 23 and the front cover portion 22 can be replaced.
  • a plurality of ring-shaped stoppers 215 are provided at the right end of the back cover portion 21.
  • Each page of the print page portion 23 is provided with a hole 232 for passing through the stopper 215 of the back cover portion 21.
  • the printed page portion 23 is fixed to the right end of the back cover portion 21 so that the stopper 215 is passed through the hole 232 and the page is turned.
  • the front cover portion 22 is also provided with a hole, like the print page portion 23, and is fixed to the right end of the back cover portion 21 in the same manner as the print page portion 23.
  • the stopper 215 can open a part of the ring.
  • the print page portion 23 and the front cover portion 22 can be removed by opening the stopper 215. Further, another print page portion 23 and a front cover portion 22 can be attached. Note that only the print page portion 23 may be replaced without replacing the front cover portion 22.
  • an operation corresponding to the contents of the print page unit 23 can be performed by operating the operation unit 331 of the mobile terminal 3 and changing the production table. Further, the print page portion 23 may be identified and a corresponding effect table may be used. If the position of the hole 231a in the detection area 231 (see the rightmost figure in FIG. 4A) of the first page (second page) is changed, white circles appear in the image taken when the first page is opened.
  • the print page portion 23 can be identified by the position. For example, in the example of FIG. 4, six types of print page portions 23 can be identified. Note that the position of the hole 231a in the detection area 231 of pages other than the first page also needs to be changed according to the position of the hole 231a in the detection area 231 of the first page.
  • the print page portion 23 fixed to the back cover portion 21 can be replaced.
  • the print page portion 23 and the back cover portion 21 are integrated as in the picture book 2 according to the first embodiment, it is necessary to align the picture book 2 by the number in order to align a plurality of contents.
  • the back cover portion 21 is used in common, and only the print page portions 23 need be arranged as many as the contents. Therefore, when many contents are prepared, the cost of the picture book 2 ′ according to the second embodiment can be reduced as compared with the picture book 2 according to the first embodiment.
  • the method of fixing the print page portion 23 to the back cover portion 21 is not limited to the above-described method. Any method may be used as long as each page of the print page portion 23 is turned over and fixed to the back cover portion 21 and the print page portion 23 can be detached from the back cover portion 21.
  • the print page portion 23 may be fixed to the back cover portion 21 with a clip or a hook-and-loop fastener.
  • the picture book 1 with a rendering effect is configured by storing the mobile terminal 3 in the picture book 2 (2 ')
  • the present invention is not limited to this.
  • the case where the picture book itself is provided with a photographing function, a communication function, and the like to produce a picture book with a production effect will be described below as a third embodiment.
  • FIG. 11B is a diagram for explaining a picture book with a performance effect according to the third embodiment.
  • symbol is attached
  • the picture book with production effect 1 ′ differs from the picture book with production effect 1 according to the first embodiment in that the back cover portion 21 ′ is provided with a photographing function, a communication function, and the like.
  • a photographing unit 332 is provided in the upper left corner of the back cover portion 21 ', and a photographing lens 332a is disposed at an opening provided on the back side of the back cover. Further, modules corresponding to the control unit 31, the storage unit 32, the second communication unit 342, and the speaker 346 are embedded in the back cover portion 21 '.
  • modules such as the vibrator 344 and the gyro sensor 335 may be embedded in the back cover portion 21 '.
  • the picture book 1 ′ with a rendering effect according to the third embodiment may be configured such that the print page portion 23 can be replaced as in the second embodiment.
  • the book according to the present invention, the production system including the book, and the program are not limited to the above-described embodiments.
  • the specific configuration of each part of the book according to the present invention, the rendering system including the book, and the program can be variously modified.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Toys (AREA)
  • Telephone Function (AREA)

Abstract

【課題】狭い検出領域でページを識別することができる本を提供する。 【解決手段】 演出効果付き絵本において、複数のページを有する印刷ページ部と、各ページに設けられた検出領域と、各ページを閉じたときに検出領域と向い合せになる位置に設けられ、検出領域を撮影する撮影部（携帯端末の撮影レンズ）と、撮影部によって撮影された画像に基づいて、開いているページを識別するページ識別部（携帯端末の制御部）と、各ページに対応付けられた情報を記憶している記憶部（携帯端末の記憶部）と、ページ識別部によって識別されたページに対応する情報に基づいて、演出のための制御を行う演出処理部（携帯端末の制御部）とを備えるようにした。

Description

本、当該本を備える演出システム、および、プログラム
　本発明は、ページ識別機能を有する本、当該本を備える演出システム、および、プログラムに関する。
　従来、ページを識別する機能を備えた絵本が開発されている。例えば、特許文献１には、直線上に配列された複数のセンサによって、遮光領域と開口領域の組み合わせを検出してページの識別を行う絵本玩具が記載されている。
実用新案登録第３１１３１１９号公報
　特許文献１に記載の絵本玩具の場合、直線上に配列された複数のセンサで遮光領域と開口領域の組み合わせを検出するために、広い検出領域を設ける必要があった。
　本発明は上記した事情のもとで考え出されたものであって、狭い検出領域でページを識別することができる本を提供することをその目的としている。
　上記課題を解決するため、本発明では、次の技術的手段を講じている。
　本発明の第１の側面によって提供される本は、複数のページを有する印刷ページ部と、前記各ページに設けられた検出領域と、前記各ページを閉じたときに前記検出領域と向い合せになる位置に設けられ、前記検出領域を撮影する撮影手段と、前記撮影手段によって撮影された画像に基づいて、開いているページを識別する識別手段と、前記各ページに対応付けられた情報を記憶している記憶手段と、前記識別手段によって識別されたページに対応する情報に基づいて、演出のための制御を行う制御手段とを備えていることを特徴とする。
　本発明の好ましい実施の形態では、前記識別手段は、前記撮影された画像を２値化画像に変換して、当該２値化画像の所定の位置が白であるか黒であるかによって識別を行う。
　本発明の好ましい実施の形態では、前記識別手段は、前記撮影された画像を２値化画像に変換して、パターンマッチングによって識別を行う。
　本発明の好ましい実施の形態では、前記印刷ページ部は、取り替え可能に設けられており、前記識別手段は、前記撮影手段によって撮影された画像に基づいて、いずれの印刷ページ部が取り付けられているかを識別する。
　本発明の好ましい実施の形態では、前記撮影手段、前記識別手段、前記記憶手段および前記制御手段は、携帯機器の各機能を用いたものである。
　なお、本発明における「携帯機器」とは、スマートフォン、携帯電話、タブレット型コンピュータなどであり、撮影機能と、ＣＰＵおよびメモリを備えている機器である。また、アプリケーションソフトをインストールすることができるカメラなども含まれる。さらに、撮影機能と、ＣＰＵおよびメモリを備えている、本発明の第１の側面によって提供される本のための専用の機器も含まれる。
　本発明の好ましい実施の形態では、前記本は、音声を出力する音声出力手段をさらに備え、前記各ページに対応付けられた情報は音声情報であり、前記制御手段は、前記識別されたページに対応する情報に基づく音声を、前記音声出力手段に出力させる。
　本発明の好ましい実施の形態では、前記本は、通信を行う通信手段をさらに備え、前記制御手段は、前記識別されたページに対応する情報を、前記通信手段に送信させる。
　本発明の第２の側面によって提供される演出システムは、本発明の第１の側面によって提供される本と、前記通信手段が送信した情報を受信する受信手段を備えている家電機器とを備えていることを特徴とする。
　なお、本発明における「家電機器」とは、主に家庭用として使用される電気機械器具であり、照明機器、エアコンなどの白物家電、テレビなどの映像機器、ラジオやスピーカなどの音響機器などがあり、電動カーテンなども含まれる。また、「家電機器」は、通信手段が送信した情報を直接受信するものに限られず、中継装置やネットワークを経由して受信するものも含まれる。
　本発明の第３の側面によって提供される本は、複数のページを有する印刷ページ部と、撮影手段を有する携帯機器を収納する収納部と、前記各ページを閉じたときに、前記撮影手段と向い合せになる位置に設けられる検出領域と、を備えていることを特徴とする。
　本発明の第４の側面によって提供されるプログラムは、本発明の第３の側面によって提供される本の前記収納部に収納される携帯機器にインストールされるプログラムであって、前記携帯機器を、前記撮影手段によって撮影された画像に基づいて、前記本の開いているページを識別する識別手段と、前記各ページに対応付けられた情報を記憶している記憶手段と、前記識別手段によって識別されたページに対応する情報に基づいて、演出のための制御を行う制御手段として機能させることを特徴とする。
　本発明の第５の側面によって提供される演出システムは、本発明の第３の側面によって提供される本と、本発明の第４の側面によって提供されるプログラムとを備えていることを特徴とする。
　本発明によれば、識別手段が、撮影手段によって撮影された画像に基づいて、開いているページを識別する。各ページの検出領域は、各ページを閉じたときに撮影手段と向い合せになる位置に設けられており、従来の検出領域より狭い領域とすることができる。
　本発明のその他の特徴および利点は、添付図面を参照して以下に行う詳細な説明によって、より明らかとなろう。
第１実施形態に係る演出システムの概略構成を説明するための図である。 第１実施形態に係る演出効果付き絵本を説明するための図である。 携帯端末の内部構成を説明するための機能ブロック図である。 ページを識別する方法を説明するための図である。 記憶部に記憶されている演出テーブルの一例を示す図である。 制御部が行う演出処理を説明するためのフローチャートである。 検出領域の他の実施例を説明するための図である。 収納部の他の実施例を説明するための図である。 収納部の他の実施例を説明するための図である。 携帯端末の他の実施例を説明するための図である。 第２および第３実施形態に係る演出効果付き絵本を説明するための図である。
　以下、本発明の実施の形態を、添付図面を参照して具体的に説明する。
　図１は、第１実施形態に係る演出システムの概略構成を説明するための図である。
　演出システムＡは、演出効果付き絵本１を楽しむための演出が行われるシステムであり、演出効果付き絵本１、中継装置４、および、照明機器５、エアコン６、ディスプレイ７、電動カーテン８、スピーカ９などの家電機器を備えている。
　演出効果付き絵本１は、絵本２および携帯端末３を備えており、絵本２の開いているページを識別して、当該ページに対応した演出を行う。演出効果付き絵本１は、通信機能を備えており、通信信号を中継装置４に送信する。演出効果付き絵本１の詳細については後述する。
　中継装置４は、演出効果付き絵本１と家電機器５～９との無線通信を中継するものである。中継装置４は、演出効果付き絵本１より受信した通信信号を家電機器５～９に送信する。本実施形態では、中継装置４と演出効果付き絵本１とはＷｉＦｉ（登録商標）方式による無線通信を行っており、中継装置４と家電機器５～９とはＺｉｇＢｅｅ（登録商標）方式による無線通信を行っている。なお、各無線通信の方式はこれに限られず、Ｂｌｕｅｔｏｏｔｈ（登録商標）方式や、赤外線通信方式など、他の通信方式を利用してもよい。また、中継装置４を設けずに、演出効果付き絵本１と家電機器５～９とが、直接、無線通信を行うようにしてもよい。
　また、各通信は無線通信に限られず、有線通信を利用するようにしてもよい。例えば、中継装置４と演出効果付き絵本１とを通信線で接続して有線通信をするようにしてもよいし、中継装置４と家電機器５～９とは電力線搬送通信（Power Line Communication :PLC）を利用するようにしてもよい。また、演出効果付き絵本１と家電機器５～９とが、直接、有線通信を行うようにしてもよい。また、中継装置４と演出効果付き絵本１とが、インターネット回線を介した通信を行うようにしてもよい。
　照明機器５は、ＬＥＤを備えた照明装置であり、明るさや色を変化させることができる。また、照明機器５は、通信機能を備えており、中継装置４からの通信信号を受信することができる。照明機器５は、中継装置４を介して演出効果付き絵本１より入力される通信信号に応じて、照明のオンオフを制御し、明るさや色を調整する。なお、照明機器５は、蛍光灯または白熱灯を備えた照明装置であってもよい。この場合でも、通信信号に応じて、照明のオンオフを制御することができる。
　エアコン６は、エアコンディショナであり、部屋内の温度や湿度を調整する空調設備である。また、エアコン６は、通信機能を備えており、中継装置４からの通信信号を受信することができる。エアコン６は、中継装置４を介して演出効果付き絵本１より入力される通信信号に応じて、電源のオンオフを制御し、温度や湿度を調整する。なお、エアコン６に代えて、または、加えて、通信機能を備えた扇風機や暖房機器（例えば、電気ヒータなど）を用いるようにしてもよい。
　ディスプレイ７は、画像を表示する表示装置である。また、ディスプレイ７は、通信機能を備えており、中継装置４からの通信信号を受信することができる。ディスプレイ７は、中継装置４を介して演出効果付き絵本１より入力される通信信号に応じて、電源のオンオフを制御し、動画や静止画などの画像を表示する。なお、ディスプレイ７は、通信機能を備えたテレビジョンなどであってもよい。
　電動カーテン８は、電動でカーテンの開閉を行うものである。また、電動カーテン８は、通信機能を備えており、中継装置４からの通信信号を受信することができる。電動カーテン８は、中継装置４を介して演出効果付き絵本１より入力される通信信号に応じて、カーテンの開閉を制御する。
　スピーカ９は、音声を出力するための出力装置である。また、スピーカ９は、通信機能を備えており、中継装置４からの通信信号を受信することができる。スピーカ９は、中継装置４を介して演出効果付き絵本１より入力される通信信号に応じて、電源のオンオフを制御し、音声を出力する。なお、音声出力装置として後述する携帯端末３のスピーカ３４６を利用する場合は、スピーカ９を設けなくてもよい。また、携帯端末３のスピーカ３４６を利用せずに、スピーカ９を利用するようにしてもよい。また、携帯端末３のスピーカ３４６とスピーカ９とで、異なる音声を出力するようにしてもよい。
　なお、家電機器５～９のすべてが揃っている必要はない。また、その他の家電製品を用いるようにしてもよい。
　次に、演出効果付き絵本１の詳細について、図２～６を参照して説明する。
　演出効果付き絵本１は、携帯端末３を絵本２に収納したものである。演出効果付き絵本１は、携帯端末３の機能を利用して、様々な演出を行う。具体的には、撮影機能を利用して、絵本２の各ページに設けられた検出領域（後述）を撮影し、撮影された画像に基づいて、現在開いているページを識別する。そして、識別されたページに対応した音声を、携帯端末３のスピーカから出力する。また、識別されたページに対応した情報を通信信号として、携帯端末３の通信機能を利用し、中継装置４を介して、各家電機器５～９に送信する。通信信号を受信した各家電機器５～９は、識別されたページに対応した情報に基づいて、制御される。例えば、開いているページに火山の噴火に関する記載がされていた場合、照明機器５が照明を赤い光に変更し、エアコン６が高い設定温度で起動されて温風を吹き出し、ディスプレイ７には流れるマグマの映像が表示される。また、携帯端末３の振動機能が働いて、演出効果付き絵本１が振動し、説明の音声が出力される。
　図２は、演出効果付き絵本１を説明するための図である。図２（ａ）は、絵本２の斜視図を示しており、図２（ｂ）は、絵本２に携帯端末３を収納する様子を示している。絵本２に携帯端末３を収納したものが、演出効果付き絵本１である。
　図２（ａ）に示すように、絵本２は、裏表紙部２１、表表紙部２２および印刷ページ部２３を備えている。
　裏表紙部２１は、絵本２の裏表紙（表４）および裏表紙裏（表３）になるものであり、携帯端末３を収納できる厚みを持っている。裏表紙部２１には、携帯端末３を収納するための空洞部分である収納部２１１が設けられている。収納部２１１の裏表紙裏側の面は、開閉可能な蓋２１２になっている。蓋２１２は、左側の長辺が裏表紙部２１の裏表紙裏に固定されており、図２（ｂ）に示すように開くことができる。なお、左側の長辺ではなく、右側の長辺、上側の短辺または下側の短辺が裏表紙部２１の裏表紙裏に固定されるようにしてもよい。閉じたときの蓋２１２の左上には、開口２１３が設けられている。図２（ｂ）に示すように、携帯端末３は、撮影レンズ３３２ａが配置された面を上にして（裏表紙裏側に向けて）、収納部２１１に嵌め込むようにして配置される（図の矢印参照）。そして、蓋２１２を閉じることで収納される。開口２１３は、収納部２１１に収納された携帯端末３の撮影レンズ３３２ａの位置に合わせるように配置されている。
　本実施形態では、絵本２が右開きになっており、撮影レンズ３３２ａが左上に配置された携帯端末３を用いるので、収納された携帯端末３の撮影レンズ３３２ａの位置が、裏表紙部２１の裏表紙裏の左上になるように、収納部２１１を裏表紙部２１の左側に寄せた位置に配置している。これにより、検出領域２３１の配置位置を各ページの邪魔にならない位置にすることができる。例えば、図２の場合、印刷ページ部２３の第１２ページであれば、ページの右上の隅に検出領域２３１が配置されている。なお、収納部２１１の配置場所および配置方向、開口２１３の配置場所は、上述したものに限られない。絵本２の開き方や、用いられる携帯端末３に応じて、適宜、配置すればよい。例えば、撮影レンズ３３２ａが右上に配置された携帯端末３を用いるのであれば、収納部２１１を裏表紙部２１の上側に寄せた位置に横長となるように配置すればよい。この場合、図２（ｂ）に示す携帯端末３を反時計回りに９０°回転させて裏表紙部２１の上側に寄せた状態で配置することになり、携帯端末３の右上に配置された撮影レンズ３３２ａが、裏表紙部２１の裏表紙裏の左上になるように配置される。なお、検出領域２３１の配置位置を気にしないなら、収納部２１１の配置場所および配置方向は、自由に設計すればよい。
　表表紙部２２は、絵本２の表表紙（表１）および表表紙裏（表２）になるものである。表表紙部２２と裏表紙部２１とは、開閉可能なように、表表紙部２２の左端部と裏表紙部２１の右端部とが固着されている。なお、絵本２が左開きの場合、表表紙部２２の右端部が、裏表紙部２１の左端部に固着される。
　印刷ページ部２３は、絵や文字が印刷された各ページで構成されており、裏表紙部２１と表表紙部２２との固着位置（裏表紙部２１の右端部、および、表表紙部２２の左端部）に固着されている。本実施形態では、印刷ページ部２３は、６枚の矩形状の紙からなり、表表紙裏の左のページである第１ページから、裏表紙裏の右のページである第１２ページまでの全１２ページで構成されている。なお、表表紙裏および裏表紙裏にも、絵や文字を印刷するようにしてもよい。各ページの、絵本２を閉じたときに開口２１３に向かい合う位置（偶数ページの場合は各ページの右上の隅であり、奇数ページの場合は各ページの左上の隅）には、検出領域２３１が配置されている。各ページの検出領域２３１には、１～６個の孔２３１ａが設けられている（図４（ａ）参照）。例えば、第１２ページの右上の隅に配置される検出領域２３１には６個の孔２３１ａが設けられている（図４（ａ）左端の図参照）。また、第１１ページの左上の隅に配置される検出領域２３１にも、必然的に６個の孔２３１ａが設けられている。
　図３は、携帯端末３の内部構成を説明するための機能ブロック図である。
　本実施形態に係る携帯端末３は、スマートフォンであり、撮影機能や通信機能など各種機能を備えた携帯型端末装置である。携帯端末３は、制御部（ＣＰＵ）３１、記憶部３２、操作部３３１、撮影部３３２、マイク３３３、ＧＰＳ３３４，ジャイロセンサ３３５、第１通信部３４１、第２通信部３４２、表示部３４３、バイブレータ３４４、ライト３４５、および、スピーカ３４６を備えている。なお、携帯端末３の内部構成は、一般的なスマートフォンのものと共通している。
　操作部３３１は、操作入力のために押圧される複数のボタンおよびタッチパネルを備えている。各ボタンの配置や機能は一般的なスマートフォンと同様である。タッチパネルは、表示画面の表面を被うように設けられている。操作部３３１は、ボタンが押圧された場合にボタンにより異なる操作信号を制御部３１に出力する。制御部３１は入力された操作信号によりいずれのボタンが押圧されたかを認識し、対応する処理を行う。また、操作部３３１は、タッチパネルで検知した接触位置の情報を制御部３１に出力する。制御部３１は入力された接触位置の情報に基づいて、対応する処理を行う。
　撮影部３３２は、画像を撮影するものであり、撮影レンズ３３２ａおよびＣＣＤイメージセンサなどの撮像素子を備えたカメラなどで構成されている。撮影部３３２は、撮影した画像のデータを制御部３１に出力する。制御部３１は、入力された画像データを記憶部３２に記憶したり、所定の画像処理を行う。本実施形態では、撮影部３３２は、検出領域２３１の撮影を行う。
　マイク３３３は、音声を入力するための入力装置である。マイク３３３から入力された音声は音声データに変換されて、制御部３１に出力される。制御部３１は、入力された音声データを記憶部３２に記憶したり、第１通信部３４１から通信回線に出力させたりする。
　ＧＰＳ３３４は、グローバルポジショニングシステムを利用して位置を検出するものである。ＧＰＳ３３４で検出された位置情報は、制御部３１に出力される。制御部３１は、入力された位置情報を記憶部３２に記憶したり、所定の処理に用いる。
　ジャイロセンサ３３５は、角度や加速度を検出するものである。ジャイロセンサ３３５は、携帯端末３の傾きや加速度を検出して、検出したデータを制御部３１に出力する。制御部３１は、入力された加速度などのデータを記憶部３２に記憶したり、所定の処理に用いる。
　第１通信部３４１は、通信回線を介した通信を行うものである。第１通信部３４１は、無線基地局との間で無線通信を行い、当該無線基地局と接続する通信回線に接続する。第１通信部３４１は、受信した通信信号を制御部３１に出力し、制御部３１より入力される通信信号を通信回線に送信する。
　第２通信部３４２は、短距離無線通信を行うものである。本実施形態では、第２通信部３４２は、中継装置４（図１参照）との間で、ＷｉＦｉ（登録商標）方式による無線通信を行っている。第２通信部３４２は、中継装置４より受信した通信信号を制御部３１に出力し、制御部３１より入力される通信信号を中継装置４に送信する。
　表示部３４３は、画像を表示するものであり、例えば液晶表示画面を備えている。表示部３４３は、制御部３１より入力される画像データに基づいた画像を表示する。図２（ｂ）に示す携帯端末３においては、液晶表示画面は裏側の面に配置されている。
　バイブレータ３４４は、例えばモータと重心を偏らせた重りを備えた振動装置であり、制御部３１より入力される制御信号に応じてモータを回転させることで振動する。
　ライト３４５は、例えばＬＥＤを備えた発光装置であり、制御部３１より入力される制御信号に応じて発光する。図２（ｂ）に示す携帯端末３においては、ライト３４５は撮影レンズ３３２ａの隣に配置されている。
　スピーカ３４６は、音声を出力するための出力装置である。スピーカ３４６は、制御部３１より入力される音声データを音声に変換して出力する。
　記憶部３２は、ＲＯＭ、ＲＡＭ、および不揮発性メモリなどを備えている。ＲＯＭは、制御部３１で実行される制御プログラムなどが記憶されるものである。ＲＡＭは、情報が仮に格納されるためのエリアと制御部３１が演算などを行う際に使用するワークエリアを提供するものである。不揮発性メモリは、画像データや音声データなどの各種データを記憶しておくものである。なお、後述する図６のフローチャートに示す演出処理などのプログラムや、図５に示す演出テーブルなどは、アプリケーションソフトとして通信回線を介してダウンロードされ、不揮発性メモリに記憶される。なお、あらかじめＲＯＭなどに記憶しておいてもよい。
　制御部３１は、携帯端末３の各種制御や信号処理を行うものであり、例えば、ＣＰＵを用いて構成されている。また、携帯端末３にアプリケーションソフトがインストールされることにより、制御部３１は、機能的な構成として、画像取得部３１１、ページ識別部３１２、情報読出部３１３、および、演出処理部３１４を備えている。
　画像取得部３１１は、検出領域２３１を撮影した画像を取得するものである。画像取得部３１１は、所定のタイミングで、撮影部３３２に撮影を行わせ、撮影部３３２より入力される画像データを取得する。図２に示すように、絵本２の各ページを閉じたときに、携帯端末３の撮影レンズ３３２ａに向かい合う位置に、各ページの検出領域２３１が配置されているので、撮影部３３２が撮影した画像は、各ページの検出領域２３１を重ね合わせたときの画像になる。
　ページ識別部３１２は、取得した画像データに基づいて、現在開いているページを識別するものである。ページ識別部３１２は、取得した画像データに対してグレイスケール化および２値化を行って、２値化画像に基づいて現在開いているページを識別する。
　図４は、ページを識別する方法を説明するための図である。
　図４（ａ）は、各ページの検出領域２３１の一例を示している。第２ページの検出領域２３１（右端の図参照）には左上に１つの孔２３１ａが設けられている。第４ページの検出領域２３１には左上の孔２３１ａに加えて、右上にも孔２３１ａが設けられている。第４ページと第２ページとを重ねた場合、第４ページの検出領域２３１の左上の孔２３１ａは、第２ページの検出領域２３１の孔２３１ａに重なるように配置されている。第６ページ、第８ページ、第１０ページ、第１２ページと進むにつれ、孔２３１ａが１つずつ増加し、増加した孔２３１ａ以外の孔２３１ａは、それ以前のページの孔２３１ａに重なるように配置されている。
　例えば、絵本２において第８ページと第９ページとを開いている場合、第８ページの右上の隅に、４つの孔２３１ａが設けられた検出領域２３１が配置され、第９ページの左上の隅に、５つの孔２３１ａが設けられた検出領域２３１（第１０ページの検出領域２３１を反転したもの）が配置された状態になる（図４（ｂ）参照）。携帯端末３は、第９ページの後方（図４（ｂ）において紙面に対して奥側）の左寄りに配置されており、撮影レンズ３３２ａに向かい合う位置に検出領域２３１が位置している。なお、図４（ｂ）においては、検出領域２３１を実際より大きめに記載している。撮影レンズ３３２ａと第９ページ（第１０ページ）の検出領域２３１との間には、第１２ページ（第１１ページ）の検出領域２３１（図４（ａ）左端の図参照）が位置しているが、第１２ページの検出領域２３１の６つの孔２３１ａのうち５つの孔２３１ａは、第１０ページの検出領域２３１の５つの孔２３１ａに重なるので、撮影部３３２によって撮影される画像は、第１０ページの検出領域２３１（図４（ａ）左から２つ目の図参照）の５つの孔２３１ａの部分から光が透過してきた５つの丸い部分以外が黒くなった図４（ｃ）のような画像になる。撮影部３３２によって撮影された画像は、画像処理により２値化画像に変換されて、光が透過した部分が白い丸となって、識別しやすくなる。
　開いているページによって、２値化画像は異なり、第１０ページと第１１ページとを開いている場合は、白い丸が６つ表れた画像になり、第２ページと第３ページとを開いている場合は、白い丸が２つ表れた画像になる。
　本実施形態では、２値化画像において、図４（ｄ）に示す点の位置が白であるか黒であるかに基づいて、開いているページを識別する。図４（ｄ）に示す点の位置は、それぞれ、２値化画像において白い丸がある場合にその略中心となる位置としている。２値化画像における、図４（ｄ）に示すある点の位置が白である場合は、当該位置に白い丸があると判断され、ある点の位置が黒である場合は、当該位置に白い丸がないと判断される。これにより、２値化画像に表れている白い丸の個数をカウントすることができる。そして、白い丸の個数によって、開いているページを識別することができる。なお、撮影部３３２によって撮影された画像が少しずれていたとしても、そのずれが白い丸の半径より小さい場合は、白い丸があることを正しく認識することができる。
　例えば、２値化画像が図４（ｃ）の画像の場合、図４（ｄ）に示す点のうち、右下の点の位置は黒になるので、当該位置には白い丸がないと判断され、その他の５つの点の位置はそれぞれ白になるので、当該位置には白い丸があると判断される。したがって、白い丸が５つあるので、第８ページと第９ページが開いていると判断される。
　なお、グレイスケール化や２値化などの画像処理を行うことなく、元の画像データのままで、白い丸があるか否かの判断を行うようにしてもよい。画像処理を行っていない場合でも、白い丸に対応する位置はそれ以外の位置と比べて明度が高くなるので、各位置の明度をしきい値と比較することで、判断することができる。また、白い丸の数ではなく、白い丸の位置に基づいて、開いているページを識別するようにしてもよい。
　なお、ページの識別の手法は、上述したものに限られない。例えば、各ページを開いたときの２値化画像をそれぞれ参照画像として記憶しておき、撮影部３３２によって撮影されて画像処理された２値化画像を参照画像とパターンマッチングさせることで、開いているページを識別するようにしてもよい。各参照画像は、アプリケーションソフトの一部としてインストールしておけばよい。
　図３に戻って、情報読出部３１３は、識別されたページに対応する情報を記憶部３２より読み出すものである。記憶部３２には、各ページに対応する演出のための情報が設定された演出テーブルが記憶されている。
　図５は、記憶部３２に記憶されている演出テーブルの一例を示す図である。例えば、第２～３ページに対応する情報として、「音声２」の音声データが記憶されており、振動をさせることを示す情報（図５においては「○」で示されている）、照明機器５に送信する情報（通信データ１）として照明を赤くすることを示す情報、エアコン６に送信する情報（通信データ２）として温風を吹き出すことを示す情報（実際には、エアコン６を暖房として起動させる情報と、高い設定温度）、ディスプレイ７に送信する情報（通信データ４）として「映像１」の動画情報などが記憶されている。
　演出処理部３１４は、記憶部３２の演出テーブルより読み出された情報に基づいて、各演出処理を行う。例えば、図５に示す演出テーブルの第２～３ページに対応する情報が読み出された場合、「音声２」の音声データがスピーカ３４６に出力され、「音声２」に対応する音声（第２～３ページの記載に対応した音声）がスピーカ３４６より出力され、バイブレータ３４４が振動することで、演出効果付き絵本１全体が振動する。また、第２通信部３４２から中継装置４を介して、照明機器５、エアコン６およびディスプレイ７に、それぞれ対応する情報が通信信号として送信される。照明機器５は、受信した通信信号に基づいて、照明を赤い光に変更する。また、エアコン６は、受信した通信信号に基づいて、高い設定温度で暖房として起動され、温風を吹き出す。ディスプレイ７は、受信した通信信号に基づいて、「映像１」の動画を表示する。
　図６は、制御部３１が行う、ページに対応した演出を行う処理（以下では、「演出処理」とする）を説明するためのフローチャートである。当該演出処理は、携帯端末３のアプリケーションソフトを起動させたときに開始され、アプリケーションソフトが終了されるまで継続される。
　まず、撮影部３３２に撮影を行わせ、撮影部３３２より入力される画像データが取得され（Ｓ１）、取得された画像データに基づいて、現在開いているページが識別される（Ｓ２）。次に、ページが変更されたか否かが判別される（Ｓ３）。ページが変更されていないと判別された場合（Ｓ３：ＮＯ）、ステップＳ１に戻って、所定の時間が経過後、再度撮影を行わせる。ページが変更されるまでは、ステップＳ１～Ｓ３が繰り返される。
　携帯端末３のアプリケーションソフトを起動させてから、携帯端末３を収納部２１１に収納する間や、絵本２の表紙が閉じられている間にも、撮影部３３２による撮影は行われる。この時撮影される画像は、検出領域２３１を撮影したものではないので、ページが識別されない。ステップＳ２でページが識別できなかった場合も、ステップＳ１に戻って、再度撮影が行われる。
　ステップＳ３において、ページが変更されたと判別された場合（Ｓ３：ＹＥＳ）、識別されたページに対応する情報が、記憶部３２の演出テーブルより読み出される（Ｓ４）。読み出された音声データはスピーカ３４６に出力され、対応する音声が出力される（Ｓ５）。また、読み出された通信データは第２通信部３４２に出力され、通信信号として中継装置４に送信される（Ｓ６）。さらに、振動させることを示す情報が読み出されたか否かが判別され（Ｓ７）、読み出された場合（Ｓ７：ＹＥＳ）はバイブレータ３４４がＯＮにされ（Ｓ８）、読み出されなかった場合（Ｓ７：ＮＯ）はバイブレータ３４４がＯＦＦにされ（Ｓ９）、ステップＳ１に戻る。なお、制御部３１が行う演出処理は、上述したものに限定されない。
　本実施形態においては、撮影部３３２によって撮影された画像に基づいて、制御部３１が開いているページを識別する。各ページの検出領域２３１は、各ページを閉じたときに撮影部３３２の撮影レンズ３３２ａと向い合せになる位置に設けられている。検出領域２３１は、従来のものより狭い領域とすることができる。また、本実施形態においては、撮影レンズ３３２ａの位置が裏表紙部２１の裏表紙裏の左上の隅になるように、携帯端末３を収納する収納部２１１が配置されている。これにより、検出領域２３１の配置位置を各ページの邪魔にならない位置にすることができる。
　本実施形態においては、制御部３１が識別したページに応じて、様々な演出を行うことができる。したがって、読者は、様々な演出により、絵本２の内容を臨場感を持って楽しむことができる。
　本実施形態においては、携帯端末３を絵本２に収納して、携帯端末３が有する機能を利用している。したがって、絵本２自体に撮影機能や通信機能などを設ける場合より、はるかに低コストで絵本２を製造することができる。また、携帯端末３が多機能であれば、その機能に合わせて、演出効果付き絵本１による演出を、さらに多彩なものにすることができる。
　なお、上記第１実施形態においては、検出領域２３１を１～６個の孔２３１ａが設けられたものとした場合について説明したが、これに限られない。印刷ページ部２３のページ数が多い場合、孔２３１ａの数を増やすことで対応することができる。また、孔２３１ａの数が同じでも、孔２３１ａの配置位置によって識別するようにしてもよい。また、検出領域２３１を、ページによって太さの異なるスリット２３１ｂを設けたものとしてもよい（図７（ａ）参照）。この場合でも、開いているページによって撮影される画像が異なってくるので、開いているページを識別することができる。また、撮影された画像の白い領域の面積で識別するようにしてもよい。また、スリット２３１ｂの形状を、例えば図７（ｂ）に示すもののようにすることで、印刷ページ部２３のページ数の増加に対応することができる。
　上記第１実施形態においては、携帯端末３を、裏表紙部２１の裏表紙裏側から収納部２１１に収納する場合について説明したが、これに限られない。例えば、図８（ａ）に示すように、裏表紙側の面に蓋２１２を設けて、裏表紙側から収納するようにしてもよい。また、図８（ｂ）に示すように、裏表紙部２１の側面に側面開口部２１４を設けて、携帯端末３を側面開口部２１４から収納部２１１に収納するようにしてもよい。なお、側面開口部２１４は、裏表紙部２１の上側の側面や下側の側面に設けるようにしてもよい。
　また、図９に示すように、台紙２１６に設けられた収納部２１７に携帯端末３を収納し、携帯端末３が収納された台紙２１６を、裏表紙部２１の側面に設けられた側面開口部２１４から収納部２１１に収納するようにしてもよい。この場合、用いられる携帯端末３に応じて収納部２１７が配置された台紙２１６をそれぞれ用意することにより、絵本２を共通して用いることができる。
　上記第１実施形態においては、携帯端末３がスマートフォンである場合について説明したが、これに限られない。携帯端末３は、絵本２に収納することができる大きさで、撮影機能を備え、アプリケーションソフトをインストールするためにＣＰＵおよびメモリを備えていればよいので、例えば、携帯電話やタブレット型コンピュータなどであってもよい。また、アプリケーションソフトをインストールすることができるカメラなどを、携帯端末３の代わりに用いるようにしてもよい。
　また、図１０（ａ）に示すように、撮影部３３２、制御部３１、記憶部３２、第２通信部３４２およびスピーカ３４６に対応するモジュールを備えている、演出効果付き絵本１のための専用の機器を携帯端末３として用いるようにしてもよい。また、専用の携帯端末３は、裏表紙部２１の裏表紙裏の所定の位置に、貼り付けたり、クリップなどで固定するようにしてもよい（図１１（ｂ）参照）。携帯端末３を内部に収納する必要がないので、裏表紙部２１の厚さを薄くすることができる。この場合、専用の携帯端末３を固定する場所が収納部２１１であり、当該場所に専用の携帯端末３を固定することが収納することである。なお、専用の携帯端末３の形状は限定されず、より薄いカード形状としてもよい。また、図１１（ｃ）に示すように、断面が略Ｕ字形状として、裏表紙部２１を挟み込むように固定するようにしてもよい。また、スマートフォンなどの携帯端末３の場合でも、裏表紙部２１の裏表紙裏の所定の位置に、貼り付けたり、クリップなどで固定するようにしてもよい
　上記第１実施形態においては、通信機能を利用して各家電機器５～９を操作しているが、通信機能を利用しないようにしてもよい。この場合、通信機能を備えた家電機器５～９などや、中継装置４を用意する必要がない。携帯端末３自体の機能だけでも、いろいろな演出を楽しむことができる。
　上記第１実施形態においては、携帯端末３のスピーカ３４６から音声を出力し、バイブレータ３４４で振動させる演出を行っているが、これに限られない。例えば、開口２１３を少し広げて、撮影レンズ３３２ａの隣に配置されているライト３４５を演出に用いるようにしてもよい。また、裏表紙部２１の裏表紙裏側に開口を設けて、液晶表示画面に画像を表示するようにしてもよい。また、第１通信部３４１を利用し、インターネットに接続して新たなプログラムや情報を入手したり、電話をかけるようにしてもよい。また、携帯端末３に備えられている他の機能を利用するようにしてもよい。
　また、操作部３３１やマイク３３３、ＧＰＳ３３４、ジャイロセンサ３３５から入力される情報を、演出に利用するようにしてもよい。例えば、絵本２のページに記載されたドアをノックするように促して、マイク３３３より入力される音声データとジャイロセンサ３３５より入力される加速度データとから、ノックがされたか否かを判別して、判別結果により演出を変えるようにしてもよい。また、ＧＰＳ３３４より入力される位置情報から、例えば、現在地が大阪であると判断されると、音声データとして大阪弁のデータを用いるようにしてもよい。また、携帯端末３に備えられている他のセンサ類を利用するようにしてもよい。
　最後のページ（図２の場合は第１２ページ）が開かれた場合、撮影レンズ３３２ａの前には遮るものがなくなるので、撮影された画像には読者の顔が含まれる。当該画像から読者の顔を認識して、男の子だと判断された場合は「坊やおやすみ。」、女の子だと判断された場合は「お嬢ちゃんおやすみ。」との音声を出力して、電動カーテン８によってカーテンを閉め、照明機器５を消灯して、携帯端末３の電源をオフにするようにしてもよい。
　上記第１実施形態においては、印刷ページ部２３が、裏表紙部２１に固着されている場合について説明したが、これに限られない。印刷ページ部２３を取り替え可能とした場合を、第２実施形態として以下に説明する。
　図１１（ａ）は第２実施形態に係る絵本２’を説明するための図である。同図において、図２（ａ）に示す絵本２と同一または類似の要素には、同一の符号を付している。
　絵本２’は、印刷ページ部２３および表表紙部２２を取り替え可能としている点で、第１実施形態に係る絵本２と異なる。
　裏表紙部２１の右端には、複数のリング状の止め具２１５が設けられている。印刷ページ部２３の各ページには、裏表紙部２１の止め具２１５に通すための孔２３２が設けられている。印刷ページ部２３は、止め具２１５を孔２３２に通して、ページをめくれるようにして、裏表紙部２１の右端に固定されている。また、表表紙部２２にも、印刷ページ部２３と同様に、孔が設けられており、印刷ページ部２３と同様にして、裏表紙部２１の右端に固定されている。止め具２１５は、リングの一部が開放できるようになっている。印刷ページ部２３および表表紙部２２は、止め具２１５を開放することで取り外すことができる。また、別の印刷ページ部２３および表表紙部２２を取り付けることができる。なお、表表紙部２２は取り替えずに、印刷ページ部２３だけを取り換えるようにしてもよい。
　印刷ページ部２３を取り換えた場合、携帯端末３の操作部３３１を操作して、演出テーブルを変更することで、印刷ページ部２３の内容に対応した演出を行うようにすることができる。また、印刷ページ部２３を識別して、対応する演出テーブルを用いるようにしてもよい。第１ページ（第２ページ）の検出領域２３１（図４（ａ）右端の図参照）の孔２３１ａの位置を異ならせれば、第１ページを開いたときに撮影された画像において、白い丸がどの位置にあるかで、印刷ページ部２３を識別することができる。例えば、図４の例の場合、６種類の印刷ページ部２３を識別することができる。なお、第１ページ以外のページの検出領域２３１の孔２３１ａの位置も、第１ページの検出領域２３１の孔２３１ａの位置に応じて変更する必要がある。
　第２実施形態においては、裏表紙部２１に固定される印刷ページ部２３を取り替えることができる。第１実施形態に係る絵本２のように、印刷ページ部２３と裏表紙部２１とが一体になっている場合は、複数の内容を揃えるためには、その数だけ絵本２を揃える必要がある。しかし、第２実施形態に係る絵本２’の場合は、裏表紙部２１を共通に用いるようにして、内容の数だけ印刷ページ部２３のみを揃えればよい。したがって、多くの内容を揃える場合、第２実施形態に係る絵本２’の方が、第１実施形態に係る絵本２よりコストを抑制することができる。
　なお、裏表紙部２１に印刷ページ部２３を固定する方法は、上述したものに限られない。印刷ページ部２３の各ページをめくれるようにして、裏表紙部２１に固定することができ、かつ、印刷ページ部２３が裏表紙部２１から取り外しできるようになる方法であればよい。例えば、クリップや面ファスナーなどで、印刷ページ部２３を裏表紙部２１に固定するようにしてもよい。
　上記第１および第２実施形態においては、絵本２（２’）に携帯端末３を収納することで演出効果付き絵本１を構成する場合について説明したが、これに限られない。絵本自体に撮影機能や通信機能などを設けることで、演出効果付き絵本とした場合を、第３実施形態として以下に説明する。
　図１１（ｂ）は第３実施形態に係る演出効果付き絵本を説明するための図である。同図において、図２（ｂ）に示す演出効果付き絵本１と同一または類似の要素には、同一の符号を付している。
　演出効果付き絵本１’は、裏表紙部２１’に撮影機能や通信機能などを設けた点で、第１実施形態に係る演出効果付き絵本１と異なる。
　裏表紙部２１’の左上の隅には撮影部３３２が設けられており、裏表紙裏側に設けられた開口の位置に撮影レンズ３３２ａが配置されている。また、裏表紙部２１’の内部には、制御部３１、記憶部３２、第２通信部３４２およびスピーカ３４６に対応するモジュールが埋め込まれている。
　第３実施形態においては、絵本自体に撮影機能や通信機能などが設けられているので、携帯端末３を別途用意する必要がない。
　なお、裏表紙部２１’の内部に、バイブレータ３４４やジャイロセンサ３３５などのモジュールも埋め込むようにしてもよい。
　また、第３実施形態に係る演出効果付き絵本１’も、第２実施形態のように、印刷ページ部２３を取り替え可能にしてもよい。
　上記第１ないし第３実施形態においては、本発明を絵本に適用した場合について説明したが、これに限られず、絵本以外の本にも適用することができる。例えば、本発明を写真集に適用して、開いたページに掲載されている写真に対応した演出を行うようにしてもよい。また、本発明は、小説や実用書などの本にも適用することができる。
　本発明に係る本、当該本を備える演出システムおよびプログラムは、上述した実施形態に限定されるものではない。本発明に係る本、当該本を備える演出システムおよびプログラムの各部の具体的な構成は、種々に設計変更自在である。

Claims (11)

  1. 　複数のページを有する印刷ページ部と、
    　前記各ページに設けられた検出領域と、
    　前記各ページを閉じたときに前記検出領域と向い合せになる位置に設けられ、前記検出領域を撮影する撮影手段と、
    　前記撮影手段によって撮影された画像に基づいて、開いているページを識別する識別手段と、
    　前記各ページに対応付けられた情報を記憶している記憶手段と、
    　前記識別手段によって識別されたページに対応する情報に基づいて、演出のための制御を行う制御手段と、
    を備えていることを特徴とする本。
  2. 　前記識別手段は、前記撮影された画像を２値化画像に変換して、当該２値化画像の所定の位置が白であるか黒であるかによって識別を行う、
    請求項１に記載の本。
  3. 　前記識別手段は、前記撮影された画像を２値化画像に変換して、パターンマッチングによって識別を行う、
    請求項１に記載の本。
  4. 　前記印刷ページ部は、取り替え可能に設けられており、
    　前記識別手段は、前記撮影手段によって撮影された画像に基づいて、いずれの印刷ページ部が取り付けられているかを識別する、
    請求項１ないし３のいずれかに記載の本。
  5. 　前記撮影手段、前記識別手段、前記記憶手段および前記制御手段は、携帯機器の各機能を用いたものである、
    請求項１ないし４のいずれかに記載の本。
  6. 　音声を出力する音声出力手段をさらに備え、
    　前記各ページに対応付けられた情報は音声情報であり、
    　前記制御手段は、前記識別されたページに対応する情報に基づく音声を、前記音声出力手段に出力させる、
    請求項１ないし５のいずれかに記載の本。
  7. 　通信を行う通信手段をさらに備え、
    　前記制御手段は、前記識別されたページに対応する情報を、前記通信手段に送信させる、
    請求項１ないし６のいずれかに記載の本。
  8. 　請求項７に記載の本と、
    　前記通信手段が送信した情報を受信する受信手段を備えている家電機器と、
    を備えていることを特徴とする演出システム。
  9. 　複数のページを有する印刷ページ部と、
    　撮影手段を有する携帯機器を収納する収納部と、
    　前記各ページを閉じたときに、前記撮影手段と向い合せになる位置に設けられる検出領域と、
    を備えていることを特徴とする本。
  10. 　請求項９に記載の本の前記収納部に収納される携帯機器にインストールされるプログラムであって、
    　前記携帯機器を、
    　前記撮影手段によって撮影された画像に基づいて、前記本の開いているページを識別する識別手段と、
    　前記各ページに対応付けられた情報を記憶している記憶手段と、
    　前記識別手段によって識別されたページに対応する情報に基づいて、演出のための制御を行う制御手段と、
    して機能させることを特徴とするプログラム。
  11. 　請求項９に記載の本と、請求項１０に記載のプログラムと、
    を備えていることを特徴とする演出システム。
PCT/JP2015/072730 2014-08-12 2015-08-11 本、当該本を備える演出システム、および、プログラム WO2016024582A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016542583A JP6568529B2 (ja) 2014-08-12 2015-08-11 本、当該本を備える演出システム、および、プログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-164309 2014-08-12
JP2014164309 2014-08-12

Publications (1)

Publication Number Publication Date
WO2016024582A1 true WO2016024582A1 (ja) 2016-02-18

Family

ID=55304209

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/072730 WO2016024582A1 (ja) 2014-08-12 2015-08-11 本、当該本を備える演出システム、および、プログラム

Country Status (2)

Country Link
JP (1) JP6568529B2 (ja)
WO (1) WO2016024582A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102240820B1 (ko) * 2020-04-22 2021-04-15 김명란 스마트기기 수납용 서적

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6626181B1 (ja) * 2018-11-13 2019-12-25 株式会社バンダイ 演出出力玩具、演出出力玩具セット、及び演出出力玩具用の操作具

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0613900U (ja) * 1992-07-24 1994-02-22 株式会社タカラ ゲーム的要素を取り入れた絵本
JPH0737654U (ja) * 1993-12-21 1995-07-11 李宜洋 本と音声装置の結合体
JP3031468U (ja) * 1994-10-07 1996-11-29 綾子 根本 携帯電話収納ホルダーを一体化したビジネス手帳ケース
JPH099362A (ja) * 1995-06-15 1997-01-10 Sony Corp 絵本類及びこの絵本類用のバインダー
JP2003280679A (ja) * 2002-03-18 2003-10-02 Syhitech Co Ltd 音声図書ユニット
JP3107027U (ja) * 2004-08-04 2005-01-27 株式会社アイプラネット 冊子読み聞かせ装置
JP2006047419A (ja) * 2004-07-30 2006-02-16 Konami Co Ltd 知育用電子装置及び領域指定装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0613900U (ja) * 1992-07-24 1994-02-22 株式会社タカラ ゲーム的要素を取り入れた絵本
JPH0737654U (ja) * 1993-12-21 1995-07-11 李宜洋 本と音声装置の結合体
JP3031468U (ja) * 1994-10-07 1996-11-29 綾子 根本 携帯電話収納ホルダーを一体化したビジネス手帳ケース
JPH099362A (ja) * 1995-06-15 1997-01-10 Sony Corp 絵本類及びこの絵本類用のバインダー
JP2003280679A (ja) * 2002-03-18 2003-10-02 Syhitech Co Ltd 音声図書ユニット
JP2006047419A (ja) * 2004-07-30 2006-02-16 Konami Co Ltd 知育用電子装置及び領域指定装置
JP3107027U (ja) * 2004-08-04 2005-01-27 株式会社アイプラネット 冊子読み聞かせ装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
CREATIVEHOPE, INC.: "Sensory Fiction I Monogatari ni Awasete Enshutsu suru Hon", TECH_PURPLE, 28 March 2014 (2014-03-28), Retrieved from the Internet <URL:http://techtech.info/2014/03/sensory-fiction.html> [retrieved on 20151020] *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102240820B1 (ko) * 2020-04-22 2021-04-15 김명란 스마트기기 수납용 서적
WO2021215839A1 (ko) * 2020-04-22 2021-10-28 Kim Myung Ran 스마트기기 수납용 서적
TWI784487B (zh) * 2020-04-22 2022-11-21 金明蘭 智慧型設備收納用書籍
CN115397675A (zh) * 2020-04-22 2022-11-25 金明兰 智能设备收纳用书籍
US20230158824A1 (en) * 2020-04-22 2023-05-25 Myungran Kim Book with storage for smart devices
JP2023522096A (ja) * 2020-04-22 2023-05-26 キム、ミュン ラン スマート機器収納用の書籍

Also Published As

Publication number Publication date
JPWO2016024582A1 (ja) 2017-07-27
JP6568529B2 (ja) 2019-08-28

Similar Documents

Publication Publication Date Title
JP6315855B2 (ja) 電子機器制御方法、電子機器制御装置、コンピュータプログラム、及びコンピュータ読み取り可能な記憶媒体
US9927223B2 (en) Distance image acquisition apparatus and distance image acquisition method
JP5764387B2 (ja) 遠隔操作装置、遠隔制御システムおよび制御プログラム
CN109891871A (zh) 信息处理终端
KR20170018294A (ko) 기기를 제어하는 방법, 장치, 프로그램 및 기록매체
KR102034548B1 (ko) 전자 장치 및 이의 제어 방법
JP6104143B2 (ja) 機器制御システム、および、機器制御方法
CN108197299B (zh) 一种基于手持拍照设备的拍照搜题方法及系统
CA2602722A1 (en) Manipulable interactive devices
KR20110047398A (ko) 영상제공시스템 및 그 영상제공방법
JP6568529B2 (ja) 本、当該本を備える演出システム、および、プログラム
KR20160014513A (ko) 모바일 디바이스에서 촬영된 전자 기기와 페어링하는 방법 및 장치
JP2019004243A (ja) 表示システム、表示装置、及び、表示システムの制御方法
CN108885619A (zh) 用于多语言交互式自学的方法和装置
KR20160024848A (ko) 이미지를 이용한 리모컨 프로그래밍
CN104239842B (zh) 一种实现视觉识别的方法、装置和系统
JP6821786B2 (ja) ポートレート写真システムを備えるフィッティングルーム、およびコンピュータプログラム
US20180095540A1 (en) Illumination device
WO2013111278A1 (ja) 画像記録装置、画像記録方法、画像記録用プログラム及び情報記録媒体
JP2015070594A (ja) 電子機器及びその制御プログラム
KR20130109777A (ko) 얼굴 인식 기반의 근태 관리를 위한 장치 및 방법
JP6624235B2 (ja) 情報処理装置、撮像装置、撮像システム、情報処理装置の制御方法およびプログラム
JP5893717B2 (ja) 電子機器及びその制御プログラム
KR20120088966A (ko) 키오스크를 이용한 사진 촬영 시스템 및 방법
JP2016178403A (ja) 情報出力装置、情報出力方法、及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15831926

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016542583

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15831926

Country of ref document: EP

Kind code of ref document: A1