WO2021090445A1 - 案内文生成装置、案内文生成システム、案内文生成方法、及びプログラム - Google Patents
案内文生成装置、案内文生成システム、案内文生成方法、及びプログラム Download PDFInfo
- Publication number
- WO2021090445A1 WO2021090445A1 PCT/JP2019/043702 JP2019043702W WO2021090445A1 WO 2021090445 A1 WO2021090445 A1 WO 2021090445A1 JP 2019043702 W JP2019043702 W JP 2019043702W WO 2021090445 A1 WO2021090445 A1 WO 2021090445A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- stairs
- information
- walking
- guide text
- staircase
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 37
- 230000001788 irregular Effects 0.000 claims description 16
- 230000001771 impaired effect Effects 0.000 description 18
- 238000005452 bending Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000001174 ascending effect Effects 0.000 description 3
- 230000009194 climbing Effects 0.000 description 3
- 238000009434 installation Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
- G06F40/55—Rule-based translation
- G06F40/56—Natural language generation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/20—Instruments for performing navigational calculations
- G01C21/206—Instruments for performing navigational calculations specially adapted for indoor navigation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
Definitions
- the present invention relates to a technique for generating a guide text that supports walking of a visually impaired person or the like.
- a guidance system that supports walking of visually impaired people has been provided using terminals such as smartphones that can acquire location information.
- terminals such as smartphones that can acquire location information.
- a caregiver who makes a visually impaired person carry a camera such as a video camera and a voice communication terminal and resides in a service center based on the video, audio, and position information transmitted from the visually impaired person.
- a system that provides voice guidance Discloses a system that provides voice guidance.
- Non-Patent Document 1 discloses a guidance system that presents voice guidance to visually impaired persons in real time using a smartphone.
- the conventional guidance system has a problem that it is not possible to provide appropriate guidance when a visually impaired person goes up and down stairs.
- a caregiver in a remote place acts as a visually impaired person's eyes to provide directions, but since the information visible from a video camera is limited, the caregiver can take stairs. Even if you can recognize that there is, you cannot recognize what kind of stairs it is. Therefore, the caregiver cannot inform the visually impaired person in advance of guidance on walking on the stairs and guidance on which direction to proceed after going up and down the stairs.
- Non-Patent Document 1 it is only possible to guide a visually impaired person to the position of the stairs and whether to go up or down when approaching the start point of the stairs.
- the present invention has been made in view of the above points, and an object of the present invention is to provide a technique capable of generating appropriate guidance when a user such as a visually impaired person walks on stairs.
- an acquisition means for acquiring staircase information about a staircase existing on a path on which a user moves from a storage unit and
- a guide text generation device including a guide text for walking on stairs and a generation means for generating a guide text for walking after going up and down the stairs based on the stairs information and the route is provided.
- a technology that enables a user such as a visually impaired person to generate appropriate guidance when walking on stairs is provided.
- FIG. 1 is a configuration diagram of a guide text generator 100 according to an embodiment of the present invention.
- the guidance sentence generation device 100 includes a hierarchical movement route generation unit 110, a staircase information storage unit 120, a presentation sentence generation unit 130, an input unit 140, an output unit 150, and a position information acquisition unit 170.
- the guidance text generation device 100 has a position information acquisition unit 170 that acquires its own current position in addition to the guidance text generation function for hierarchical movement according to the present invention. .. Further, it is assumed that the presentation sentence generation unit 130 has a function of navigating to the user based on the current position.
- the navigation function itself is an existing technology as disclosed in Non-Patent Document 1, for example.
- the guidance text generator 100 has a position information acquisition unit and a navigation function.
- the guide text generation device 100 may have only a guide text generation function for performing hierarchical movement.
- the guidance text generated by the guidance text generation device 100 is provided to a navigation system provided separately from the guidance text generation device 100. Further, in this case, for example, the user confirms the guidance text generated by the guidance text generation device 100 in advance before walking, and grasps the hierarchical movement route in advance.
- the guidance text generation device 100 may be one device or a system including a plurality of devices. When the guidance text generation device 100 is a system including a plurality of devices, the guidance text generation device 100 may be called the guidance text generation system 100.
- the guidance text generation device 100 is, for example, a smartphone, a tablet, or the like held by the user, and the user presents the guidance text by the guidance text generation device 100 while walking. Can receive.
- the input unit 140 and the output unit 150 are composed of, for example, a touch panel (character input / selection, image output), a microphone (audio input), a speaker (audio output), a camera (image input), and the like.
- the position information acquisition unit 170 is composed of a GPS receiver, a sensor, and the like included in the smartphone.
- the outline of the operation of each part of the guidance text generator 100 is as follows.
- the example of the stairs information and the details of creating the guide text will be explained in detail with reference to the flowchart in the explanation of the operation example.
- the input unit 140 receives the input of the departure place and the destination by characters or voice, and passes the information of the departure place and the destination and the instruction to generate the hierarchical movement route to the hierarchical movement route generation unit 110.
- the hierarchical movement route generation unit 110 inputs the information of the departure place and the destination, and outputs the route information, the stairs information, and the hierarchical movement route for each staircase.
- the hierarchical movement route generation unit 110 calculates a route from a departure point to a destination by referring to a map information database on the network (or included in the guide text generation device 100), for example.
- the calculated route information includes the positions of one or more stairs and the stair name of each stair.
- the map information database here also includes information on the inside of the building, and the route can be calculated even if the departure point / destination is inside the building.
- the hierarchical movement route generation unit 110 acquires stairs information for each staircase on the route on which the user moves from the stairs information storage unit 120, and based on the acquired stairs information and information on the route on which the user moves, the departure point.
- a hierarchical movement route is generated for each staircase on the route from to the destination, that is, the route on which the user moves, and the hierarchical movement route for each staircase is passed to the presentation sentence generation unit 130.
- the information on the route on which the user travels is also passed to the presentation sentence generation unit 130.
- the position information acquisition unit 170 passes the current position information to the presentation sentence generation unit 130.
- the staircase information storage unit 120 may be outside the guide text generation device 100.
- the staircase information storage unit 120 may be a database server connected to the guidance text generator 100 via a network.
- the presentation sentence generation unit 130 inputs the information of the current position, the information of the route from the departure point to the destination, and the hierarchical movement route for each staircase, and outputs the guidance sentence.
- the output unit 140 receives the guidance text as an input and outputs the guidance text by voice or the like. In a situation where the user holds the guidance sentence generation device 100 and starts walking, the presentation sentence generation unit 130, for example, "uses this passage” based on the information of the current position and the route from the departure point to the destination. If you go straight, there will be a hit, and you will turn right there. ”The guidance text is generated, passed to the output unit 140, and the output 140 outputs the guidance text by voice. This provides navigation to the user.
- the presentation sentence generation unit 130 provides a guidance sentence about going up and down the stairs based on the hierarchical movement route passed from the hierarchical movement route generation unit 110. Generate.
- the generated guidance text is passed to the output unit 140 and output by voice. It should be noted that the output by voice is an example, and the output may be performed by other than voice.
- This guide text is intended to make it easier for the user to imagine the structure of the stairs going up and down before the user actually goes up and down the stairs.
- the input unit 130 is always waiting to receive the guidance end command, and when the guidance end command is input, the presentation sentence generation unit 130 may immediately end the processing of the guidance sentence generation device 100. Good.
- the guidance text generation device 100 may be a stationary PC that is not supposed to be carried around.
- the user can be presented with a guide text in advance and can grasp what kind of structure the stairs are going up and down.
- the guide text generator 100 is a system composed of a plurality of devices
- the terminal 160 having the input unit 140 and the output unit 150 is a smartphone, a tablet, or the like held by the user, and the hierarchical movement route generation unit 110.
- the device having the staircase information storage unit 120 and the presentation sentence generation unit 130 is a server connected to the terminal 160 via a network.
- the position information acquisition unit 170 is included in the terminal 160, and the acquired position information is notified to the server.
- the above server may be called a guidance text generation device or a guidance text generation system.
- the user can receive the guidance text from the terminal 160 while walking, for example.
- the operation of each part is the same as the operation described above.
- the guidance text generator (including the above server) can be realized by, for example, causing a computer to execute a program describing the processing contents described in the present embodiment.
- this "computer” may be a virtual machine on the cloud.
- the "hardware” described here is virtual hardware.
- the guidance text generator can be realized by executing a program corresponding to the processing executed by the guidance text generator using hardware resources such as a CPU and a memory built in the computer.
- the above program can be recorded on a computer-readable recording medium (portable memory, etc.), stored, and distributed. It is also possible to provide the above program through a network such as the Internet or e-mail.
- FIG. 2 is a diagram showing an example of the hardware configuration of the above computer.
- the computer of FIG. 2 has a drive device 1000, an auxiliary storage device 1002, a memory device 1003, a CPU 1004, an interface device 1005, a display device 1006, an input device 1007, and the like, which are connected to each other by a bus B, respectively.
- the program that realizes the processing on the computer is provided by, for example, a recording medium 1001 such as a CD-ROM or a memory card.
- a recording medium 1001 such as a CD-ROM or a memory card.
- the program is installed in the auxiliary storage device 1002 from the recording medium 1001 via the drive device 1000.
- the program does not necessarily have to be installed from the recording medium 1001, and may be downloaded from another computer via the network.
- the auxiliary storage device 1002 stores the installed program and also stores necessary files, data, and the like.
- the memory device 1003 reads and stores the program from the auxiliary storage device 1002 when the program is instructed to start.
- the CPU 1004 realizes the function related to the guidance text generation device 100 according to the program stored in the memory device 1003.
- the interface device 1005 is used as an interface for connecting to a network.
- the display device 1006 displays a programmatic GUI (Graphical User Interface) or the like.
- the input device 1007 is composed of a keyboard, a mouse, buttons, a touch panel, and the like, and is used for inputting various operation instructions.
- step S1 the input unit 140 accepts the input of the names of the departure place and the destination, and passes the received information to the hierarchical movement route generation unit 110. More specifically, the input unit 140 instructs the hierarchical movement route generation unit 110 to generate a hierarchical movement route, which is a route of stairs for performing hierarchical movement, which passes from the departure point to the destination. Notify.
- the instructions include textual information on the names of origins and destinations. The text information of the name of the departure place is described as "departure place", and the text information of the name of the destination is described as "destination".
- the input method to the input unit 140 may be character input or selective input by keyboard operation, touch operation, or the like, or voice input (the input voice is converted into text information by voice recognition). , Input methods other than these may be used.
- step S2 the hierarchical movement route generation unit 110 calculates the route from the departure point to the destination based on the departure point and the destination, and acquires the staircase information for each staircase on the route from the staircase information storage unit 120. To do.
- Figure 5 shows an example of staircase information.
- the stairs information includes the stair name, the type of stairs, the installation floor, any of the landing / turning corners, the number of landings / turning corners, the turning direction, the turning angle, the rotation direction, and the number of steps. ..
- the stairs name is the name of the stairs on the route that the user moves.
- the type of stairs takes a value such as a straight staircase, a turn-back staircase, or a folded staircase.
- FIG. 6 shows an example of a folding staircase (a), a circular staircase (b), and a spiral staircase (c).
- the staircase shown in FIG. 6 is an example. Other than those shown in the figure, there are, for example, curved stairs and turn-back stairs.
- the installation floor is the floor where the corresponding stairs are located.
- the installation floors of the stairs that go up from the 1st basement floor to the 1st floor are the 1st basement floor and the 1st floor.
- the landing is a flat place located between the steps of the stairs and longer than the depth of one step.
- the corner is a place where the direction is changed while going up and down the steps at a place other than the landing.
- the bending direction, bending angle, and rotation direction are those when the stairs are viewed from the specified direction.
- the “turning direction” is on the right, and " The "bending angle” is 90 degrees.
- the specified direction is specified for each staircase, and any specified method may be used.
- the number of steps for example, when there are two landings (from the bottom to the first landing and the second landing), the number of steps from the beginning of the stairs to the first landing and from the first landing to the second landing And the number of steps from the second landing to the end of the stairs. That is, the number of steps of each of a plurality of stairs formed by dividing the stairs at a landing (or a corner).
- the information shown in FIG. 5 may be stored as text information or may be stored as a value associated with the text information.
- step S3 the hierarchical movement route generation unit 110 generates a hierarchical movement route for each staircase on the route to be moved by the user based on the route information and the staircase information, and generates a presentation sentence for each staircase. Hand over to unit 130. At this time, the information on the route on which the user travels is also passed to the presentation sentence generation unit 130.
- the passed hierarchical movement route for each staircase and route information are stored in a storage means such as a memory in the presentation sentence generation unit 130.
- FIG. 7 shows an example of a hierarchical movement route generated by the hierarchical movement route generation unit 110.
- This example shows the case where the stairs on the route are "underground hall” and “emergency stairs”, and there are two hierarchical movement routes, "underground hall up” and “emergency stairs down”. It is shown that.
- the information on the hierarchical movement route is used for generating the guidance text, as will be described later.
- Hierarchical movement routes include route name, type of stairs, position of stairs, up / down, destination floor, landing / turn, number of landings / turns, turn direction, turn angle, rotation direction, direction to go after going up and down, It is included.
- the stairs information is used as it is for the type of stairs, landing / corner, and number of landings / corners.
- the hierarchical movement route generation unit 110 determines the position of the stairs when the user reaches the front of the stairs (at the position of going straight from the user's point of view) based on the route the user moves. Whether it is on the right or on the right, etc.), and whether to go up or down the stairs is calculated. In addition, if the up / down is known, the destination floor can be calculated from the floor where the stairs information is installed. The route name is generated by adding the calculation result of ascending / descending to the stairs name of the stairs information.
- the stairs information can be used as it is. If the direction based on the route the user moves is opposite to the specified direction, the direction of the stairs information may be reversed.
- the "turning direction” of the stairs in the underground hall of the stairs information shown in FIG. 5 is the bending direction when the direction of going up the stairs is the specified direction, the corresponding direction to be generated is generated.
- the bending direction in the hierarchical movement route is obtained by reversing the bending direction in the stairs information.
- the "direction to go after going up and down" of the hierarchical movement route can be obtained from the information of the route that the user moves. For example, in the case of climbing stairs, if the route after climbing is to the right, the value of "direction to proceed after climbing and descending" is right.
- the hierarchical movement route generation unit 110 determines whether the "number of steps” of the hierarchical movement route is regular or irregular according to the value of the "number of steps” of the stairs information, and determines whether the "number of steps” of the hierarchical movement route is regular or irregular. It is the value of the "number of steps” of the hierarchical movement route.
- the "number of steps" of the staircase information has a plurality of values, and the difference between two of the plurality of values is N (N is an integer of 1 or more) or more. If there is at least one combination, it is “irregular”, otherwise it is “regular”.
- N 5
- the value in the hierarchical movement route becomes "irregular".
- the number of stages if the number of stages is "irregular" instead of the number of stages itself, it is included in the guide text. The reason is that the user can determine that he / she has arrived at the landing or the end point of the stairs by using the white cane without the information on the number of steps.
- the user visually impaired person
- the user generally makes a regular staircase in which all the steps in the stairs having a plurality of steps divided by a landing or the like are the same number.
- you go up and down with the intention of such a staircase you feel uneasy when the number of steps is different from your imagination.
- the number of steps when the number of steps is "irregular", it is included in the guide text so that the structure of the stairs can be easily imagined.
- the value of N may be any value of 1 or more.
- “irregular” itself may be used as described above, or the number of steps of a plurality of stairs divided by a landing or a corner may increase or decrease (increase by 5 steps, etc.). ), The number of steps of a plurality of stairs itself (15, 9, 13, etc.) may be used.
- the hierarchical movement route generation unit 110 After the hierarchical movement route generation unit 110 passes the information on the hierarchical movement route and the user's movement route to the presentation sentence generation unit 130, the user holds the guidance sentence generation device 100 and starts walking.
- the guide text generation operation for going up and down the stairs in the above will be described with reference to the flowchart of FIG.
- FIG. 4 shows, for example, a process for a staircase (referred to as a target staircase) before the user reaches a certain staircase that is the target of the hierarchical movement route (for example, when the user approaches the staircase within a predetermined distance). Is shown.
- the process of FIG. 4 for each hierarchical movement route on the user's movement route is performed in advance, a guide text for each hierarchical movement route is generated in advance and stored in a memory or the like, and the stairs are stored in front of the stairs.
- the guide text corresponding to the above may be presented.
- step S4 the presentation sentence generation unit 130 refers to the type of stairs in the hierarchical movement route of the target stairs, and determines whether or not the type of stairs is a spiral staircase. If the target staircase is a spiral staircase, the process proceeds to step S5, information on the type of staircase is acquired, and the process proceeds to step S6. If it is not a spiral staircase, the process proceeds to step S6 without acquiring information on the type of staircase.
- the acquired staircase type (that is, spiral staircase) is presented in the guide text.
- the reason why the information on the type of stairs is acquired and presented only when the target staircase is a spiral staircase is that the spiral staircase makes it easy for the user (visually impaired) to imagine the structure in words, and the spiral staircase has the inner width of the staircase. Is extremely narrow and you need to walk carefully. However, even if the target staircase is other than a spiral staircase, the type of staircase may be presented.
- step S6 the presentation sentence generation unit 130 acquires the staircase position and ascending / descending information from the hierarchical movement route of the target staircase.
- step S7 the presentation sentence generation unit 130 generates an outline sentence of the stairs (a guide sentence of the outline about walking on the stairs) based on the information acquired so far.
- the staircase summary statement includes, for example, the direction in which the stairs are located, the type of stairs, and information on whether to go up or down to the destination floor.
- the sentence is generated using a template.
- the presentation sentence generation unit 130 stores "here, [up / down] the [stairs type] stairs in the [stairs position] direction to the [destination floor]” as a template for generating the summary sentence. It is held in the storage means of. Generate a sentence by putting the acquired information corresponding to the item in
- the solution sentence generation unit 130 stores "here, [up / down] the [stairs type] stairs in the [stairs position] direction to the [destination floor]” as a template for generating the summary sentence. It is held in the storage means of. Generate a sentence by putting the acquired information corresponding to the item in
- This allows you to generate sentences such as "Here you go up the stairs in the straight direction” and "Here you go down the spiral stairs in the right direction.”
- step S9 the presentation sentence generation unit 130 determines whether or not there is a landing or a corner in the target stairs based on the hierarchical movement route of the target stairs. If the target staircase has a landing or a corner, the process proceeds to step S10. If the target staircase does not exist, the process proceeds to step S16 without generating a detailed sentence of the staircase.
- step S10 the presentation sentence generation unit 130 acquires information on any of the landing / turning corner, the number of landing / turning corners, the turning direction, the turning angle, and the number of steps from the information on the hierarchical movement route of the target stairs.
- step S11 the presentation sentence generation unit 130 generates a detailed sentence of the stairs composed of straight stairs based on the information acquired in steps S9 and S10.
- the detailed text of the stairs includes, for example, information about the number of landings or turns of the stairs, the direction of the turn, and the number of stairs before and after the landing or the corner.
- An example of a detailed sentence of the stairs composed of straight stairs when the hierarchical movement route of the target stairs is “up underground hall” is shown in the second line of FIG.
- the presentation sentence generation unit 130 uses as a template for generating detailed sentences of stairs composed of straight stairs, in which "[landing / turning] is [number of landing / turning], ⁇ all (landing). / Multiple corners and all turning directions are the same) / First ... Second (landing / multiple corners and different turning directions) /-(Landing / one turning direction)> [Turning direction] direction ⁇ Turn (90 degrees) / Advance (0 degrees) / U-turn (180 degrees)>. ⁇ The number of steps is irregular (irregular) /-(regular)>. " Holding in the means.
- step S12 which proceeds when the target staircase is a spiral staircase or a curved staircase, the presentation sentence generation unit 130 acquires information on the staircase type and rotation direction from the information on the hierarchical movement route of the target staircase.
- the spiral staircase and the curved staircase are collectively called a curved staircase.
- step S13 as in step S9, the presentation sentence generation unit 130 determines whether or not there is a landing or a corner on the target stairs. If there is a landing or a corner, the process proceeds to step S14, and if it does not exist, the process proceeds to step S15.
- step S14 the presentation sentence generation unit 130 acquires information on any of the landing / turning corner, the number of landing / turning corners, the turning direction, and the number of steps from the information on the hierarchical movement route of the target stairs.
- step S15 the presentation sentence generation unit 130 generates a detailed sentence about the curved stair walking based on the information acquired in steps S12 to S14.
- An example of a detailed sentence of a curved staircase when the hierarchical movement route of the target staircase is “emergency staircase descent” is shown in the second line of FIG.
- the sentence is generated using a template.
- the presentation sentence generation unit 130 uses the template for generating the detailed sentence of the curved stairs as " ⁇ landing is [landing / number of corners], (landing exists) /-(landing does not exist). > [Rotation direction]. ⁇ The number of steps is irregular (irregular) /-(regular)>. ”Is stored in a storage means such as a memory. By using this template, if there is no landing or turning point and the process does not go through step S14, the sentence "clockwise" is generated.
- the number of stages is as described above. In other words, even if there is no information on the number of steps, the user can determine that he / she has arrived at the landing or the end point of the stairs by using the white cane. Also, the reason why the presence or absence of the handrail is not indicated is that it can be searched by oneself.
- the reason for presenting information on landings and corners is that if there is no information on landings and corners, it was still a landing when you thought that the stairs were over, or even if you knew that it was a landing, which way should you proceed? This is because I don't know, and sometimes I step off while searching with a white cane.
- step S16 the presentation sentence generation unit 130 acquires information on the destination floor and the direction to go after going up and down from the information on the hierarchical movement route of the target stairs, and proceeds to step S17.
- step S17 the presentation sentence generation unit 130 generates a sentence after going up and down based on the information acquired in step S16.
- any method may be used as a method for generating a sentence based on the acquired information, but in the present embodiment, the sentence is generated using a template.
- the presentation sentence generation unit 130 bends ⁇ in the direction of going up and down and then going forward] when [up / down] is completed to [destination floor] as a template for sentence generation after going up and down (90 degrees). ) / Advance (0 degrees)>. ”Is held in a storage means such as a memory. This makes it possible to generate sentences such as "Go straight when you reach the first floor” and "Go right when you reach the first floor.”
- the sentence generated by the above procedure is, for example, a presentation sentence generation unit immediately before the user arrives at the target stairs. It is sent from 130 to the output unit 150, and is output by voice from the output unit 150.
- the output is made in the order of the guidance text of the outline of walking on the stairs, the guidance text of the details of walking on the stairs, and the guidance text after going up and down. It should be noted that this is output when the guidance text of the outline of stair walking is generated, this is output when the guidance text of the details of stair walking is generated, and the guidance text after going up and down is generated. You may output this with.
- the present embodiment provides at least the guide text generator, the guide text generation system, the guide text generation method, and the program described in the following items.
- the hierarchical movement route generation unit 110 described in the embodiment is an example of the acquisition means.
- the hierarchical movement route generation unit 110 and the presentation sentence generation unit 130 described in the embodiment are examples of generation means.
- (Section 1) An acquisition means for acquiring staircase information about stairs existing on the path on which the user moves from the storage unit, and A guide text generation device including a guide text for walking on stairs and a generation means for generating a guide text for walking after going up and down stairs based on the stairs information and the route.
- the guide text for walking the stairs indicates that the stairs to be walked are spiral stairs only when the stairs are spiral stairs, and when the stairs are not spiral stairs, the type of stairs to be walked. Is not shown.
- the guide text generator according to paragraph 1. (Section 3) The guidance for walking on the stairs indicates the direction of rotation only when the staircase is a spiral staircase, and when the staircase is not a spiral staircase, at the number of landings or turns and at each landing or turn.
- the guide text for walking on the stairs states that the number of steps is irregular when the stairs are not spiral stairs and the number of steps of a plurality of stairs divided by a landing or a corner is irregular.
- the guide text generator according to any one of items 1 to 3 in which the information to be shown is shown.
- the guide text for walking on stairs has a guide text showing an outline of walking on stairs and a guide text showing details of walking on stairs.
- the outline of stair walking includes information on the direction in which the stairs exist, the type of stairs, and whether the stairs are up or down to the destination floor.
- the details of the stairs walking are described in any one of paragraphs 1 to 4, including information on the number of landings or turns of the stairs, the direction of the turn, and the number of stairs before and after the landing or the corner.
- (Section 6) An acquisition means for acquiring staircase information about stairs existing on the path on which the user moves from the storage unit, and A guide text generation system including a guide text for walking on stairs and a generation means for generating a guide text for walking after going up and down stairs based on the stairs information.
- (Section 7) It is a guidance text generation method executed by the guidance text generation device. The acquisition step of acquiring the stairs information about the stairs existing on the path on which the user moves from the storage unit, and A guide text generation method including a guide text for walking on stairs and a generation step for generating a guide text for walking after going up and down stairs based on the stairs information and the route.
- (Section 8) A program for causing a computer to function as each means in the guidance text generator according to any one of paragraphs 1 to 5.
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Tourism & Hospitality (AREA)
- Automation & Control Theory (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Human Resources & Organizations (AREA)
- General Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Primary Health Care (AREA)
- Marketing (AREA)
- Economics (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
Abstract
案内文生成装置において、ユーザが移動する経路上に存在する階段についての階段情報を記憶部から取得する取得手段と、前記階段情報と前記経路とに基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成手段とを備える。
Description
本発明は、視覚障がい者等の歩行を支援する案内文を生成する技術に関連するものである。
視覚障がい者が屋内外を歩行し目的地まで到達するためには、一般に晴眼者の同行や盲導犬等による介護が必要である。視覚障がい者が階段を上り下りする場合には特に注意が必要である。
近年、位置情報を取得できるスマートフォン等の端末を用いて視覚障がい者の歩行を支援する案内システムが提供されている。例えば、特許文献1には、視覚障がい者にビデオカメラ等の撮影機と音声通信端末を携帯させ、視覚障がい者から送信される映像と音声、位置情報をもとにサービスセンタに常駐する介護者が音声案内を行うシステムが開示されている。
また、非特許文献1には、スマートフォンを用いて視覚障がい者に対してリアルタイムに音声案内を提示する案内システムが開示されている。
「屋内外を区別なく案内する音声ナビゲーション・システム」,インターネット<URL:https://www.cs.cmu.edu/~NavCog/navcog.html>,令和元年10月25日検索
しかし、従来の案内システムでは、視覚障がい者が階段を上り下りする場面において適切な案内を行うことができないという課題がある。
例えば特許文献1に開示された技術では、遠隔地の介護者が視覚障がい者の目となって道案内を行うが、ビデオカメラから視認できる範囲の情報は限られているため、介護者は階段があるということまでは認識できても、どのような階段なのかを認識できない。そのため、介護者は階段歩行についての案内や、階段を上り下りした後にどちらに進めばよいのか等の案内を事前に視覚障がい者に伝えることができない。
また、例えば非特許文献1に開示された技術では、視覚障がい者に対して、階段の開始地点に差し掛かったときに、階段の位置と上りか下りか等を案内することしかできない。
本発明は上記の点に鑑みてなされたものであり、視覚障がい者等のユーザが階段を歩行する際の適切な案内を生成することを可能とする技術を提供することを目的とする。
開示の技術によれば、ユーザが移動する経路上に存在する階段についての階段情報を記憶部から取得する取得手段と、
前記階段情報と前記経路とに基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成手段と
を備える案内文生成装置が提供される。
前記階段情報と前記経路とに基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成手段と
を備える案内文生成装置が提供される。
開示の技術によれば、視覚障がい者等のユーザが階段を歩行する際の適切な案内を生成することを可能とする技術が提供される。
以下、図面を参照して本発明の実施の形態を説明する。以下で説明する実施の形態は一例に過ぎず、本発明が適用される実施の形態は、以下の実施の形態に限られるわけではない。
以下の説明では、「ユーザ」が視覚障がい者であることを想定しているが、それに限定されるわけではない。視覚障がい者以外の者が本発明に係る案内文生成装置を使用してもよい。
(装置構成)
図1は、本発明の実施の形態における案内文生成装置100の構成図である。図1に示すように、案内文生成装置100は、階層移動ルート生成部110、階段情報記憶部120、提示文生成部130、入力部140、出力部150、位置情報取得部170を有する。
図1は、本発明の実施の形態における案内文生成装置100の構成図である。図1に示すように、案内文生成装置100は、階層移動ルート生成部110、階段情報記憶部120、提示文生成部130、入力部140、出力部150、位置情報取得部170を有する。
なお、ここで説明する例では、案内文生成装置100が、本発明に係る階層移動のための案内文生成機能に加えて、自身の現在位置を取得する位置情報取得部170を有している。また、提示文生成部130は、現在位置に基づいてユーザに対するナビゲーションを行う機能を有していることを想定している。なお、ナビゲーション機能自体は例えば非特許文献1に開示されているように既存技術である。
ただし、案内文生成装置100が、位置情報取得部やナビゲーション機能を有することは必須ではない。案内文生成装置100が、階層移動を行うための案内文の生成機能のみを有することをしてもよい。この場合、例えば、案内文生成装置100により生成された案内文が、案内文生成装置100とは別に備えられるナビゲーションシステムに提供される。また、この場合、例えば、案内文生成装置100により生成された案内文をユーザが歩行の前に事前に確認し、事前に階層移動ルートを把握する。
案内文生成装置100は、1つの装置であってもよいし、複数の装置からなるシステムであってもよい。案内文生成装置100が複数の装置からなるシステムである場合、案内文生成装置100を案内文生成システム100と呼んでもよい。
<案内文生成装置100が1つの装置である場合について>
案内文生成装置100が1つの装置である場合において、案内文生成装置100は、例えば、ユーザが保持するスマートフォン、タブレット等であり、ユーザは歩行しながら案内文生成装置100により案内文の提示を受けることができる。この場合、入力部140と出力部150は、例えば、タッチパネル(文字入力・選択、画像出力)、マイク(音声入力)、スピーカ(音声出力)、カメラ(画像入力)等により構成される。位置情報取得部170は、スマートフォンが備えるGPS受信機、センサー等により構成される。
案内文生成装置100が1つの装置である場合において、案内文生成装置100は、例えば、ユーザが保持するスマートフォン、タブレット等であり、ユーザは歩行しながら案内文生成装置100により案内文の提示を受けることができる。この場合、入力部140と出力部150は、例えば、タッチパネル(文字入力・選択、画像出力)、マイク(音声入力)、スピーカ(音声出力)、カメラ(画像入力)等により構成される。位置情報取得部170は、スマートフォンが備えるGPS受信機、センサー等により構成される。
案内文生成装置100の各部の動作概要は下記のとおりである。階段情報の例や案内文作成の詳細については動作例の説明のところでフローチャートを参照して詳細に説明する。
入力部140は、文字あるいは音声により出発地及び目的地の入力を受け、出発地及び目的地の情報、及び、階層移動ルートを生成させる指示を階層移動ルート生成部110に渡す。
階層移動ルート生成部110は、出発地及び目的地の情報を入力とし、経路の情報、階段情報、及び、階段毎の階層移動ルートを出力する。階層移動ルート生成部110は、例えば、ネットワーク上の(あるいは案内文生成装置100が備える)地図情報データベースを参照することにより、出発地から目的地までの経路を算出する。算出された経路の情報には、1以上の階段の位置とそれぞれの階段の階段名が含まれている。なお、ここでの地図情報データベースには、建物内部の情報も含まれていて、出発地・目的地が建物内部であってもその経路を算出できる。
階層移動ルート生成部110は、ユーザが移動する経路上の階段毎の階段情報を階段情報記憶部120から取得し、取得した階段情報と、ユーザが移動する経路の情報とに基づいて、出発地から目的地までの経路、即ち、ユーザが移動する経路上の階段毎に階層移動ルートを生成し、階段毎の階層移動ルートを提示文生成部130に渡す。このとき、ユーザが移動する経路の情報も提示文生成部130に渡される。また、位置情報取得部170から提示文生成部130に対して現在位置の情報が渡される。
なお、上記の階段情報記憶部120は、案内文生成装置100の外部にあってもよい。例えば、階段情報記憶部120は、案内文生成装置100とネットワーク接続されたデータベースサーバであってもよい。
提示文生成部130は、現在位置の情報、出発地から目的地までの経路の情報、及び、階段毎の階層移動ルートを入力とし、案内文を出力する。出力部140は、案内文を入力とし、音声等で案内文を出力する。ユーザが案内文生成装置100を保持して歩行を開始している状況において、提示文生成部130は、現在位置と出発地から目的地までの経路の情報に基づいて、例えば、「この通路を直進するとつきあたりがあり、そこを右に曲がります」といったような案内文を生成し、出力部140に渡し、出力140が音声で案内文を出力する。これによりユーザに対するナビゲーションが行われる。
本実施の形態では、上記のような通常のナビゲーションに加えて、提示文生成部130は、階層移動ルート生成部110から渡された階層移動ルートに基づいて、階段の上り下りについての案内文を生成する。生成された案内文は、出力部140に渡されて、音声で出力される。なお、出力を音声で行うことは一例であり、音声以外で出力してもよい。この案内文は、ユーザが実際に階段を上り下りする前に、上り下りする階段の構造をユーザがイメージし易くするためのものである。
また、例えば、入力部130では案内終了命令を受けつけるべく常に待機しており、案内終了命令が入力された場合は、直ちに提示文生成部130が案内文生成装置100の処理を終了させることとしてもよい。
なお、案内文生成装置100が1つの装置である場合において、案内文生成装置100が、持ち歩くことを想定していない据置型のPCであってもよい。この場合、ユーザは、例えば、予め案内文の提示を受けて、どのような構造の階段を上り下りするかを把握しておくことができる。
<案内文生成装置100が、複数の装置からなるシステムである場合について>
案内文生成装置100が、複数の装置からなるシステムである場合において、例えば、入力部140と出力部150を有する端末160が、ユーザが保持するスマートフォン、タブレット等であり、階層移動ルート生成部110、階段情報記憶部120、及び提示文生成部130を有する装置は、当該端末160とネットワーク接続されるサーバである。この場合、位置情報取得部170は端末160に含まれ、取得した位置情報は上記サーバに通知される。
案内文生成装置100が、複数の装置からなるシステムである場合において、例えば、入力部140と出力部150を有する端末160が、ユーザが保持するスマートフォン、タブレット等であり、階層移動ルート生成部110、階段情報記憶部120、及び提示文生成部130を有する装置は、当該端末160とネットワーク接続されるサーバである。この場合、位置情報取得部170は端末160に含まれ、取得した位置情報は上記サーバに通知される。
この場合、上記サーバを案内文生成装置又は案内文生成システムと呼んでもよい。ユーザは、例えば歩行しながら、端末160から案内文の提示を受けることができる。各部の動作は前述した動作と同様である。
(ハードウェア構成例)
案内文生成装置(上記のサーバを含む)は、例えば、コンピュータに、本実施の形態で説明する処理内容を記述したプログラムを実行させることにより実現可能である。なお、特に上記のサーバを用いる場合において、この「コンピュータ」は、クラウド上の仮想マシンであってもよい。仮想マシンを使用する場合、ここで説明する「ハードウェア」は仮想的なハードウェアである。
案内文生成装置(上記のサーバを含む)は、例えば、コンピュータに、本実施の形態で説明する処理内容を記述したプログラムを実行させることにより実現可能である。なお、特に上記のサーバを用いる場合において、この「コンピュータ」は、クラウド上の仮想マシンであってもよい。仮想マシンを使用する場合、ここで説明する「ハードウェア」は仮想的なハードウェアである。
案内文生成装置は、コンピュータに内蔵されるCPUやメモリ等のハードウェア資源を用いて、案内文生成装置で実施される処理に対応するプログラムを実行することによって実現することが可能である。上記プログラムは、コンピュータが読み取り可能な記録媒体(可搬メモリ等)に記録して、保存したり、配布したりすることが可能である。また、上記プログラムをインターネットや電子メール等、ネットワークを通して提供することも可能である。
図2は、上記コンピュータのハードウェア構成例を示す図である。図2のコンピュータは、それぞれバスBで相互に接続されているドライブ装置1000、補助記憶装置1002、メモリ装置1003、CPU1004、インタフェース装置1005、表示装置1006、及び入力装置1007等を有する。
当該コンピュータでの処理を実現するプログラムは、例えば、CD-ROM又はメモリカード等の記録媒体1001によって提供される。プログラムを記憶した記録媒体1001がドライブ装置1000にセットされると、プログラムが記録媒体1001からドライブ装置1000を介して補助記憶装置1002にインストールされる。但し、プログラムのインストールは必ずしも記録媒体1001より行う必要はなく、ネットワークを介して他のコンピュータよりダウンロードするようにしてもよい。補助記憶装置1002は、インストールされたプログラムを格納すると共に、必要なファイルやデータ等を格納する。
メモリ装置1003は、プログラムの起動指示があった場合に、補助記憶装置1002からプログラムを読み出して格納する。CPU1004は、メモリ装置1003に格納されたプログラムに従って、案内文生成装置100に係る機能を実現する。インタフェース装置1005は、ネットワークに接続するためのインタフェースとして用いられる。表示装置1006はプログラムによるGUI(Graphical User Interface)等を表示する。入力装置1007はキーボード及びマウス、ボタン、又はタッチパネル等で構成され、様々な操作指示を入力させるために用いられる。
(案内文生成装置100の動作例)
以下、案内文生成装置100の動作例を図3、図4のフローチャートの手順に沿って説明する。以下の例では、案内文生成装置100がスマートフォン等である場合を想定して説明する。案内文生成装置100が端末160とサーバから構成される場合であっても各部の動作は下記で説明する動作と同じである。
以下、案内文生成装置100の動作例を図3、図4のフローチャートの手順に沿って説明する。以下の例では、案内文生成装置100がスマートフォン等である場合を想定して説明する。案内文生成装置100が端末160とサーバから構成される場合であっても各部の動作は下記で説明する動作と同じである。
ステップS1において、入力部140が出発地及び目的地の名称の入力を受け付け、受け付けた情報を階層移動ルート生成部110に渡す。より詳細には、入力部140は階層移動ルート生成部110に対して、出発地から目的地に到着するまでに通過する、階層移動をするための階段のルートである階層移動ルートを生成させる指示を通知する。当該指示には、出発地及び目的地の名称のテキスト情報が含まれる。なお、出発地の名称のテキスト情報を「出発地」、目的地の名称のテキスト情報を「目的地」と記載する。
入力部140への入力方法について、キーボード操作、タッチ操作等による文字入力、選択入力であってもよいし、音声入力(入力された音声を音声認識によりテキスト情報に変換)であってもよいし、これら以外の入力方法でもよい。
ステップS2において、階層移動ルート生成部110は、出発地及び目的地に基づいて、出発地から目的地までの経路を算出するとともに、経路上の階段毎の階段情報を階段情報記憶部120から取得する。
図5に階段情報の例を示す。図5に示すように、階段情報には、階段名、階段の種別、設置階、踊り場/曲がり角のいずれか、踊り場/曲がり角の数、曲がる方向、曲がる角度、回転方向、段数、とが含まれる。
階段名は、ユーザが移動する経路上にある階段の名前である。階段の種別は、例えば、直進階段、折り返し階段、かね折れ階段等の値を取る。図6は、かね折れ階段(a)、回り階段(b)、らせん階段(c)の例を示している。なお、図6に示す階段は一例である。図示したもの以外に例えばカーブ階段、折返し階段等がある。
設置階は、該当の階段がある階であり、例えば、地下1階から1階に上る階段の設置階は地下1階と1階になる。
踊り場は、図6(a)に例示されているように、階段の段と段の間に位置する、1段の奥行きより長いフラットな場所のことである。曲がり角は、図6(b)に例示されているように、踊り場以外の場所で段を上り下りしながら方向を変える場所のことである。
曲がる方向及び曲がる角度、回転方向は、階段を規定の方向から見たときのものである。例えば、図6(a)のように、踊り場が1つあってそこで曲がる構造の階段について、階段の下から見て上る方向を規定の方向とした場合、「曲がる方向」は右になり、「曲がる角度」は90度になる。なお、規定の方向は、階段毎に規定されており、どのような規定の仕方でもよい。
段数に関して、例えば踊り場が2つ存在する場合(下から第1の踊り場、第2の踊り場とする)、階段の始まりから第1の踊り場までの段数と、第1の踊り場から第2の踊り場までの段数と、第2の踊り場から階段の終わりまでの段数となる。つまり、階段が、踊り場(又は曲がり角)で分断されてできた複数の階段のそれぞれの段数である。
なお、図5に示す情報(及び図7に示す情報)は、テキスト情報として記憶されてもよいし、テキスト情報の紐付られた値として記憶されてもよい。
ステップS3において、階層移動ルート生成部110は、経路の情報と階段情報とに基づいて、ユーザが移動する経路上の階段毎に階層移動ルートを生成し、階段毎の階層移動ルートを提示文生成部130に渡す。このとき、ユーザが移動する経路の情報も提示文生成部130に渡される。渡された階段毎の階層移動ルート、及び経路の情報は、提示文生成部130においてメモリ等の記憶手段に格納される。
図7に、階層移動ルート生成部110が生成した階層移動ルートの例を示す。この例は、経路上の階段が「地下ホール」と「非常階段」である場合を示しており、階層移動ルートとして、「地下ホール上り」と「非常階段下り」の2つの階層移動ルートがあることを示している。階層移動ルートの情報は、後述するとおりに、案内文生成に使用される。
階層移動ルートには、ルート名、階段の種別、階段の位置、上り/下り、行き先階、踊り場/曲がり角、踊り場/曲がり角の数、曲がる方向、曲がる角度、回転方向、上り下りした後に進む方向、が含まれている。
階段の種別、踊り場/曲がり角、踊り場/曲がり角の数については、階段情報がそのまま利用される。
階段の位置、上り/下りに関しては、階層移動ルート生成部110は、ユーザが移動する経路に基づいて、ユーザが階段の手前に到達した際における当該階段の位置(ユーザから見て直進の位置にあるのか、右にあるのか等)、階段を上るのか、下るのかを算出する。また、上り/下りがわかれば、階段情報の設置階により、行き先階を算出できる。ルート名については、階段情報の階段名に上り/下りの計算結果を付加することにより生成される。
曲がる方向、曲がる角度、回転方向については、ユーザが移動する経路に基づく方向が、規定の方向と同じであれば、階段情報をそのまま利用できる。ユーザが移動する経路に基づく方向が、規定の方向と逆であれば、階段情報の方向を逆にすればよい。
例えば、「曲がる方向」に関して、図5に示した階段情報の地下ホールの階段の「曲がる方向」が、階段を上る方向を規定の方向とした場合の曲がる方向であるとした場合、生成する当該階段についての階層移動ルートが下り方向である場合には、階層移動ルートにおける曲がる方向は、階段情報における曲がる方向を左右反転させることにより求める。
階層移動ルートの「上り下りしたあとに進む方向」については、ユーザが移動する経路の情報から求めることができる。例えば、階段を上る場合について、上った後の経路が右方向であれば、「上り下りしたあとに進む方向」の値は右である。
階層移動ルートの「段数」に関して、階層移動ルート生成部110は、階段情報の「段数」の値に応じて、階層移動ルートの「段数」が規則的か不規則的かを判断し、それを階層移動ルートの「段数」の値とする。
より具体的には、階層移動ルート生成部110は、階段情報の「段数」が複数の値を持ち、かつその複数の内2つの数の差がN(Nは1以上の整数)以上である組み合わせが少なくとも1つ以上ある場合は「不規則」、それ以外の場合は「規則的」とする。
本実施の形態では、N=5として判断している。この場合、例えば図5の地下ホールの階段について、階段情報の「段数」が複数の値(3つ)を持ち、かつその複数の内2つの数の差が5以上である組み合わせが少なくとも1つ以上ある(15-9=6)ので、階層移動ルートにおける値は「不規則」となる。
後述するように、段数に関しては、段数そのものではなくて段数が「不規則」である場合にそれが案内文に含められる。その理由は、段数の情報が無くてもユーザは白杖を使うことで踊り場か階段の終了地点に到着したことを判断できるためである。
また、段数を提示しないままでは、ユーザ(視覚障がい者)は、踊り場等により分断されてできた複数の段数が存在する階段内の全ての段数が同数であるような規則的な階段を一般的に想像し、そのような階段のつもりで上り下りしてしまうため、想像と異なる段数であるときに不安を感じてしまう。
そこで、本実施の形態では、階段の構造をイメージし易いように、段数が「不規則」である場合にそのことが案内文に含められる。なお、Nの値は1以上のどのような値を用いてもよい。
「不規則」であることを示す提示情報として、上記のように「不規則」そのものを使用してもよいし、踊り場又は曲がり角により分断された複数の階段の段数の増減関係(5段増加等)、複数の階段の段数そのもの(15、9、13等)を使用してもよい。
階層移動ルート生成部110から提示文生成部130に対して階層移動ルートと、ユーザの移動経路の情報が渡された後、ユーザが案内文生成装置100を保持して歩行を開始している状況における階段の上り下りについての案内文生成動作を図4のフローチャートを参照して説明する。
図4は、例えば、ユーザが、階層移動ルートの対象となっているある階段に到達する前(例えば、階段に所定距離以内に近づいたとき)における、当該階段(対象階段と呼ぶ)についての処理を示す。あるいは、ユーザの移動経路上の各階層移動ルートについての図4の処理を予め行って、各階層移動ルートについての案内文を予め生成してメモリ等に格納しておき、階段の手前で当該階段に対応する案内文を提示することとしてもよい。
ステップS4において、提示文生成部130は、対象階段の階層移動ルートにおける階段の種別を参照し、階段の種別が螺旋階段でないかどうかを判断する。対象階段が螺旋階段である場合はステップS5に進み、階段の種別の情報を取得し、ステップS6に進む。螺旋階段でない場合は、階段の種別の情報を取得せずにステップS6に進む。
後述するように、取得された階段の種別(すなわち螺旋階段)は、案内文で提示される。対象階段が螺旋階段である場合のみ階段の種別の情報を取得して提示する理由は、ユーザ(視覚障がい者)にとって螺旋階段は言葉で構造をイメージし易く、また螺旋階段は段の内側の幅が極端に狭く、注意して歩行する必要があるからである。ただし、対象階段が螺旋階段以外であっても階段の種別を提示することとしてもよい。
ステップS6において、提示文生成部130が、対象階段の階層移動ルートから階段の位置、上り/下りの情報を取得する。
ステップS7において、提示文生成部130が、これまでに取得した情報に基づいて階段の概要の文(階段歩行についての概要の案内文)を生成する。
対象階段の階層移動ルートが「地下ホール上り」である場合の階段の概要の文の例を図8の1行目に示す。また、対象階段の階層移動ルートが「非常階段下り」である場合の階段の概要の文の例を図9の1行目に示す。階段の概要の文は、例えば、階段の存在する方向、階段の種別、行き先階まで上りであるか下りであるかの情報を含む。
取得した情報に基づいて文を生成する方法としてどのような方法を用いてもよいが、本実施の形態では、テンプレートを用いて文を生成している。例えば、提示文生成部130は、概要文生成のためのテンプレートとして「ここで[階段の位置]方向の[階段の種別]階段を[行き先階]まで[上り/下り]ます。」をメモリ等の記憶手段に保持している。テンプレートの[...]の部分に、[...]内の項目に対応する取得情報を入れることにより文を生成する。これにより、「ここで直進方向の階段を上ります。」「ここで右方向の螺旋階段を下ります。」のような文を生成できる。
ステップS8において、提示文生成部130は、対象階段の階層移動ルートにおける階段の種別が、螺旋階段とカーブ階段のいずれでもないかどうかを判断する。ステップS8の判断がYesとなる場合、つまり、対象階段が螺旋階段とカーブ階段のいずれでもない場合(=直線の階段から構成されている階段である場合)、ステップS9に進み、対象階段が螺旋階段又はカーブ階段である場合(=湾曲した階段から構成されている階段である場合)はステップS12に進む。
ステップS9において、提示文生成部130は、対象階段の階層移動ルートに基づいて、対象階段に踊り場もしくは曲がり角が存在するか否かを判断する。対象階段に踊り場又は曲がり角が存在する場合はステップS10に進み、存在しない場合は、階段の詳細の文を生成せずにステップS16に進む。
ステップS10において、提示文生成部130は、対象階段の階層移動ルートの情報から、踊り場/曲がり角のいずれか、踊り場/曲がり角の数、曲がる方向、曲がる角度、段数の情報を取得する。
ステップS11において、提示文生成部130は、ステップS9、S10で取得した情報に基づいて、直線の階段から構成されている階段の詳細の文を生成する。階段の詳細の文は、例えば、階段の踊り場又は曲がり角の数、曲がる方向、及び、踊り場又は曲がり角の前後での階段数に関する情報を含む。対象階段の階層移動ルートが「地下ホール上り」である場合の直線の階段から構成されている階段の詳細の文の例を図8の2行目に示す。
取得した情報に基づいて文を生成する方法としてどのような方法を用いてもよいが、本実施の形態では、テンプレートを用いて文を生成している。例えば、提示文生成部130は、直線の階段から構成されている階段の詳細の文生成のためのテンプレートとして「[踊り場/曲がり角]は[踊り場/曲がり角の数]か所、<全てで(踊り場/曲がり角が複数で曲がる方向が全て同じ)/1つ目で…、2つ目で(踊り場/曲がり角が複数で曲がる方向が異なる)/-(踊り場/曲がり角が1つ)>[曲がる方向]方向に<曲がります(90度)/進みます(0度)/Uターンします(180度)>。<段数は不規則です(不規則)/-(規則的)>。」をメモリ等の記憶手段に保持している。
[.....]は、[...]内の項目に対応する取得情報、(.....)は、階層移動ルートにおける条件、<.....>は、(.....)の条件に応じた文章の集合を示す。例えば、<全てで(踊り場/曲がり角が複数で曲がる方向が全て同じ)>は、階層移動ルートにおいて、踊り場/曲がり角が複数あり、曲がる方向が全て同じである場合に、"全てで"という文が使用されることを示している。また、「-」は(.....)の条件を満たす場合に文を生成しない、という意味である。
このようなテンプレートにより、「踊り場は2か所、1つ目で直進、2つ目で左方向に曲がります。」のような文が生成される。
対象階段が螺旋階段かカーブ階段である場合に進むステップS12では、提示文生成部130が、対象階段の階層移動ルートの情報から階段の種別、回転方向の情報を取得する。なお、螺旋階段とカーブ階段を総称して湾曲した階段と呼ぶ。
ステップS13において、ステップS9と同様に、提示文生成部130は、対象階段に踊り場もしくは曲がり角が存在するか否かを判断する。踊り場か曲がり角が存在する場合はステップS14に進み、存在しない場合はステップS15に進む。
ステップS14において、提示文生成部130は、対象階段の階層移動ルートの情報から、踊り場/曲がり角のいずれか、踊り場/曲がり角の数、曲がる方向、段数の情報を取得する。
ステップS15において、提示文生成部130は、ステップS12~S14で取得した情報に基づいて、湾曲した階段歩行についての詳細の文を生成する。対象階段の階層移動ルートが「非常階段下り」である場合における湾曲した階段の詳細の文の例を図9の2行目に示す。
取得した情報に基づいて文を生成する方法としてどのような方法を用いてもよいが、本実施の形態では、テンプレートを用いて文を生成している。例えば、提示文生成部130は、湾曲した階段の詳細の文生成のためのテンプレートとして「<踊り場は[踊り場/曲がり角の数]か所、(踊り場が存在する)/-(踊り場が存在しない)>[回転方向]回りです。<段数は不規則です(不規則)/-(規則的)>。」をメモリ等の記憶手段に保持している。このテンプレートを用いることで、踊り場や曲がり角が存在せず、ステップS14を経由しなかった場合は、「時計回りです。」という文が生成される。
これまでに説明したとおり、本実施の形態では、階段歩行の詳細の文(例:図8の2行目、図9の2行目)において、階段の段数や手すりの有無の情報を提示せず、踊り場や曲がり角の数、踊り場や曲がり角で曲がる方向の情報を提示することとしている。その理由は下記のとおりである。
段数については前述したとおりである。つまり、段数の情報がなくともユーザは白杖を使えば踊り場か階段の終了地点に到着したことを判断できるからである。また、手すりの有無を提示しないのは自分で探すことができるからである。
他方、踊り場や曲がり角の情報を提示する理由は、踊り場や曲がり角の情報がないとすると、階段が終わったと思ったらまだ踊り場だったということや、踊り場ということがわかってもどちらに進めばよいのかがわからず、白杖で探っている間に足を踏み外してしまうことがあるからである。
ただし、階段歩行の詳細の文において、階段の段数と手すりの有無の情報のいずれか又は両方を提示することとしてもよい。
ステップS16において、提示文生成部130は、対象階段の階層移動ルートの情報から、行き先階、上り下りしたあとに進む方向の情報を取得し、ステップS17に進む。
ステップS17において、提示文生成部130は、ステップS16で取得した情報に基づいて上り下りした後の文を生成する。
対象階段の階層移動ルートが「地下ホール上り」である場合の上り下りした後の文の例を図8の3行目に示す。また、対象階段の階層移動ルートが「非常階段下り」である場合の上り下りした後の文の例を図9の3行目に示す。
取得した情報に基づいて文を生成する方法としてどのような方法を用いてもよいが、本実施の形態では、テンプレートを用いて文を生成している。例えば、提示文生成部130は、上り下りした後の文生成のためのテンプレートとして「[行き先階]まで[上り/下り]きったら[上り下りした後に進む方向]方向に<曲がります(90度)/進みます(0度)>。」をメモリ等の記憶手段に保持している。これにより「1階まで上りきったら直進方向へ進みます。」「1階まで下りきったら右方向へ進みます。」のような文を生成できる。
以上の手順により生成された文(階段歩行の概要の案内文、階段歩行の詳細の案内文、上り下りした後の案内文)は、例えば、ユーザが対象階段に到着する直前に提示文生成部130から出力部150に送られ、出力部150から音声で出力される。
出力は、階段歩行の概要の案内文、階段歩行の詳細の案内文、上り下りした後の案内文の順になされる。なお、階段歩行の概要の案内文が生成された時点でこれを出力し、階段歩行の詳細の案内文が生成された時点でこれを出力し、上り下りした後の案内文が生成された時点でこれを出力することとしてもよい。
上り下りした後の文を、対象階段を上り下りする前に提示する理由としては、対象階段を上り下りした後に進む方向が事前にわかっていないと、次の道順の案内の情報が提示されるまで、階段の終了地点で立ち止まるしかなくなり、他の歩行者と衝突してしまう可能性があるためである。
ただし、上り下りした後の文を、対象階段を上り下りする前に提示するのは一例であり、上り下りした後の文を、対象階段を上り下りする途中で提示したり、対象階段を上り下りした直後に提示してもよい。
また、案内文として、階段歩行の概要の文、階段歩行の詳細の文、上り下りした後の文のうちの全部でなく一部(いずれか1つのみ、又は、いずれか2つのみ)を提示してもよい。また、階段歩行の概要の文と階段歩行の詳細の文が区別されずにまとまっていてもよい。
(実施の形態の効果、まとめ)
以上説明した実施の形態に係る技術により、視覚障がい者等のユーザが階段を歩行する際の適切な案内を生成することが可能となる。
以上説明した実施の形態に係る技術により、視覚障がい者等のユーザが階段を歩行する際の適切な案内を生成することが可能となる。
より具体的には、ユーザが階段を上り下りする場合において、事前にユーザが階段の構造をイメージしやすい案内文を生成することができ、これを提示することで、ユーザが安全に移動できるようになる。
本実施の形態により、少なくとも下記の各項に記載された案内文生成装置、案内文生成システム、案内文生成方法、及びプログラムが提供される。なお、実施の形態で説明した階層移動ルート生成部110は、取得手段の例である。実施の形態で説明した階層移動ルート生成部110と提示文生成部130は、生成手段の例である。
(第1項)
ユーザが移動する経路上に存在する階段についての階段情報を記憶部から取得する取得手段と、
前記階段情報と前記経路とに基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成手段と
を備える案内文生成装置。
(第2項)
前記階段歩行についての案内文には、前記階段が螺旋階段である場合にのみ、歩行対象の階段が螺旋階段であることが示され、前記階段が螺旋階段でない場合に、歩行対象の階段の種類は示されない
第1項に記載の案内文生成装置。
(第3項)
前記階段歩行についての案内文には、前記階段が螺旋階段である場合にのみ、回転方向が示され、前記階段が螺旋階段でない場合に、踊り場又は曲がり角の数、及び、それぞれの踊り場又は曲がり角での歩行方向が示される
第1項又は第2項に記載の案内文生成装置。
(第4項)
前記階段歩行についての案内文には、前記階段が螺旋階段でない場合に、前記階段が踊り場又は曲がり角で分断された複数の階段の段数が不規則である場合に、段数が不規則であることを示す情報が示される
第1項ないし第3項のうちいずれか1項に記載の案内文生成装置。
(第5項)
前記階段歩行についての案内文は、階段歩行の概要を示す案内文と階段歩行の詳細を示す案内文とを有し、
前記階段歩行の概要は、階段の存在する方向、階段の種別、行き先階まで上りであるか下りであるかの情報を含み、
前記階段歩行の詳細は、階段の踊り場又は曲がり角の数、曲がる方向、及び、踊り場又は曲がり角の前後での階段数に関する情報を含む
第1項ないし第4項のうちいずれか1項に記載の案内文生成装置。
(第6項)
ユーザが移動する経路上に存在する階段についての階段情報を記憶部から取得する取得手段と、
前記階段情報に基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成手段と
を備える案内文生成システム。
(第7項)
案内文生成装置が実行する案内文生成方法であって、
ユーザが移動する経路上に存在する階段についての階段情報を記憶部から取得する取得ステップと、
前記階段情報と前記経路とに基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成ステップと
を備える案内文生成方法。
(第8項)
コンピュータを、第1項ないし第5項のうちいずれか1項に記載の案内文生成装置における各手段として機能させるためのプログラム。
(第1項)
ユーザが移動する経路上に存在する階段についての階段情報を記憶部から取得する取得手段と、
前記階段情報と前記経路とに基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成手段と
を備える案内文生成装置。
(第2項)
前記階段歩行についての案内文には、前記階段が螺旋階段である場合にのみ、歩行対象の階段が螺旋階段であることが示され、前記階段が螺旋階段でない場合に、歩行対象の階段の種類は示されない
第1項に記載の案内文生成装置。
(第3項)
前記階段歩行についての案内文には、前記階段が螺旋階段である場合にのみ、回転方向が示され、前記階段が螺旋階段でない場合に、踊り場又は曲がり角の数、及び、それぞれの踊り場又は曲がり角での歩行方向が示される
第1項又は第2項に記載の案内文生成装置。
(第4項)
前記階段歩行についての案内文には、前記階段が螺旋階段でない場合に、前記階段が踊り場又は曲がり角で分断された複数の階段の段数が不規則である場合に、段数が不規則であることを示す情報が示される
第1項ないし第3項のうちいずれか1項に記載の案内文生成装置。
(第5項)
前記階段歩行についての案内文は、階段歩行の概要を示す案内文と階段歩行の詳細を示す案内文とを有し、
前記階段歩行の概要は、階段の存在する方向、階段の種別、行き先階まで上りであるか下りであるかの情報を含み、
前記階段歩行の詳細は、階段の踊り場又は曲がり角の数、曲がる方向、及び、踊り場又は曲がり角の前後での階段数に関する情報を含む
第1項ないし第4項のうちいずれか1項に記載の案内文生成装置。
(第6項)
ユーザが移動する経路上に存在する階段についての階段情報を記憶部から取得する取得手段と、
前記階段情報に基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成手段と
を備える案内文生成システム。
(第7項)
案内文生成装置が実行する案内文生成方法であって、
ユーザが移動する経路上に存在する階段についての階段情報を記憶部から取得する取得ステップと、
前記階段情報と前記経路とに基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成ステップと
を備える案内文生成方法。
(第8項)
コンピュータを、第1項ないし第5項のうちいずれか1項に記載の案内文生成装置における各手段として機能させるためのプログラム。
以上、本実施の形態について説明したが、本発明はかかる特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。
100 案内文生成装置
110 階層移動ルート生成部
120 階段情報記憶部
130 提示文生成部
140 入力部
150 出力部
160 端末
170 位置情報取得部
1000 ドライブ装置
1001 記録媒体
1002 補助記憶装置
1003 メモリ装置
1004 CPU
1005 インターフェース装置
1006 表示装置
1007 入力装置
110 階層移動ルート生成部
120 階段情報記憶部
130 提示文生成部
140 入力部
150 出力部
160 端末
170 位置情報取得部
1000 ドライブ装置
1001 記録媒体
1002 補助記憶装置
1003 メモリ装置
1004 CPU
1005 インターフェース装置
1006 表示装置
1007 入力装置
Claims (8)
- ユーザが移動する経路上に存在する階段についての階段情報を記憶部から取得する取得手段と、
前記階段情報と前記経路とに基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成手段と
を備える案内文生成装置。 - 前記階段歩行についての案内文には、前記階段が螺旋階段である場合にのみ、歩行対象の階段が螺旋階段であることが示され、前記階段が螺旋階段でない場合に、歩行対象の階段の種類は示されない
請求項1に記載の案内文生成装置。 - 前記階段歩行についての案内文には、前記階段が螺旋階段である場合にのみ、回転方向が示され、前記階段が螺旋階段でない場合に、踊り場又は曲がり角の数、及び、それぞれの踊り場又は曲がり角での歩行方向が示される
請求項1又は2に記載の案内文生成装置。 - 前記階段歩行についての案内文には、前記階段が螺旋階段でない場合に、前記階段が踊り場又は曲がり角で分断された複数の階段の段数が不規則である場合に、段数が不規則であることを示す情報が示される
請求項1ないし3のうちいずれか1項に記載の案内文生成装置。 - 前記階段歩行についての案内文は、階段歩行の概要を示す案内文と階段歩行の詳細を示す案内文とを有し、
前記階段歩行の概要は、階段の存在する方向、階段の種別、行き先階まで上りであるか下りであるかの情報を含み、
前記階段歩行の詳細は、階段の踊り場又は曲がり角の数、曲がる方向、及び、踊り場又は曲がり角の前後での階段数に関する情報を含む
請求項1ないし4のうちいずれか1項に記載の案内文生成装置。 - ユーザが移動する経路上に存在する階段についての階段情報を記憶部から取得する取得手段と、
前記階段情報に基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成手段と
を備える案内文生成システム。 - 案内文生成装置が実行する案内文生成方法であって、
ユーザが移動する経路上に存在する階段についての階段情報を記憶部から取得する取得ステップと、
前記階段情報と前記経路とに基づいて、階段歩行についての案内文、及び、階段を上り下りした後の歩行についての案内文を生成する生成ステップと
を備える案内文生成方法。 - コンピュータを、請求項1ないし5のうちいずれか1項に記載の案内文生成装置における各手段として機能させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/043702 WO2021090445A1 (ja) | 2019-11-07 | 2019-11-07 | 案内文生成装置、案内文生成システム、案内文生成方法、及びプログラム |
JP2021554506A JPWO2021090445A1 (ja) | 2019-11-07 | 2019-11-07 | |
US17/774,911 US12050107B2 (en) | 2019-11-07 | 2019-11-07 | Guidance sentence generation apparatus, guidance sentence generation system, guidance sentence generation method and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/043702 WO2021090445A1 (ja) | 2019-11-07 | 2019-11-07 | 案内文生成装置、案内文生成システム、案内文生成方法、及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2021090445A1 true WO2021090445A1 (ja) | 2021-05-14 |
Family
ID=75849707
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2019/043702 WO2021090445A1 (ja) | 2019-11-07 | 2019-11-07 | 案内文生成装置、案内文生成システム、案内文生成方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US12050107B2 (ja) |
JP (1) | JPWO2021090445A1 (ja) |
WO (1) | WO2021090445A1 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150324646A1 (en) * | 2014-05-08 | 2015-11-12 | Brown University | Navigation methods and apparatus for the visually impaired |
JP2017026537A (ja) * | 2015-07-27 | 2017-02-02 | 清水建設株式会社 | ナビゲーションシステム及びナビゲーションシステムの経路選択方法 |
JP2019101020A (ja) * | 2017-12-05 | 2019-06-24 | 日本電信電話株式会社 | 案内文生成装置、案内システム、案内文生成方法及びプログラム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001128149A (ja) | 1999-10-28 | 2001-05-11 | Ntt Advanced Technology Corp | 視覚障害者歩行支援方法及び支援システム |
US8594935B2 (en) * | 2009-03-18 | 2013-11-26 | Intouch Graphics, Inc. | Systems, methods, and software for providing wayfinding orientation and wayfinding data to blind travelers |
US9037400B2 (en) * | 2012-06-26 | 2015-05-19 | Jonathan Louis Tolstedt | Virtual walking stick for the visually impaired |
US20150330787A1 (en) * | 2014-05-19 | 2015-11-19 | Joseph Cioffi | Systems, Methods and Software for Redirecting Blind Travelers Using Dynamic Wayfinding Orientation and Wayfinding Data |
-
2019
- 2019-11-07 JP JP2021554506A patent/JPWO2021090445A1/ja active Pending
- 2019-11-07 WO PCT/JP2019/043702 patent/WO2021090445A1/ja active Application Filing
- 2019-11-07 US US17/774,911 patent/US12050107B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150324646A1 (en) * | 2014-05-08 | 2015-11-12 | Brown University | Navigation methods and apparatus for the visually impaired |
JP2017026537A (ja) * | 2015-07-27 | 2017-02-02 | 清水建設株式会社 | ナビゲーションシステム及びナビゲーションシステムの経路選択方法 |
JP2019101020A (ja) * | 2017-12-05 | 2019-06-24 | 日本電信電話株式会社 | 案内文生成装置、案内システム、案内文生成方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US12050107B2 (en) | 2024-07-30 |
US20220412744A1 (en) | 2022-12-29 |
JPWO2021090445A1 (ja) | 2021-05-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Sato et al. | Navcog3: An evaluation of a smartphone-based blind indoor navigation assistant with semantic features in a large-scale environment | |
JP6288967B2 (ja) | ナビゲーション装置 | |
US6728636B2 (en) | Destination guidance system and method for generating individually tailored routes within a complex structure | |
Chung et al. | Mindful navigation for pedestrians: Improving engagement with augmented reality | |
WO2002023128A1 (fr) | Systeme de guide de trajets | |
Tao et al. | Indoor navigation validation framework for visually impaired users | |
CN110546460B (zh) | 用于电梯轿厢分配显示的步行路径地图的自动渲染的系统和方法 | |
JP6978173B2 (ja) | 表示システム、電子装置および地図情報の表示方法 | |
US20110246062A1 (en) | Map and directions system with vertical distance | |
JP2017026537A (ja) | ナビゲーションシステム及びナビゲーションシステムの経路選択方法 | |
Zahabi et al. | Design of navigation applications for people with disabilities: A review of literature and guideline formulation | |
WO2021090445A1 (ja) | 案内文生成装置、案内文生成システム、案内文生成方法、及びプログラム | |
JP2019035658A (ja) | 情報処理システム、情報処理プログラム、情報処理装置および情報処理方法 | |
JP7225673B2 (ja) | 案内文生成装置、案内システム、案内文生成方法及びプログラム | |
JP2009036653A (ja) | ドライブプラン作成装置、ドライブプラン作成方法、ドライブプラン作成プログラムおよび記録媒体 | |
Cai et al. | Navigating Real-World Challenges: A Quadruped Robot Guiding System for Visually Impaired People in Diverse Environments | |
US8340903B2 (en) | Wayfinding system | |
JP3534228B2 (ja) | 目的地案内装置 | |
WO2021084620A1 (ja) | 案内システム及び案内方法 | |
WO2020261407A1 (ja) | 案内情報処理装置、案内情報処理方法及びプログラム | |
JP2008111792A (ja) | 案内文生成システム、案内文生成方法及び案内文生成プログラム | |
Tao et al. | PERCEPT indoor wayfinding for blind and visually impaired users: Navigation instructions algorithm and validation framework | |
KR101596256B1 (ko) | 내비게이션을 위한 웨어러블 기기 기반의 사용자 참여형 장애시설 정보 구축방법 | |
Paiva et al. | A mobile application to enhance mobility of people with permanent or temporary mobility disability–a case study in Portugal | |
JP6956422B2 (ja) | 誘導サービスシステム、誘導サービスプログラム、誘導サービス方法および誘導サービス装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 19951648 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2021554506 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 19951648 Country of ref document: EP Kind code of ref document: A1 |