WO2024201954A1 - 通信端末、方法、及びプログラム - Google Patents

通信端末、方法、及びプログラム Download PDF

Info

Publication number
WO2024201954A1
WO2024201954A1 PCT/JP2023/013393 JP2023013393W WO2024201954A1 WO 2024201954 A1 WO2024201954 A1 WO 2024201954A1 JP 2023013393 W JP2023013393 W JP 2023013393W WO 2024201954 A1 WO2024201954 A1 WO 2024201954A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
remote conference
communication terminal
terminal
speaker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2023/013393
Other languages
English (en)
French (fr)
Inventor
慎一 菊池
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to CN202380094746.0A priority Critical patent/CN120836153A/zh
Priority to EP23930591.5A priority patent/EP4694104A4/en
Priority to JP2025509548A priority patent/JPWO2024201954A1/ja
Priority to PCT/JP2023/013393 priority patent/WO2024201954A1/ja
Publication of WO2024201954A1 publication Critical patent/WO2024201954A1/ja
Priority to US19/309,507 priority patent/US20250392489A1/en
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827—Network arrangements for conference optimisation or adaptation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1083—In-session procedures
    • H04L65/1089—In-session procedures by adding media; by removing media
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems

Definitions

  • the present invention relates to a communication terminal, a method, and a program.
  • Patent document 1 describes a technology in which a mobile terminal is brought into a vehicle equipped with vehicle equipment, and when the vehicle starts moving, the mobile terminal starts communicating with the vehicle equipment that detects events such as collisions, and performs notification processing regarding the events via a communication network.
  • Patent Document 1 JP 2019-33427 A
  • the present application aims to improve operability when multiple users participate in a remote conference via a communication terminal installed in a mobile object. This will ultimately further improve traffic safety and contribute to the development of a sustainable transportation system.
  • a communication terminal is provided.
  • the communication terminal is mounted on a mobile body and conducts a remote conference.
  • the communication terminal includes a reception unit that accepts multiple users in the mobile body as participants in the remote conference.
  • the communication terminal includes a speaker identification unit that identifies a speaker from among the multiple users accepted by the reception unit as participants in the remote conference.
  • the communication terminal includes a control unit that performs control to highlight a user identified as a speaker by the speaker identification unit on a remote conference system.
  • the speaker identification unit may identify a speaker from among the multiple users based on at least one of (i) image information within the moving body acquired by an imaging device mounted on the moving body, and (ii) audio information acquired by a microphone installed on the moving body.
  • Any of the above communication terminals may include a seating information acquisition unit that acquires the seating positions of the multiple users within the moving body.
  • the speaker identification unit may identify a speaker from among the multiple users based on the sound source direction detected from audio information acquired by multiple microphones mounted on the moving body, the installation positions of the multiple microphones within the moving body, and the seating positions of the multiple users acquired by the seating information acquisition unit.
  • Any of the above communication terminals may include a seating information acquisition unit that acquires the seating positions of the multiple users in the vehicle.
  • the speaker identification unit may identify a speaker from among the multiple users based on voice information acquired by each of microphones mounted corresponding to each of the multiple seats of the vehicle and the seating positions of the multiple users acquired by the seating information acquisition unit.
  • the seating information acquisition unit may acquire the seating positions of the multiple users by acquiring information specifying the seat position of the mobile object from each of the multiple users.
  • the seating information acquisition unit may acquire the seating positions of the multiple users based on the positions of the user terminals identified from wireless signals received from the user terminals carried by the multiple users.
  • the moving object may be a vehicle.
  • a method is provided.
  • the method is executed by a communication terminal mounted on a mobile body for conducting a remote conference.
  • the method includes a step of accepting a plurality of users in the mobile body as participants in the remote conference.
  • the method includes a step of identifying a speaker from among the plurality of users accepted as participants in the remote conference.
  • the method includes a step of performing control to highlight the user identified as the speaker from among the plurality of users on a remote conference system.
  • a program is provided.
  • the program causes a computer to function as any one of the above communication terminals.
  • FIG. 1 conceptually illustrates a configuration of a remote conference system 5 according to an embodiment.
  • 1 shows an example of a functional configuration of a remote conference management system 110 included in the remote conference server 100.
  • the functional configuration of the communication terminal 20 provided in the mobile object 10 is shown together with the display device 22, the microphone 60, and the imaging device 28.
  • An example of a sequence executed by the user terminal 80, the communication terminal 20, the remote conference server 100, and the user terminal 120 is shown.
  • An example of a screen 500 displayed on the display device 22 or the user terminal 120 is shown in schematic form.
  • An example of a screen 600 displayed on the display device 22 or the user terminal 120 is shown in schematic form.
  • 10 is a flowchart showing a processing procedure related to a process in which the communication terminal 20 identifies a speaker.
  • An example of a screen 800 displayed on the display device 22 or the user terminal 120 is shown in schematic form.
  • the configuration of a moving body 910 as a modified example of the moving body 10 is shown.
  • FIG. 1 conceptually illustrates the configuration of a remote conference system 5 in one embodiment.
  • the remote conference system 5 includes a mobile object 10, a remote conference server 100, and a user terminal 120.
  • the mobile object 10 is a vehicle.
  • the mobile body 10 includes a communication terminal 20, a display device 22a, a display device 22b, a display device 22c, and a display device 22d, a seat 11a, a seat 11b, a seat 11c, and a seat 11d, an imaging device 28, a microphone 60a, a microphone 60b, a microphone 60c, and a microphone 60d, and an antenna 26a, an antenna 26b, and an antenna 26c.
  • Display device 22a, display device 22b, display device 22c, and display device 22d are provided at positions corresponding to seats 11a, 11b, 11c, and 11d, respectively.
  • display device 22a, display device 22b, display device 22c, and display device 22d may be collectively referred to as "display device 22."
  • Display device 22 displays images for remote conferences.
  • Display device 22 further has a function of acquiring instructions from user 90 by touch operations, etc.
  • Microphones 60a, 60b, 60c, and 60d are provided at positions corresponding to seats 11a, 11b, 11c, and 11d, respectively.
  • microphones 60a and 60b corresponding to seats 11a and 11b, which are the front seats are provided near display devices 22a and 22b, respectively.
  • Microphones 60c and 60d corresponding to seats 11c and 11d, which are the rear seats, are provided near the headrests of seats 11c and 11d, respectively.
  • Microphones 60a, 60b, 60c, and 60d may be collectively referred to as "microphones 60.”
  • the remote conference server 100 can communicate with the communication terminal 20 and the user terminal 120.
  • the remote conference server 100 manages the participants who participate in the remote conference.
  • the communication terminal 20 and the user terminal 120 can communicate with each other.
  • the communication terminal 20 cooperates with the remote conference server 100 to provide functions that allow passengers in the mobile object 10 to participate in a remote conference.
  • the display device 22 and the microphone 60 are connected to the communication terminal 20.
  • the communication terminal 20 displays conference images received under the management of the remote conference server 100 on the display device 22.
  • the communication terminal 20 is connected to the microphone 60.
  • the communication terminal 20 transmits the voice acquired from the microphone 60 as voice data to the user terminal 120, which is a terminal used by the participants of the conference.
  • User 90a and user 90b are passengers of mobile body 10.
  • User 90a is a user of user terminal 70.
  • User 90b is a user of user terminal 80.
  • User terminal 70 and user terminal 80 are, for example, smartphones.
  • User terminal 70 and user terminal 80 may be portable terminals other than smartphones.
  • User terminal 70 and user terminal 80 may be computing devices with communication capabilities.
  • User terminal 70 and user terminal 80 may be terminals such as mobile phones, PDAs, tablet computers, notebook computers, laptop computers, and wearable computers.
  • the antennas 26a, 26b, and 26c are fixedly installed at different positions in the mobile body 10.
  • the antennas 26a, 26b, and 26c may be collectively referred to as "antenna 26".
  • the communication terminal 20 performs wireless communication with a user terminal 70 or a user terminal 80 carried by a user 90 in the mobile body 10 via the antenna 26.
  • the communication terminal 20 performs wireless communication using UWB (Ultra-Wide Band) with the user terminal 70 carried by the user 90a via the antenna 26.
  • UWB Ultra-Wide Band
  • the communication terminal 20 calculates the position of the user terminal 70 based on a signal received in wireless communication using UWB with the user terminal 70, and determines in which of the seats 11a, 11b, 11c, and 11d the user 90a is seated based on the detected position of the user terminal 70.
  • User 90c exists outside the mobile unit 10.
  • User 90c is a user of a user terminal 120.
  • the user terminal 120 may be, for example, a smartphone.
  • the user terminal 120 may be a computing device with a communication function.
  • the user terminal 120 may be a mobile terminal such as a mobile phone, a PDA, a tablet computer, a notebook computer, a laptop computer, a wearable computer, or a desktop computer.
  • users 90a, 90b, and 90c are participating in the same remote conference managed by the remote conference server 100. It is assumed that user 90a is participating in the remote conference using a communication terminal 20, user 90b is participating in the remote conference using a user terminal 80, and user 90c is participating in the remote conference using a user terminal 120.
  • the communication terminal 20, the user terminal 80, and the user terminal 120 transmit current location information and moving speed information to the remote conference server 100 at predetermined time intervals.
  • the communication terminal 20, the user terminal 80, and the user terminal 120 each transmit current location information calculated based on signals received from GNSS satellites to the remote conference server 100 at predetermined time intervals.
  • the user terminal 80 and the user terminal 120 further transmit current moving speed information calculated from changes in the current location information over time to the remote conference server 100 at predetermined time intervals.
  • the communication terminal 20 transmits current location information calculated from changes in the current location information over time, or moving speed information based on the vehicle speed information of the mobile object 10, to the remote conference server 100 at predetermined time intervals.
  • the remote conference server 100 determines, based on the current location information and moving speed information received from the communication terminal 20, the user terminal 80, and the user terminal 120, that the communication terminal 20 and the user terminal 80 are within a predetermined range and are being used to participate in the same remote conference while moving. In this case, the remote conference server 100 prompts the user 90a and/or the user 90b through the communication terminal 20 and/or the user terminal 80 so that both users 90 in the mobile body 10 participate in the conference through one of the communication terminal 20 and the user terminal 80. For example, the remote conference server 100 prompts the user 90a and/or the user 90b through the communication terminal 20 and/or the user terminal 80 so that the user 90b of the user terminal 80 participates in the conference through the communication terminal 20. In this way, the communication terminal 20 can prompt the user 90a and the user 90b to participate in the remote conference through one communication line.
  • the communication terminal 20 detects the number of people aboard the mobile body 10 based on an image of the inside of the mobile body 10 captured by the imaging device 28 or information from a seat sensor provided in each of the seats 11.
  • the communication terminal 20 accepts user 90b as a participant in the remote conference through the communication terminal 20, on the condition that the number of participants in the remote conference through the communication terminal 20 does not exceed the number detected in the mobile body 10. This makes it possible to prevent a number of users that exceeds the number of people aboard the mobile body 10 from participating in the remote conference.
  • by having a large number of participants participate in the remote conference through the communication terminal 20 it is possible to prevent the communication volume of the communication terminal 20 from exceeding a predetermined set communication volume for the remote conference.
  • the communication terminal 20 acquires information identifying the user 90 seated in the corresponding seat 11 from the user 90 through the display device 22 and stores it as seating information.
  • the communication terminal 20 identifies the seat 11 in which the user 90 is seated based on a signal received from the user terminal through wireless communication using UWB, and receives information identifying the user 90 seated in the seat 11 from the user terminal and stores it as seating information.
  • the communication terminal 20 acquires the voice uttered by the user 90 through the microphone 60.
  • the communication terminal 20 identifies the user 90 who is currently speaking from among the users 90 accepted as participants in the remote conference based on the voice acquired through the microphone 60 and the seating information.
  • the communication terminal 20 displays on the display device 22 and the user terminal 120 that the identified speaker is speaking. This makes it possible to inform each participant of the remote conference who is speaking, even when a single communication terminal 20 accepts multiple users 90 as participants in the remote conference.
  • FIG. 2 shows an example of the functional configuration of the remote conference management system 110 provided in the remote conference server 100.
  • the remote conference server 100 is responsible for processing the login of the user 90 to the remote conference, and processing for the user terminal 80, communication terminal 20, and user terminal 120 used by the user to participate in the remote conference to communicate with each other.
  • the remote conference management system 110 may be realized by one or more computers.
  • the remote conference management system 110 includes a determination unit 210, a control unit 220, a terminal information acquisition unit 230, and a connection status information acquisition unit 240.
  • the determination unit 210 determines whether a first terminal used by a first user to participate in a remote conference and a second terminal used by a second user to participate in a remote conference are within a predetermined range.
  • the first terminal is, for example, a communication terminal 20
  • the second terminal is, for example, a user terminal 80.
  • the control unit 220 performs control via one of the first terminal and the second terminal to allow the user of the other terminal to participate in the remote conference.
  • the control unit 220 may select, as a higher priority, the terminal having the better communication conditions between the first terminal and the second terminal as the terminal for allowing the user of the other terminal to participate in the remote conference.
  • the control unit 220 may select the first terminal as the terminal for allowing the user of the second terminal to participate in the remote conference.
  • the terminal information acquisition unit 230 acquires first information indicating the positions of the first terminal and the second terminal.
  • the determination unit 210 determines whether the first terminal and the second terminal are present within a predetermined range based on the first information.
  • the terminal information acquisition unit 230 may further acquire second information indicating at least one of the movement direction and acceleration of the first terminal and the second terminal.
  • the determination unit 210 may determine whether the first terminal and the second terminal are present within a predetermined range based on the first information and the second information.
  • the connection status information acquisition unit 240 may acquire third information indicating the connection status of wireless communication between the first terminal and the second terminal.
  • the determination unit 210 may determine whether the first terminal and the second terminal are present within a predetermined range based on the third information.
  • control unit 220 may prompt at least one of the first user and the second user to allow the user of the other terminal to participate in the remote conference through one of the first terminal and the second terminal.
  • FIG. 3 shows the functional configuration of the communication terminal 20 provided in the mobile object 10, together with the display device 22, the microphone 60, and the imaging device 28.
  • the communication terminal 20 includes a participant information acquisition unit 310, a control unit 320, a speaker identification unit 330, a seating information acquisition unit 340, a number of people identification unit 350, a number of users determination unit 360, a reception unit 370, a storage unit 380, and a communication unit 390.
  • the storage unit 380 includes a non-volatile storage medium.
  • the non-volatile storage medium may be a semiconductor memory such as a flash memory.
  • the storage unit 380 stores information necessary for the communication terminal 20 to execute processing.
  • the storage unit 380 may store a program to be executed by a processor provided in the communication terminal 20.
  • the communication unit 390 is responsible for communication with the outside of the mobile body 10. Specifically, the communication unit 390 is responsible for communication between the remote conference server 100 and the user terminal 120. The communication unit 390 can also be responsible for communication with the user terminal 80.
  • the imaging device 28 is provided in a position where it can capture an image of an occupant sitting in the seat 11.
  • the imaging device 28 may include one or more imaging devices.
  • the communication terminal 20 is mounted on the mobile body 10 and performs processing for conducting a remote conference.
  • the number of people specification unit 350 specifies the number of people on board the mobile body 10.
  • the number of users determination unit 360 determines the number of users that the communication terminal 20 can accept as participants in a remote conference, depending on the number of people specified by the number of people specification unit 350.
  • the number of users determination unit 360 may determine the number of users that the communication terminal 20 can accept as participants in a remote conference, depending further on the communication status of the communication terminal 20.
  • the participant information acquisition unit 310 acquires information that one or more users participating in the remote conference using a mobile terminal are present within the mobile body 10.
  • the control unit 320 may perform control to allow at least a portion of the one or more users to participate in the remote conference via the communication terminal 20, with the number of users determined by the user number determination unit 360 as the upper limit.
  • the communication unit 390 continuously transmits the current location information of the communication terminal 20 to the remote conference management system that manages the remote conference.
  • the communication unit 390 further continuously transmits at least one of the movement speed information and acceleration information of the communication terminal 20 to the remote conference management system that manages the remote conference.
  • the number of people determining unit 350 determines the number of people aboard the moving body 10 based on information detected by a seating sensor provided on the seat of the moving body 10.
  • the number of people determining unit 350 may determine the number of people aboard the moving body 10 by analyzing image information of the inside of the moving body 10 acquired by an imaging device provided on the moving body 10.
  • the reception unit 370 receives multiple users in the mobile unit 10 as participants in the remote conference.
  • the speaker identification unit 330 identifies a speaker from among the multiple users received by the reception unit 370 as participants in the remote conference.
  • the control unit 320 performs control to highlight the user identified as the speaker by the speaker identification unit 330 on the remote conference system.
  • the speaker identification unit 330 identifies a speaker from among multiple users based on at least one of (i) image information from within the moving body 10 acquired by an imaging device 28 mounted on the moving body 10, and (ii) audio information acquired by a microphone 60 installed on the moving body 10.
  • the seating information acquisition unit 340 acquires the seating positions of multiple users within the mobile body 10.
  • the speaker identification unit 330 identifies the speaker from among the multiple users based on the sound source direction detected from the voice information acquired by the multiple microphones 60 mounted on the mobile body 10, the installation positions of the multiple microphones 60 within the mobile body 10, and the seating positions of the multiple users acquired by the seating information acquisition unit 340.
  • the speaker identification unit 330 identifies a speaker from among multiple users based on the voice information acquired by each of the microphones 60 mounted corresponding to each of the multiple seats of the mobile body 10 and the seating positions of the multiple users acquired by the seating information acquisition unit 340.
  • the seating information acquisition unit 340 acquires the seating positions of the multiple users by acquiring information specifying the seat position of the mobile body 10 from each of the multiple users.
  • the seating information acquisition unit 340 may acquire the seating positions of the multiple users based on the positions of the user terminals identified from wireless signals received from the user terminals carried by each of the multiple users. For example, the seating information acquisition unit 340 may calculate the position of the user terminal 70 based on a UWB communication signal received through the antenna 26 between the user terminal 70 and the user terminal 70, and acquire the position of user 90a based on the calculated position of the user terminal 70.
  • FIG. 4 shows an example of a processing sequence executed by the user terminal 80, the communication terminal 20, the remote conference server 100, and the user terminal 120. At the start of this sequence, it is assumed that there is no user 90 participating in the remote conference using the communication terminal 20.
  • the number of passengers determining unit 350 of the communication terminal 20 determines the number of passengers aboard the moving body 10.
  • the number of passengers determining unit 350 of the communication terminal 20 determines the number of passengers aboard the moving body 10 based on the image of the interior of the moving body 10 captured by the imaging device 28 and information from the seat sensors provided in each of the seats 11.
  • the number-of-users determination unit 360 determines the number of users that can be accepted by the reception unit 370, according to the number of users identified by the number-of-users identification unit 350. For example, the number-of-users determination unit 360 determines the number of users identified by the number-of-users identification unit 350 as the upper limit of the number of users that can be accepted by the reception unit 370.
  • the number-of-users determination unit 360 may determine the number of users that the reception unit 370 can accept, depending on the communication status of the communication unit 390 acquired by the connection status information acquisition unit 240.
  • the number-of-users determination unit 360 may determine a smaller number of users that the reception unit 370 can accept, the worse the communication status of the communication unit 390 acquired by the connection status information acquisition unit 240 is.
  • the reception unit 370 accepts the user 90a as a participant in the remote conference and performs a login process, such as sending the authentication information entered at the time of login to the remote conference server 100.
  • the seating information acquisition unit 340 acquires the seating position of the user 90 in the mobile object 10. For example, as part of the login process, the seating information acquisition unit 340 causes the display device 22a to display a screen for specifying the seating position of the user 90a, and acquires information indicating the seating position input by the user 90a through the display device 22a.
  • the seating position may be information identifying the seat 11 in which the user 90a is seated.
  • the seating information acquisition unit 340 holds information that associates the user identification information that identifies the user 90a with the seat identification information that identifies the seat 11 in which the user 90a is seated as seating information.
  • the seating information acquisition unit 340 identifies the seat 11 in which the user 90 is seated based on a signal received by wireless communication using UWB. For example, the seating information acquisition unit 340 calculates the distance between the antenna 26a and the user terminal 70, the distance between the antenna 26b and the user terminal 70, and the distance between the antenna 26c and the user terminal 70 based on the TOA (Time of Arrival), and calculates the position of the user terminal 70 by triangulation based on each calculated distance.
  • TOA Time of Arrival
  • the seating information acquisition unit 340 may calculate the signal arrival angle from the user terminal 70 to each antenna 26 based on the difference in the time when each antenna 26 received a signal transmitted from the user terminal 70, and calculate the position of the user terminal 70 based on the calculated signal arrival angle and the position of each antenna 26.
  • the seating information acquisition unit 340 identifies the seat 11 in which the user 90a who owns the user terminal 70 is seated based on the calculated position of the user terminal 70 and the position of the seat 11.
  • the seating information acquisition unit 340 may retain, as seating information, information associating the user identification information of the user 90a, which is previously associated with the user terminal 70, with the seat identification information identifying the seat 11 on which the user 90a is seated.
  • the seating information acquisition unit 340 may receive the user identification information identifying the user 90a from the user terminal 70, and retain, as seating information, information associating the received user identification information with the seat identification information identifying the seat 11 on which the user 90a is seated.
  • the login process may be performed using the user terminal 70, and the seating information acquisition unit 340 may receive, from the user terminal 70, the user identification information input to the user terminal 70 as part of the login process.
  • the communication terminal 20 when the communication terminal 20 completes logging in to the remote conference, the communication terminal 20 starts a process of periodically transmitting position information and speed information to the remote conference server 100.
  • the communication unit 390 transmits to the remote conference server 100, at predetermined time intervals, the current position information calculated based on the signal received from the GNSS satellite, and the current position information calculated from the time change of the current position information or the moving speed information based on the vehicle speed information of the moving body 10.
  • the user terminal 80 and the user terminal 120 start a process of periodically transmitting position information and speed information to the remote conference server 100 (S422 and S424).
  • the user terminal 80 and the user terminal 120 may transmit to the remote conference server 100 the current moving speed information calculated from the time change of the current position information.
  • the terminal information acquisition unit 230 of the remote conference server 100 receives the position information and speed information from the user terminal 80, the communication terminal 20, and the user terminal 120.
  • the user terminal 80, the communication terminal 20, and the user terminal 120 may start a process of periodically transmitting their respective acceleration information to the remote conference server 100 in addition to or instead of the moving speed.
  • the determination unit 210 of the remote conference server 100 identifies the terminals used by the users 90 on the same mobile body 10 to participate in the same remote conference.
  • the terminal information acquisition unit 230 identifies the terminals used by the users 90 on the same mobile body 10 to participate in the same remote conference based on the position information and speed information received from each of the user terminal 80, the communication terminal 20, and the user terminal 120, and the identification information of the terminals used by users who have already logged in.
  • the determination unit 210 determines that the user terminal 80 and the communication terminal 20 are used to participate in the same remote conference by the users 90 on the same mobile body 10.
  • the connection status information acquisition unit 240 may acquire information indicating the connection status with other terminals via wireless communication from the user terminal 80, the communication terminal 20, and the user terminal 120, and may identify the terminals used by the user 90 on the same mobile body 10 to participate in the same remote conference based on the acquired information.
  • the communication unit 390 of the communication terminal 20 and the user terminal 80 transmit to the remote conference server 100 information indicating the identification information and connection status of one or more terminals connected by WiFi (registered trademark).
  • the connection status of WiFi may include information indicating the received signal strength from other terminals.
  • the connection status information acquisition unit 240 acquires information transmitted from the communication terminal 20 and the user terminal 80, and the judgment unit 210 identifies the terminals used by the user 90 on the same mobile body 10 to participate in the same remote conference based on the acquired information.
  • the determination unit 210 may identify a terminal that is connected via WiFi (registered trademark) and has a received signal strength higher than a predetermined value as a terminal that is being used by a user 90 on the same mobile object 10 to participate in the same remote conference.
  • the control unit 220 of the remote conference server 100 performs processing to send a switching recommendation to the communication terminal 20 and the user terminal 80, which recommends switching the terminal from which the user is participating in the remote conference.
  • the control unit 220 sends information to the communication terminal 20 and the user terminal 80 indicating that user 90a and user 90b are participating in the same remote conference, and that it is recommended that user 90b participate in the remote conference through the communication terminal 20.
  • the participant information acquisition unit 310 of the communication terminal 20 acquires information indicating that one or more users 90 who are participating in the remote conference using the user terminal 80 are present within the mobile object 10.
  • control unit 220 may acquire the communication status of each of the user terminals 80 and 120, and select the terminal with the better communication status from among the user terminals 80 and 120 as the terminal from which the user 90 may participate in the remote conference. This allows multiple users 90 to participate in the remote conference through the communication line of the terminal with the more stable communication status.
  • control unit 320 of the communication terminal 20 performs processing to switch the terminal from which the user is to participate in the remote conference, and in S436, the communication terminal 20 transmits a switching completion notification of the terminal from which the user is to participate to the remote conference to the remote conference server 100.
  • the control unit 320 causes the display device 22 to display a screen for accepting an operation from the user 90b to agree to participate in the remote conference through the communication terminal 20.
  • the communication terminal 20 detects that the user 90b has performed an agreement operation on the display device 22b, in S436, the communication terminal 20 transmits a switching completion notification to the remote conference server 100, indicating that the user 90b will participate in the remote conference from the communication terminal 20.
  • control unit 320 performs processing to switch terminals that are participating in the remote conference in S434.
  • control unit 320 may perform processing to switch terminals that are participating in the remote conference only if the number of users does not exceed the number determined by the number-of-users determination unit 360.
  • FIG. 5 is a schematic diagram showing an example of a screen 500 displayed on the display device 22 or the user terminal 120.
  • the screen 500 shows a case in which a user 90a is participating in a remote conference from a communication terminal 20, a user 90b is participating in a remote conference from a user terminal 80, and a user 90c is participating in a remote conference from a user terminal 120.
  • Screen 500 includes objects 510, 520, and 530.
  • Object 510 includes a facial image of user 90a captured by, for example, imaging device 28.
  • Object 520 includes a facial image of user 90b captured by user terminal 80.
  • Object 530 includes a facial image of user 90c captured by user terminal 120.
  • FIG. 6 shows a schematic example of a screen 600 displayed on the display device 22 or the user terminal 120.
  • the screen 600 shows a case where a user 90a and a user 90b are participating in a remote conference from a communication terminal 20, and a user 90c is participating in the remote conference from a user terminal 120.
  • Screen 600 includes objects 610, 620, and 630.
  • Object 610 includes facial images of user 90a and user 90b captured by imaging device 28, for example.
  • Object 620 includes facial images of user 90a and user 90b captured by imaging device 28, the same as object 610.
  • Object 630 includes a facial image of user 90c captured by user terminal 120 and transmitted from user terminal 120.
  • the multiple users 90 can be treated as separate participants. This makes it possible for other participants to know from the communication terminal 20 that multiple users 90 are participating in the remote conference.
  • control unit 320 uses the image captured by the imaging device 28 as both the participant image of user 90a and the participant image of user 90b.
  • control unit 320 may extract a facial image of user 90a and a facial image of user 90b from the image captured by the imaging device 28, and process the extracted facial image of user 90a as the participant image of user 90a and the extracted facial image of user 90b as the participant image of user 90b.
  • FIG. 7 is a flowchart showing the processing steps for the communication terminal 20 to identify the speaker. The processing of this flowchart is executed repeatedly, for example, when the communication terminal 20 is executing processing related to a remote conference in cooperation with the remote conference server 100.
  • the speaker identification unit 330 detects voice from the information collected by the microphone 60. In S704, the speaker identification unit 330 identifies the speaker based on the voice information detected in S702 and the seating information.
  • the speaker identification unit 330 determines that the speaker is seated in seat 11b, which is located at a position corresponding to microphone 60b.
  • the speaker identification unit 330 refers to the seating information and identifies user 90b, who is identified by the user identification information associated with the seat identification information of seat 11b, as the speaker.
  • the communication unit 390 transmits the speaker information to the user terminal 120.
  • the communication unit 390 transmits identification information of the speaker in the remote conference system to the user terminal 120 as the speaker information.
  • control unit 320 highlights the speaker's object. For example, if user 90b is the speaker, the control unit 320 highlights object 620. At this time, the control unit 320 does not highlight object 610.
  • FIG. 8 is a schematic diagram showing an example of a screen 800 displayed on the display device 22 or the user terminal 120.
  • the screen 800 shows a case where users 90a and 90b are participating in a remote conference from the communication terminal 20, user 90c is participating in the remote conference from the user terminal 120, and user 90b is speaking.
  • Screen 800 includes objects 810, 820, and 830.
  • Objects 810 and 830 are the same as objects 610 and 630, respectively.
  • Object 820 includes facial images of users 90a and 90b captured by imaging device 28, for example. Since user 90b has been identified as the speaker, object 820 is displayed highlighted to indicate that user 90b is the speaker.
  • the communication terminal 20 can inform other conference participants who is speaking, even when multiple users are participating in a remote conference through a single communication terminal 20.
  • FIG. 9 shows the configuration of a mobile body 910, which is a modified version of the mobile body 10.
  • the mobile body 910 differs from the mobile body 10 in that the mobile body 910 includes a microphone array 960 instead of the microphone 60. Therefore, the differences from the mobile body 10 will be mainly described here.
  • the microphone array 960 includes multiple microphones.
  • the speaker identification unit 330 of the communication terminal 20 uses the microphone array 960 to localize the sound source.
  • the speaker identification unit 330 uses this principle to identify the direction of the sound source based on the audio signals acquired by the multiple microphones included in the microphone array 960.
  • the speaker identification unit 330 can identify the speaker from among the users 90 based on the estimated direction of the sound source, the installation position of the microphone array within the mobile body 10, and the seating information acquired by the seating information acquisition unit 340.
  • the speaker identification unit 330 identifies the speaker using the voice acquired by the multiple microphones.
  • the speaker identification unit 330 may identify the speaker by recognizing the voice of the user 90.
  • the speaker identification unit 330 may acquire the voiceprint of the speaker in advance when performing a login process, etc., and may associate the acquired voiceprint with the identification information of the user 90 and store it as voiceprint information.
  • the speaker identification unit 330 may extract a voiceprint from the voice acquired by a microphone installed in the mobile object 10 when a remote conference is being held, and identify the speaker from among the multiple users 90 based on the extracted voiceprint and the voiceprint information.
  • the speaker identification unit 330 may identify a speaker from each of the facial images of the multiple users 90 captured by the imaging device 28. For example, the speaker identification unit 330 may identify a speaker from among the multiple users 90 based on the mouth movement of the facial image. The speaker identification unit 330 may identify a speaker from among the multiple users 90 based on the voice collected by the microphone in addition to the mouth movement of the facial image.
  • the moving body 10 is a vehicle.
  • any moving body other than a vehicle may be used as the moving body 10.
  • the moving body 10 may be transportation equipment such as a train, an airplane, or a ship.
  • the remote conference system 5 when multiple users 90 are participating in the same remote conference from different terminals in the mobile body 10, it is possible to encourage them to participate in the conference through one terminal. This makes it possible to encourage multiple users to participate in the remote conference through one communication line. Furthermore, the communication terminal 20 determines the upper limit of users participating in the remote conference through the communication terminal 20 according to the number of people aboard the mobile body 10 and the communication status of the communication terminal 20, so that the communication volume of the communication terminal 20 does not exceed the communication volume set in advance for the remote conference.
  • the current speaker is identified based on the voice acquired through multiple microphones provided in the mobile body 10 and the seating information, and the fact that the identified speaker is speaking is displayed on the display device 22 and the user terminal 120. This makes it possible to inform each participant of the remote conference who is speaking, even when a single communication terminal 20 accepts multiple users 90 as participants in the remote conference.
  • FIG. 10 shows an example of a computer 2000 in which multiple embodiments of the present invention may be embodied in whole or in part.
  • a program installed on the computer 2000 may cause the computer 2000 to function as the remote conference management system 110 according to an embodiment or each part of the system, or various devices such as the communication terminal 20 or each part of the device, perform operations associated with the system or each part of the system or the device or each part of the device, and/or perform a process or steps of the process according to an embodiment.
  • Such a program may be executed by the CPU 2012 to cause the computer 2000 to perform specific operations associated with some or all of the blocks of the processing procedures and block diagrams described herein.
  • the computer 2000 includes a CPU 2012 and a RAM 2014, which are interconnected by a host controller 2010.
  • the computer 2000 also includes a ROM 2026, a flash memory 2024, a communication interface 2022, and an input/output chip 2040.
  • the ROM 2026, the flash memory 2024, the communication interface 2022, and the input/output chip 2040 are connected to the host controller 2010 via the input/output controller 2020.
  • the CPU 2012 operates according to the programs stored in the ROM 2026 and RAM 2014, thereby controlling each unit.
  • the communication interface 2022 communicates with other electronic devices via a network.
  • the flash memory 2024 stores programs and data used by the CPU 2012 in the computer 2000.
  • the ROM 2026 stores programs such as a boot program executed by the computer 2000 upon activation, and/or programs that depend on the hardware of the computer 2000.
  • the input/output chip 2040 may also connect various input/output units such as a keyboard, mouse, and monitor to the input/output controller 2020 via input/output ports such as a serial port, a parallel port, a keyboard port, a mouse port, a monitor port, a USB port, an HDMI port, etc.
  • the programs are provided via a computer-readable storage medium such as a CD-ROM, DVD-ROM, or memory card, or via a network.
  • RAM 2014, ROM 2026, or flash memory 2024 are examples of computer-readable storage media.
  • the programs are installed in flash memory 2024, RAM 2014, or ROM 2026, and executed by CPU 2012. Information processing described in these programs is read by computer 2000, and brings about cooperation between the programs and the various types of hardware resources described above.
  • An apparatus or method may be constructed by realizing operations or processing of information according to the use of computer 2000.
  • CPU 2012 may execute a communication program loaded into RAM 2014 and instruct communication interface 2022 to perform communication processing based on the processing described in the communication program.
  • communication interface 2022 reads transmission data stored in a transmission buffer processing area provided in a recording medium such as RAM 2014 or flash memory 2024, transmits the read transmission data to the network, and writes received data received from the network to a reception buffer processing area or the like provided on the recording medium.
  • the CPU 2012 may also cause all or a necessary portion of a file or database stored in a recording medium such as a flash memory 2024 to be read into the RAM 2014, and perform various types of processing on the data in the RAM 2014. The CPU 2012 then writes the processed data back to the recording medium.
  • a recording medium such as a flash memory 2024
  • Various types of information such as various types of programs, data, tables, and databases, may be stored on the recording medium and subjected to information processing.
  • the CPU 2012 may execute various types of processing on the data read from the RAM 2014, including various types of operations, information processing, conditional judgment, conditional branching, unconditional branching, information search/replacement, etc., as described herein and specified by the instruction sequence of the program, and write back the results to the RAM 2014.
  • the CPU 2012 may also search for information in a file, database, etc. in the recording medium.
  • the CPU 2012 may search for an entry that matches a condition in which an attribute value of the first attribute is specified from among the multiple entries, read the attribute value of the second attribute stored in the entry, and thereby obtain the attribute value of the second attribute associated with the first attribute that satisfies a predetermined condition.
  • the above-described programs or software modules may be stored in a computer-readable storage medium on the computer 2000 or in the vicinity of the computer 2000.
  • a recording medium such as a hard disk or RAM provided in a server system connected to a dedicated communication network or the Internet can be used as the computer-readable storage medium.
  • the programs stored in the computer-readable storage medium may be provided to the computer 2000 via the network.
  • the programs installed in the computer 2000 and causing the computer 2000 to function as the remote conference management system 110 may act on the CPU 2012 etc. to cause the computer 2000 to function as each part of the remote conference management system 110.
  • the information processing described in these programs is loaded into the computer 2000, it functions as each part of the remote conference management system 110, which is a concrete means in which the software and the various hardware resources described above work together. These concrete means then realize the calculation or processing of information according to the intended use of the computer 2000 in this embodiment, thereby constructing a unique remote conference management system 110 according to the intended use.
  • the programs installed in the computer 2000 and causing the computer 2000 to function as the communication terminal 20 may act on the CPU 2012 etc. to cause the computer 2000 to function as each part of the communication terminal 20.
  • the information processing described in these programs is loaded into the computer 2000, it functions as each part of the communication terminal 20, which is a concrete means in which the software and the various hardware resources described above work together. These concrete means then realize the calculation or processing of information according to the intended use of the computer 2000 in this embodiment, thereby constructing a unique communication terminal 20 according to the intended use.
  • each block may represent (1) a stage of a process where an operation is performed or (2) a portion of an apparatus responsible for performing an operation.
  • Particular stages and portions may be implemented by dedicated circuitry, programmable circuitry provided with computer-readable instructions stored on a computer-readable storage medium, and/or a processor provided with computer-readable instructions stored on a computer-readable storage medium.
  • Dedicated circuitry may include digital and/or analog hardware circuitry, and may include integrated circuits (ICs) and/or discrete circuits.
  • Programmable circuitry may include reconfigurable hardware circuitry, including logic AND, logic OR, logic XOR, logic NAND, logic NOR, and other logic operations, memory elements such as flip-flops, registers, field programmable gate arrays (FPGAs), programmable logic arrays (PLAs), and the like.
  • reconfigurable hardware circuitry including logic AND, logic OR, logic XOR, logic NAND, logic NOR, and other logic operations, memory elements such as flip-flops, registers, field programmable gate arrays (FPGAs), programmable logic arrays (PLAs), and the like.
  • a computer-readable storage medium may include any tangible device capable of storing instructions that are executed by a suitable device, such that the computer-readable storage medium having instructions stored thereon constitutes at least a portion of a product that includes instructions that can be executed to provide a means for performing the operations specified in a process or block diagram.
  • Examples of computer-readable storage media may include electronic storage media, magnetic storage media, optical storage media, electromagnetic storage media, semiconductor storage media, and the like.
  • Computer-readable storage media may include floppy disks, diskettes, hard disks, random access memories (RAMs), read-only memories (ROMs), erasable programmable read-only memories (EPROMs or flash memories), electrically erasable programmable read-only memories (EEPROMs), static random access memories (SRAMs), compact disk read-only memories (CD-ROMs), digital versatile disks (DVDs), Blu-ray (RTM) disks, memory sticks, integrated circuit cards, and the like.
  • RAMs random access memories
  • ROMs read-only memories
  • EPROMs or flash memories erasable programmable read-only memories
  • EEPROMs electrically erasable programmable read-only memories
  • SRAMs static random access memories
  • CD-ROMs compact disk read-only memories
  • DVDs digital versatile disks
  • RTM Blu-ray
  • the computer readable instructions may include either assembler instructions, instruction set architecture (ISA) instructions, machine instructions, machine-dependent instructions, microcode, firmware instructions, state setting data, or source or object code written in any combination of one or more programming languages, including object-oriented programming languages such as Smalltalk (registered trademark), JAVA (registered trademark), C++, etc., and conventional procedural programming languages such as the "C" programming language or similar programming languages.
  • ISA instruction set architecture
  • machine instructions machine-dependent instructions
  • microcode firmware instructions
  • state setting data or source or object code written in any combination of one or more programming languages, including object-oriented programming languages such as Smalltalk (registered trademark), JAVA (registered trademark), C++, etc., and conventional procedural programming languages such as the "C" programming language or similar programming languages.
  • Computer-readable instructions may be provided to a processor or programmable circuitry of a general-purpose computer, special-purpose computer, or other programmable data processing apparatus, either locally or over a wide area network (WAN) such as a local area network (LAN), the Internet, etc., to execute the computer-readable instructions to provide a means for performing operations specified in the process steps or block diagrams described.
  • WAN wide area network
  • LAN local area network
  • processors include computer processors, processing units, microprocessors, digital signal processors, controllers, microcontrollers, etc.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Telephonic Communication Services (AREA)

Abstract

移動体に搭載され遠隔会議を行うための通信端末であって、前記遠隔会議への参加者として、前記移動体内の複数のユーザを受け付ける受付部と、前記受付部が前記遠隔会議への参加者として受け付けた複数のユーザの中から、発話者を特定する発話者特定部と、前記発話者特定部により発話者として特定されたユーザを、遠隔会議システム上で強調表示するための制御を行う制御部と備える。

Description

通信端末、方法、及びプログラム
　本発明は、通信端末、方法、及びプログラムに関する。
　特許文献１には、車両用機器が搭載される車両に携帯端末が持ち込まれ、車両の走行が開始すると、携帯端末は、衝突等のイベントを検知する車両用機器と通信を開始し、イベントに関する通知処理を通信網を介して行う技術が記載されている。
［先行技術文献］
［特許文献］
　特許文献１　特開２０１９－３３４２７号公報
解決しようとする課題
　ところで、移動体に設置された通信端末を通じて１回線で複数のユーザが遠隔会議に参加する場合、複数のユーザのうち誰が発話しているかを他の参加者に適切に提示することが容易でないという課題がある。本願は上記課題の解決のため、移動体に設置された通信端末を通じて複数のユーザが遠隔会議に参加する場合の操作性の向上を目的としたものである。そして、延いては交通の安全性をより一層改善して持続可能な輸送システムの発展に寄与するものである。
一般的開示
　本発明の第１の態様においては、通信端末が提供される。通信端末は、移動体に搭載され遠隔会議を行う。通信端末は、前記遠隔会議への参加者として、前記移動体内の複数のユーザを受け付ける受付部を備える。通信端末は、前記受付部が前記遠隔会議への参加者として受け付けた複数のユーザの中から、発話者を特定する発話者特定部を備える。通信端末は、前記発話者特定部により発話者として特定されたユーザを、遠隔会議システム上で強調表示するための制御を行う制御部を備える。
　上記通信端末において、前記発話者特定部は、（ｉ）前記移動体に搭載された撮像装置によって取得された前記移動体内の画像情報、及び、（ｉｉ）前記移動体に設置されたマイクロホンによって取得された音声情報のうちの少なくとも一方に基づいて、前記複数のユーザの中から発話者を特定してよい。
　上記いずれかの通信端末は、前記移動体内の前記複数のユーザの着座位置を取得する着座情報取得部を備えてよい。前記発話者特定部は、前記移動体に搭載された複数のマイクロホンによって取得された音声情報から検出される音源方向と、前記移動体内における前記複数のマイクロホンの設置位置と、前記着座情報取得部によって取得された前記複数のユーザの着座位置とに基づいて、前記複数のユーザの中から発話者を特定してよい。
　上記いずれかの通信端末は、前記移動体内の前記複数のユーザの着座位置を取得する着座情報取得部を備えてよい。前記発話者特定部は、前記移動体の複数の座席にそれぞれに対応して搭載されたマイクロホンのそれぞれによって取得された音声情報と、前記着座情報取得部によって取得された前記複数のユーザの着座位置とに基づいて、前記複数のユーザの中から発話者を特定してよい。
　上記いずれかの通信端末において、前記着座情報取得部は、前記受付部が会議の参加者として前記複数のユーザを受け付ける場合に、前記移動体の座席位置を指定する情報を前記複数のユーザのそれぞれから取得することによって、前記複数のユーザの着座位置を取得してよい。
　上記いずれかの通信端末において、前記着座情報取得部は、前記受付部が会議の参加者として前記複数のユーザを受け付ける場合に、記複数のユーザがそれぞれ所持するユーザ端末から受信した無線信号から特定される前記ユーザ端末の位置に基づいて、前記複数のユーザの着座位置を取得してよい。
　上記いずれかの通信端末において、前記移動体は車両であってよい。
　本発明の第２の態様においては、方法が提供される。方法は、移動体に搭載され遠隔会議を行うための通信端末により実行される。方法は、前記遠隔会議への参加者として、前記移動体内の複数のユーザを受け付ける段階を備える。方法は、前記遠隔会議への参加者として受け付けられた複数のユーザの中から、発話者を特定する段階を備える。方法は、前記複数のユーザの中から前記発話者として特定されたユーザを、遠隔会議システム上で強調表示するための制御を行う段階を備える。
　本発明の第３の態様においては、プログラムが提供される。プログラムは、コンピュータを、上記いずれかの通信端末として機能させる。
　なお、上記の発明の概要は、本発明の特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。
一実施形態における遠隔会議システム５の構成を概念的に示す。 遠隔会議サーバ１００が備える遠隔会議管理システム１１０の機能構成の一例を示す。 移動体１０が備える通信端末２０の機能構成を、表示装置２２、マイクロホン６０及び撮像装置２８とともに示す。 ユーザ端末８０、通信端末２０、遠隔会議サーバ１００及びユーザ端末１２０が実行するシーケンスの一例を示す。 表示装置２２又はユーザ端末１２０に表示される画面５００の一例を模式的に示す。 表示装置２２又はユーザ端末１２０に表示される画面６００の一例を模式的に示す。 通信端末２０が発話者を特定する処理に関する処理手順を示すフローチャートである。 表示装置２２又はユーザ端末１２０に表示される画面８００の一例を模式的に示す。 移動体１０の変形例としての移動体９１０の構成を示す。 コンピュータ２０００の例を示す。
　以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
　図１は、一実施形態における遠隔会議システム５の構成を概念的に示す。遠隔会議システム５は、移動体１０と、遠隔会議サーバ１００と、ユーザ端末１２０とを備える。本実施形態において、移動体１０は車両である。
　移動体１０は、通信端末２０と、表示装置２２ａ、表示装置２２ｂ、表示装置２２ｃ及び表示装置２２ｄと、座席１１ａ、座席１１ｂ、座席１１ｃ及び座席１１ｄと、撮像装置２８と、マイクロホン６０ａ、マイクロホン６０ｂ、マイクロホン６０ｃ及びマイクロホン６０ｄと、アンテナ２６ａ、アンテナ２６ｂ及びアンテナ２６ｃとを備える。
　表示装置２２ａ、表示装置２２ｂ、表示装置２２ｃ及び表示装置２２ｄは、それぞれ座席１１ａ、座席１１ｂ、座席１１ｃ及び座席１１ｄに対応する位置に設けられる。本実施形態において、表示装置２２ａ、表示装置２２ｂ、表示装置２２ｃ及び表示装置２２ｄを「表示装置２２」と総称する場合がある。表示装置２２は、遠隔会議用の画像を表示する。表示装置２２はさらに、タッチ操作等によってユーザ９０からの指示を取得する機能を有する。
　マイクロホン６０ａ、マイクロホン６０ｂ、マイクロホン６０ｃ及びマイクロホン６０ｄは、それぞれ座席１１ａ、座席１１ｂ、座席１１ｃ及び座席１１ｄに対応する位置に設けられる。例えば、前部座席である座席１１ａ及び座席１１ｂに対応するマイクロホン６０ａ及びマイクロホン６０ｂは、それぞれ表示装置２２ａ及び表示装置２２ｂの近傍に設けられている。後部座席である座席１１ｃ及び座席１１ｄに対応するマイクロホン６０ｃ及びマイクロホン６０ｄは、それぞれ、座席１１ｃ及び座席１１ｄのヘッドレストの位置に近傍にもう得られている。マイクロホン６０ａ、マイクロホン６０ｂ、マイクロホン６０ｃ及びマイクロホン６０ｄを「マイクロホン６０」と総称する場合がある。
　遠隔会議サーバ１００は、通信端末２０及びユーザ端末１２０と通信可能である。遠隔会議サーバ１００は、移遠隔会議に参加する参加者を管理する。通信端末２０及びユーザ端末１２０は相互に通信可能である。
　通信端末２０は、遠隔会議サーバ１００と連携して、移動体１０内の搭乗者が遠隔会議に参加するための機能を提供する。表示装置２２及びマイクロホン６０は、通信端末２０に接続されている。通信端末２０は、遠隔会議サーバ１００の管理によって受信した会議画像を表示装置２２に表示させる。通信端末２０は、マイクロホン６０に接続されている。通信端末２０は、マイクロホン６０から取得した音声を、音声データとして、会議の参加者が使用する端末であるユーザ端末１２０に送信する。
　ユーザ９０ａ及びユーザ９０ｂは、移動体１０の搭乗者である。ユーザ９０ａは、ユーザ端末７０のユーザである。ユーザ９０ｂは、ユーザ端末８０のユーザである。ユーザ端末７０及びユーザ端末８０は、例えば、スマートフォンである。ユーザ端末７０及びユーザ端末８０は、スマートフォン以外の携帯可能な端末であってよい。ユーザ端末７０及びユーザ端末８０は、通信機能を有するコンピューティングデバイスであってよい。ユーザ端末７０及びユーザ端末８０は、携帯電話、ＰＤＡ、タブレット・コンピュータ、ノートブック・コンピュータ、ラップトップ・コンピュータ、ウエアラブル・コンピュータ等の端末であってよい。
　アンテナ２６ａ、アンテナ２６ｂ及びアンテナ２６ｃは、移動体１０内において互いに異なる位置に固定的に設けられる。本実施形態において、アンテナ２６ａ、アンテナ２６ｂ及びアンテナ２６ｃを「アンテナ２６」と総称する場合がある。通信端末２０は、アンテナ２６を介して移動体１０内のユーザ９０が所持するユーザ端末７０又はユーザ端末８０との間で無線通信を行う。例えば、通信端末２０は、アンテナ２６を介してユーザ９０ａが所持するユーザ端末７０との間でＵＷＢ（Ｕｌｔｒａ－Ｗｉｄｅ　Ｂａｎｄ）を用いた無線通信を行う。例えば、通信端末２０は、ユーザ端末７０との間のＵＷＢを用いた無線通信で受信した信号に基づいてユーザ端末７０の位置を算出し、検出したユーザ端末７０の位置に基づいて、ユーザ９０ａが座席１１ａ、座席１１ｂ、座席１１ｃ及び座席１１ｄのうちのいずれの座席に着座しているかを判断する。
　ユーザ９０ｃは、移動体１０外に存在する。ユーザ９０ｃは、ユーザ端末１２０のユーザである。ユーザ端末１２０は、例えば、スマートフォンであってよい。ユーザ端末１２０は、通信機能を有するコンピューティングデバイスであってよい。ユーザ端末１２０は、携帯電話、ＰＤＡ、タブレット・コンピュータ、ノートブック・コンピュータ、ラップトップ・コンピュータ、ウエアラブル・コンピュータ等の携帯端末であってよく、デスクトップ・コンピュータであってよい。
　ここで、ユーザ９０ａ、ユーザ９０ｂ及びユーザ９０ｃは、遠隔会議サーバ１００が管理する同一の遠隔会議に参加しているとする。ユーザ９０ａは通信端末２０を用いて遠隔会議に参加しており、ユーザ９０ｂはユーザ端末８０を用いて遠隔会議に参加しており、ユーザ９０ｃはユーザ端末１２０を用いて遠隔会議に参加しているとする。
　ユーザ９０が遠隔会議に参加している間、通信端末２０、ユーザ端末８０、及びユーザ端末１２０は、現在位置情報及び移動速度情報を、予め定められた時間間隔で遠隔会議サーバ１００に送信する。例えば、通信端末２０、ユーザ端末８０、及びユーザ端末１２０は、それぞれＧＮＳＳ衛星から受信した信号に基づいて算出された現在位置情報を、予め定められた時間間隔で遠隔会議サーバ１００に送信する。ユーザ端末８０、及びユーザ端末１２０はさらに、現在位置情報の時間変化から算出される現在の移動速度情報を、予め定められた時間間隔で遠隔会議サーバ１００に送信する。通信端末２０は、現在位置情報の時間変化から算出される現在位置情報、又は、移動体１０の車速情報に基づく移動速度情報を、予め定められた時間間隔で遠隔会議サーバ１００に送信する。
　遠隔会議サーバ１００は、通信端末２０、ユーザ端末８０、及びユーザ端末１２０から受信した現在位置情報及び移動速度情報に基づいて、通信端末２０及びユーザ端末８０が予め定められた範囲内に存在し、かつ移動しながら同一の遠隔会議に参加するために使用されていると判断する。この場合、遠隔会議サーバ１００は、移動体１０内の両方のユーザ９０が通信端末２０及びユーザ端末８０の一方を通じて会議に参加するよう、通信端末２０及び／又はユーザ端末８０を通じて、ユーザ９０ａ及び／又はユーザ９０ｂに促す。例えば、遠隔会議サーバ１００は、ユーザ端末８０のユーザ９０ｂが通信端末２０を通じて会議に参加するよう、通信端末２０及び／又はユーザ端末８０を通じて、ユーザ９０ａ及び／又はユーザ９０ｂに促す。これにより、通信端末２０は、１つの通信回線を通じてユーザ９０ａ及びユーザ９０ｂが遠隔会議に参加するよう促すことができる。
　通信端末２０は、撮像装置２８によって撮像された移動体１０内の画像、又は、座席１１のそれぞれに設けられたシートセンサの情報に基づいて、移動体１０に搭乗している人数を検出する。通信端末２０は、ユーザ９０ｂが通信端末２０を通じて会議に参加しようとした場合、通信端末２０を通じた遠隔会議への参加者数が移動体１０内で検出された人数を超えないことを条件として、通信端末２０を通じた遠隔会議への参加者としてユーザ９０ｂを受け付ける。これにより、移動体１０に搭乗している人数を超える数のユーザが遠隔会議に参加しないようにすることができる。ひいては、多数の参加者が通信端末２０を通じて遠隔会議に参加することで、通信端末２０の通信量が遠隔会議用に予め定められた設定された通信量を超えないようにすることができる。
　ユーザ９０が通信端末２０を通じて遠隔会議に参加する場合、通信端末２０は、表示装置２２を通じて、対応する座席１１に着座しているユーザ９０を識別する情報を、ユーザ９０から取得して、着座情報として保持する。他の方法では、通信端末２０は、ＵＷＢを用いる無線通信により、ユーザ端末から受信した信号に基づいてユーザ９０が着座している座席１１を特定するとともに、ユーザ端末から座席１１に着座しているユーザ９０を識別する情報を受信して、着座情報として保持する。通信端末２０は、マイクロホン６０を通じてユーザ９０が発した音声を取得する。通信端末２０は、マイクロホン６０を通じて取得した音声と、着座情報とに基づいて、遠隔会議への参加者として受け付けたユーザ９０の中から、現在の発話者であるユーザ９０を特定する。通信端末２０は、特定した発話者が発話している旨を、表示装置２２及びユーザ端末１２０に表示させる。これにより、単一の通信端末２０で複数のユーザ９０を遠隔会議への参加者として受け付けている場合であっても、誰が発話しているかを遠隔会議の各参加者に知らせることができる。
　図２は、遠隔会議サーバ１００が備える遠隔会議管理システム１１０の機能構成の一例を示す。遠隔会議サーバ１００は、遠隔会議へのユーザ９０のログイン処理と、ユーザが遠隔会議に参加するために用いられるユーザ端末８０、通信端末２０及びユーザ端末１２０が相互に通信を行うための処理等を担う。
　遠隔会議管理システム１１０は、１つ以上のコンピュータによって実現されてよい。遠隔会議管理システム１１０は、判断部２１０と、制御部２２０と、端末情報取得部２３０と、接続状態情報取得部２４０とを備える。
　判断部２１０は、遠隔会議に参加するために第１のユーザが使用している第１の端末と、遠隔会議に参加するために第２のユーザが使用している第２の端末とが、予め定められた範囲内に存在するか否かを判断する。第１の端末は、例えば通信端末２０であり、第２の端末は、例えばユーザ端末８０である。制御部２２０は、判断部２１０によって第１の端末及び第２の端末が予め定められた範囲内に存在すると判断された場合に、第１の端末及び第２の端末のうち一方の端末を通じて、他方の端末のユーザを遠隔会議に参加させるための制御を行う。
　制御部２２０は、第１の端末及び第２の端末のうち通信状況が良い端末を、他方の端末のユーザを遠隔会議に参加させるための端末として、より優先して選択してよい。制御部２２０は、第１の端末が移動体１０に設置された端末である場合、第１の端末を、第２の端末のユーザを遠隔会議に参加させるための端末として選択してよい。
　端末情報取得部２３０は、第１の端末及び第２の端末の位置を示す第１の情報を取得する。判断部２１０は、第１の情報に基づいて、第１の端末及び第２の端末が予め定められた範囲内に存在するか否かを判断する。
　端末情報取得部２３０はさらに、第１の端末及び第２の端末の移動方向及び加速度のうちの少なくとも一方を示す第２の情報を取得してよい。判断部２１０は、第１の情報及び第２の情報に基づいて、第１の端末及び第２の端末が予め定められた範囲内に存在するか否かを判断してよい。
　接続状態情報取得部２４０は、第１の端末と第２の端末との間の無線通信の接続状態を示す第３の情報を取得してよい。判断部２１０は、第３の情報に基づいて、第１の端末及び第２の端末が予め定められた範囲内に存在するか否かを判断してよい。
　制御部２２０は、判断部２１０によって第１の端末及び第２の端末が予め定められた範囲内に存在すると判断された場合に、第１の端末及び第２の端末のうち一方の端末を通じて他方の端末のユーザが遠隔会議に参加するよう、第１のユーザ及び第２のユーザの少なくとも一方に提示してよい。
　図３は、移動体１０が備える通信端末２０の機能構成を、表示装置２２、マイクロホン６０及び撮像装置２８とともに示す。通信端末２０は、参加者情報取得部３１０と、制御部３２０と、発話者特定部３３０と、着座情報取得部３４０と、人数特定部３５０と、ユーザ数決定部３６０と、受付部３７０と、記憶部３８０と、通信部３９０とを備える。
　記憶部３８０は、不揮発性記憶媒体を含んで構成される。不揮発性記憶媒体は、フラッシュメモリ等の半導体メモリであってよい。記憶部３８０は、通信端末２０が処理を実行するために必要な情報を記憶する。記憶部３８０は、通信端末２０が備えるプロセッサが実行するプログラムを記憶してよい。
　通信部３９０は、移動体１０の外部との通信を担う。具体的には、通信部３９０は、遠隔会議サーバ１００及びユーザ端末１２０との間の通信を担う。通信部３９０は、ユーザ端末８０との間の通信を担うこともできる。
　撮像装置２８は、座席１１に着座している乗員を撮像可能な位置に設けられる。撮像装置２８は、１つ以上の撮像装置を含んでよい。
　通信端末２０は、移動体１０に搭載され、遠隔会議を行うための処理を行う。人数特定部３５０は、移動体１０に搭乗している人数を特定する。ユーザ数決定部３６０は、人数特定部３５０により特定された人数に応じて、通信端末２０が遠隔会議の参加者として受け付け可能なユーザ数を決定する。ユーザ数決定部３６０は、通信端末２０の通信状況にさらに応じて、通信端末２０が遠隔会議の参加者として受け付け可能なユーザ数を決定してよい。
　参加者情報取得部３１０は、通信端末２０を使用して第１のユーザが遠隔会議に参加している場合に、携帯端末を使用して遠隔会議に参加している１以上のユーザが移動体１０内に存在する旨の情報を取得する。制御部３２０は、携帯端末を使用して遠隔会議に参加している１以上のユーザが移動体１０内に存在する旨の情報を参加情報取得部が取得した場合に、ユーザ数決定部３６０が決定したユーザ数を上限として、通信端末２０を通じて１以上のユーザのうちの少なくとも一部を遠隔会議に参加させるための制御を行ってよい。
　通信部３９０は、遠隔会議を管理する遠隔会議管理システムに、通信端末２０の現在位置情報を継続的に送信する。通信部３９０はさらに、遠隔会議を管理する遠隔会議管理システムに、通信端末２０の移動速度情報及び加速度情報のうちの少なくとも一方を継続的に送信する。
　人数特定部３５０は、移動体１０の着座シートに設けられた着座センサで検出された情報に基づいて、移動体１０に搭乗している人数を特定する。人数特定部３５０は、移動体１０に設けられ撮像装置によって取得された移動体１０内の画像情報を解析することによって、移動体１０に搭乗している人数を特定してよい。
　受付部３７０は、遠隔会議への参加者として、移動体１０内の複数のユーザを受け付ける。発話者特定部３３０は、受付部３７０が遠隔会議への参加者として受け付けた複数のユーザの中から、発話者を特定する。制御部３２０は、発話者特定部３３０により発話者として特定されたユーザを、遠隔会議システム上で強調表示するための制御を行う。
　発話者特定部３３０は、（ｉ）移動体１０に搭載された撮像装置２８によって取得された移動体１０内の画像情報、及び、（ｉｉ）移動体１０に設置されたマイクロホン６０によって取得された音声情報のうちの少なくとも一方に基づいて、複数のユーザの中から発話者を特定する。
　着座情報取得部３４０は、移動体１０内の複数のユーザの着座位置を取得する。発話者特定部３３０は、移動体１０に搭載された複数のマイクロホン６０によって取得された音声情報から検出される音源方向と、移動体１０内における複数のマイクロホン６０の設置位置と、着座情報取得部３４０によって取得された複数のユーザの着座位置とに基づいて、複数のユーザの中から発話者を特定する。
　発話者特定部３３０は、移動体１０の複数の座席にそれぞれに対応して搭載されたマイクロホン６０のそれぞれによって取得された音声情報と、着座情報取得部３４０によって取得された複数のユーザの着座位置とに基づいて、複数のユーザの中から発話者を特定する。
　着座情報取得部３４０は、受付部３７０が会議の参加者として複数のユーザを受け付ける場合に、移動体１０の座席位置を指定する情報を複数のユーザのそれぞれから取得することによって、複数のユーザの着座位置を取得する。着座情報取得部３４０は、受付部３７０が会議の参加者として複数のユーザを受け付ける場合に、複数のユーザがそれぞれ所持するユーザ端末から受信した無線信号から特定されるユーザ端末の位置に基づいて、複数のユーザの着座位置を取得してよい。例えば、着座情報取得部３４０は、ユーザ端末７０との間のアンテナ２６を通じて受信したＵＷＢ通信の信号に基づいてユーザ端末７０の位置を算出し、算出したユーザ端末７０の位置に基づいてユーザ９０ａの位置を取得してよい。
　図４は、ユーザ端末８０、通信端末２０、遠隔会議サーバ１００及びユーザ端末１２０が実行する処理のシーケンスの一例を示す。本シーケンスの開始時において、通信端末２０を用いて遠隔会議に参加しているユーザ９０は存在しないとする。
　Ｓ４０２において、通信端末２０の人数特定部３５０は、移動体１０に搭乗している人数を特定する。人数特定部３５０は、通信端末２０は、撮像装置２８によって撮像された移動体１０内の画像、及び、座席１１のそれぞれに設けられたシートセンサの情報に基づいて、移動体１０に搭乗している人数を特定する。
　Ｓ４０４において、ユーザ数決定部３６０は、人数特定部３５０により特定された人数に応じて、受付部３７０が受け付け可能なユーザ数を決定する。例えば、ユーザ数決定部３６０は、人数特定部３５０により特定された人数を、受付部３７０が受け付け可能なユーザ数の上限値として決定する。
　ここで、ユーザ数決定部３６０は、接続状態情報取得部２４０が取得した、通信部３９０の通信状況に応じて、受付部３７０が受け付け可能なユーザ数を決定してよい。ユーザ数決定部３６０は、接続状態情報取得部２４０が取得した通信部３９０の通信状況が悪いほど、受付部３７０が受け付け可能なユーザ数をより少なく決定してよい。
　Ｓ４０６において、ユーザ９０ａが通信端末２０を用いて遠隔会議にログインするための操作を行うと、受付部３７０は、ユーザ９０ａを遠隔会議への参加者として受け付けて、ログイン時に入力された認証情報を遠隔会議サーバ１００に送信する等のログイン処理を行う。
　Ｓ４０８において、ユーザ９０ｂは、ユーザ端末８０を用いて、ユーザ９０ａが参加する遠隔会議にログインするための操作を行うと、ユーザ端末８０は、ログイン時に入力された認証情報を遠隔会議サーバ１００に送信する等のログイン処理を行う。同様に、Ｓ４１０において、ユーザ９０ｃは、ユーザ端末１２０を用いて、ユーザ９０ａが参加する遠隔会議にログインするための操作を行うと、ユーザ端末１２０は、ログイン時に入力された認証情報を遠隔会議サーバ１００に送信する等のログイン処理を行う。
　Ｓ４０６のログイン処理において、着座情報取得部３４０は、移動体１０内のユーザ９０の着座位置を取得する。例えば、ログイン処理の一部として、着座情報取得部３４０は、ユーザ９０ａの着座位置を指定するための画面を表示装置２２ａに表示させ、表示装置２２ａを通じて、ユーザ９０ａによって入力された着座位置を示す情報を取得する。例えば、着座位置は、例えばユーザ９０ａが着座している座席１１を識別する情報であってよい。着座情報取得部３４０は、ユーザ９０ａを識別するユーザ識別情報と、ユーザ９０ａが着座している座席１１を識別する座席識別情報とを対応づける情報を着座情報として保持する。
　他の方法では、着座情報取得部３４０は、ＵＷＢを用いる無線通信で受信した信号に基づいてユーザ９０が着座している座席１１を特定する。例えば、着座情報取得部３４０は、アンテナ２６ａとユーザ端末７０との間の距離、アンテナ２６ｂとユーザ端末７０との間の距離、及びアンテナ２６ｃとユーザ端末７０との間の距離をＴＯＡ（Ｔｉｍｅ　ｏｆ　Ａｒｒｉｖａｌ）に基づいて算出し、算出したそれぞれの距離に基づく三点測量により、ユーザ端末７０の位置を算出する。着座情報取得部３４０は、各アンテナ２６がユーザ端末７０から送信される信号を受信した時刻の違いに基づいて、ユーザ端末７０から各アンテナ２６への信号到来角度を算出し、算出した信号到来角度及び各アンテナ２６の位置に基づいて、ユーザ端末７０の位置を算出してよい。着座情報取得部３４０は、算出したユーザ端末７０の位置と座席１１の位置とに基づいて、ユーザ端末７０を所持するユーザ９０ａが着座している座席１１を特定する。着座情報取得部３４０は、ユーザ端末７０に予め対応づけられたユーザ９０ａのユーザ識別情報と、ユーザ９０ａが着座している座席１１を識別する座席識別情報とを対応づける情報を着座情報として保持してよい。着座情報取得部３４０は、ユーザ９０ａを識別するユーザ識別情報をユーザ端末７０から受信し、受信したユーザ識別情報と、ユーザ９０ａが着座している座席１１を識別する座席識別情報とを対応づける情報を着座情報として保持してよい。ログイン処理はユーザ端末７０を用いて行われてよく、着座情報取得部３４０は、ログイン処理の一部においてユーザ端末７０に入力されたユーザ識別情報をユーザ端末７０から受信してよい。
　Ｓ４２０において、通信端末２０で遠隔会議へのログインが完了すると、通信端末２０は、位置情報及び速度情報を遠隔会議サーバ１００に定期的に送信する処理を開始する。例えば、通信部３９０は、ＧＮＳＳ衛星から受信した信号に基づいて算出された現在位置情報と、現在位置情報の時間変化から算出される現在位置情報又は移動体１０の車速情報に基づく移動速度情報を、予め定められた時間間隔で遠隔会議サーバ１００に送信する。同様に、ユーザ端末８０及びユーザ端末１２０は、遠隔会議へのログインが完了すると、位置情報及び速度情報を遠隔会議サーバ１００に定期的に送信する処理を開始する（Ｓ４２２及びＳ４２４）。ユーザ端末８０及びユーザ端末１２０は、現在位置情報の時間変化から算出される現在の移動速度情報を遠隔会議サーバ１００に送信してよい。遠隔会議サーバ１００の端末情報取得部２３０は、ユーザ端末８０、通信端末２０及びユーザ端末１２０から位置情報及び速度情報を受信する。ユーザ端末８０、通信端末２０及びユーザ端末１２０は、Ｓ４２０、Ｓ４２２及びＳ４２４において、移動速度に加えて、又は、移動速度に代えて、それぞれの加速度情報を遠隔会議サーバ１００に定期的に送信する処理を開始してよい。
　Ｓ４３０において、遠隔会議サーバ１００の判断部２１０は、同一の移動体１０に搭乗するユーザ９０によって同一の遠隔会議への参加に用いられている端末を特定する。例えば、端末情報取得部２３０がユーザ端末８０、通信端末２０及びユーザ端末１２０のそれぞれから受信した位置情報及び速度情報と、既にログインしたユーザが用いている端末の識別情報に基づいて、同一の移動体１０に搭乗するユーザ９０によって同一の遠隔会議への参加に用いられている端末を特定する。例えば、判断部２１０は、ユーザ端末８０の位置及び通信端末２０の位置が予め定められた範囲内にあり、かつ、ユーザ端末８０の移動速度と通信端末２０の移動速度の差の大きさが予め定められた値より小さい場合に、同一の移動体１０に搭乗するユーザ９０によって、ユーザ端末８０及び通信端末２０が同一の遠隔会議に参加するために用いられていると判断する。
　ここで、接続状態情報取得部２４０は、ユーザ端末８０、通信端末２０及びユーザ端末１２０から、無線通信による他の端末との接続状態を示す情報を取得し、取得した情報に基づいて、同一の移動体１０に搭乗するユーザ９０によって同一の遠隔会議への参加に用いられている端末を特定してもよい。例えば、ユーザ端末８０と通信端末２０とがＷｉＦｉ（登録商標）によって接続されている場合、通信端末２０の通信部３９０及びユーザ端末８０は、ＷｉＦｉ（登録商標）によって接続されている１つ以上の端末の識別情報及び接続状態を示す情報を、遠隔会議サーバ１００に送信する。ＷｉＦｉ（登録商標）の接続状態は、他の端末からの受信信号強度を示す情報を含んでよい。接続状態情報取得部２４０は、通信端末２０及びユーザ端末８０から送信される情報を取得し、判断部２１０は、当該情報に基づいて、同一の移動体１０に搭乗するユーザ９０によって同一の遠隔会議への参加に用いられている端末を特定する。判断部２１０は、ＷｉＦｉ（登録商標）によって接続され、かつ、受信信号強度が予め定められた値より高い端末を、同一の移動体１０に搭乗するユーザ９０によって同一の遠隔会議への参加に用いられている端末として特定してよい。
　Ｓ４３２において、遠隔会議サーバ１００の制御部２２０は、遠隔会議への参加元端末を切り替えることを推奨する切替提示を、通信端末２０及びユーザ端末８０に送信するための処理を行う。例えば、制御部２２０は、ユーザ９０ａ及びユーザ９０ｂが同一の遠隔会議に参加しており、ユーザ９０ｂが通信端末２０を通じて遠隔会議に参加することを推奨することを示す情報を、通信端末２０及びユーザ端末８０に送信する。これにより、通信端末２０の参加者情報取得部３１０は、ユーザ端末８０を使用して遠隔会議に参加している１以上のユーザ９０が移動体１０内に存在する旨の情報を取得する。
　ここで、制御部２２０は、ユーザ端末８０及びユーザ端末１２０のそれぞれにおける通信状況を取得し、ユーザ端末８０及びユーザ端末１２０のうち、通信状況が良好な端末を遠隔会議への参加元端末としてよい。これにより、通信状況がより安定した端末の通信回線を通じて複数のユーザ９０が遠隔会議に参加できるようにすることができる。
　Ｓ４３４において、通信端末２０の制御部３２０は、遠隔会議への参加元端末を切り替えるための処理を行い、Ｓ４３６において、通信端末２０は、参加元端末の切替完了通知を遠隔会議サーバ１００に送信する。例えば、Ｓ４３４において、制御部３２０は、通信端末２０を通じて遠隔会議に参加することを了承する操作をユーザ９０ｂから受け付けるための画面を、表示装置２２に表示させる。通信端末２０は、ユーザ９０ｂによって表示装置２２ｂ上で了承操作が行われたことを検知すると、Ｓ４３６において、通信端末２０は、ユーザ９０ｂが通信端末２０から遠隔会議に参加することを示す切替完了通知を、遠隔会議サーバ１００に送信する。
　図４では、Ｓ４３４において、制御部３２０が、遠隔会議への参加元端末を切り替えるための処理を行う場合を例示した。しかし、制御部３２０は、ユーザ数決定部３６０が決定したユーザ数を超えない場合に限り、遠隔会議への参加元端末を切り替えるための処理を行ってよい。
　図５は、表示装置２２又はユーザ端末１２０に表示される画面５００の一例を模式的に示す。画面５００は、ユーザ９０ａが通信端末２０から遠隔会議に参加し、ユーザ９０ｂがユーザ端末８０から遠隔会議に参加し、ユーザ９０ｃがユーザ端末１２０から遠隔会議に参加している場合を示す。
　画面５００は、オブジェクト５１０、オブジェクト５２０及びオブジェクト５３０を含む。オブジェクト５１０は、例えば撮像装置２８によって撮像されたユーザ９０ａの顔画像を含む。オブジェクト５２０は、ユーザ端末８０によって撮像されたユーザ９０ｂの顔画像を含む。オブジェクト５３０は、ユーザ端末１２０によって撮像されたユーザ９０ｃの顔画像を含む。
　図６は、表示装置２２又はユーザ端末１２０に表示される画面６００の一例を模式的に示す。画面６００は、ユーザ９０ａ及びユーザ９０ｂが通信端末２０から遠隔会議に参加し、ユーザ９０ｃがユーザ端末１２０から遠隔会議に参加している場合を示す。
　画面６００は、オブジェクト６１０、オブジェクト６２０及びオブジェクト６３０を含む。オブジェクト６１０は、例えば撮像装置２８によって撮像されたユーザ９０ａ及びユーザ９０ｂの顔画像を含む。オブジェクト６２０は、オブジェクト６１０と同じ、撮像装置２８によって撮像されたユーザ９０ａ及びユーザ９０ｂの顔画像を含む。オブジェクト６３０は、ユーザ端末１２０によって撮像されユーザ端末１２０から送信されたユーザ９０ｃの顔画像を含む。
　このように、通信端末２０によれば、単一の通信端末２０を通じて複数のユーザ９０が遠隔会議に参加する場合でも、複数のユーザ９０を別々の参加者として扱うことができる。これにより、通信端末２０から複数のユーザ９０が遠隔会議に参加していることが他の参加者にもわかるようにすることができる。
　図６の例では、制御部３２０は、撮像装置２８によって撮像された画像を、ユーザ９０ａの参加者画像としても、ユーザ９０ｂの参加者画像としても使用する。他の形態において、制御部３２０は、撮像装置２８によって撮像された画像から、ユーザ９０ａの顔画像及びユーザ９０ｂの顔画像をそれぞれ抽出して、抽出したユーザ９０ａの顔画像をユーザ９０ａの参加者画像とし、抽出したユーザ９０ｂの顔画像をユーザ９０ｂの参加者画像として処理してよい。
　図７は、通信端末２０が発話者を特定する処理に関する処理手順を示すフローチャートである。本フローチャートの処理は、例えば、通信端末２０が遠隔会議サーバ１００と連携して遠隔会議に関する処理を実行している場合に繰り返し実行される。
　Ｓ７０２において、発話者特定部３３０は、マイクロホン６０によって収集された情報から、音声を検出する。Ｓ７０４において、発話者特定部３３０は、Ｓ７０２で検出された音声情報と着座情報とに基づいて、発話者を特定する。
　例えば、ユーザ９０ｂが発話者である場合、マイクロホン６０ｂによって検出される音声の音量が、他のマイクロホン６０ａ、マイクロホン６０ｃ及びマイクロホン６０ｄによって検出される音声の音量より大きくなる。そのため、発話者特定部３３０は、マイクロホン６０ｂに対応する位置に設けられた座席１１ｂに、発話者が着座していると判断する。発話者特定部３３０は、着座情報を参照し、座席１１ｂの座席識別情報に対応づけられたユーザ識別情報によって識別されるユーザ９０ｂを、発話者として特定する。
　Ｓ７０６において、通信部３９０は、発話者情報をユーザ端末１２０に送信する。例えば、通信部３９０は、遠隔会議システムにおける発話者の識別情報を、発話者情報としてユーザ端末１２０に送信する。
　Ｓ７０８において、制御部３２０は、発話者のオブジェクトを強調して表示する。例えば、ユーザ９０ｂが発話者である場合、制御部３２０はオブジェクト６２０を強調表示する。このとき、制御部３２０はオブジェクト６１０を強調表示しない。
　図８は、表示装置２２又はユーザ端末１２０に表示される画面８００の一例を模式的に示す。画面８００は、ユーザ９０ａ及びユーザ９０ｂが通信端末２０から遠隔会議に参加し、ユーザ９０ｃがユーザ端末１２０から遠隔会議に参加している場合であり、かつ、ユーザ９０ｂが発話中の場合を示す。
　画面８００は、オブジェクト８１０、オブジェクト８２０及びオブジェクト８３０を含む。オブジェクト８１０及びオブジェクト８３０は、それぞれオブジェクト６１０及びオブジェクト６３０と同一である。オブジェクト８２０は、例えば撮像装置２８によって撮像されたユーザ９０ａ及びユーザ９０ｂの顔画像を含む。ユーザ９０ｂが発話者として特定されているため、オブジェクト８２０は、ユーザ９０ｂが発話者であることを示すために強調して表示されている。
　このように、通信端末２０によれば、単一の通信端末２０を通じて複数のユーザが遠隔会議に参加している場合でも、誰が発話者であるかを他の会議参加者に知らせることができる。
　図９は、移動体１０の変形例としての移動体９１０の構成を示す。移動体９１０は、マイクロホン６０に替えてマイクロホンアレイ９６０を備える点で、移動体１０と相違する。そのため、ここでは移動体１０との相違点を主に説明する。
　マイクロホンアレイ９６０は、複数のマイクロホンを含む。通信端末２０の発話者特定部３３０は、音源の定位するためにマイクロホンアレイ９６０を用いる。
　例えば、音源から各マイクロホンまでの距離が異なる場合、音波が各マイクロホンに到達する時間が異なり、各マイクロホンまでの到達時間差は、音源の位置の関数となる。発話者特定部３３０は、この原理を利用し、マイクロホンアレイ９６０に含まれる複数のマイクロホンによって取得された音声信号に基づいて、音源の方向を特定する。発話者特定部３３０は、推定した音源の方向と、移動体１０内におけるマイクロホンアレイの設置位置と、着座情報取得部３４０によって取得された着座情報とに基づいて、ユーザ９０の中から発話者を特定することができる。
　以上の実施形態では、発話者特定部３３０は複数のマイクロホンで取得された音声を用いて発話者を特定する。複数のマイクロホンで取得された音声を用いることに替えて、又は、複数のマイクロホンで取得された音声を用いることに加えて、発話者特定部３３０は、ユーザ９０の音声を認識することで発話者を特定してよい。例えば、発話者特定部３３０は、ログイン処理を行う場合等に発話者の声紋を予め取得し、取得した声紋とユーザ９０の識別情報とを対応づけて声紋情報として保持してよい。発話者特定部３３０は、遠隔会議が行われている場合に移動体１０内に設置されたマイクロホンで取得された音声から声紋を抽出し、抽出した声紋と、声紋情報とに基づいて、複数のユーザ９０の中から発話者を特定してもよい。
　他の形態において、発話者特定部３３０は、撮像装置２８によって撮像された複数のユーザ９０のそれぞれの顔画像から、発話者を特定してもよい。例えば、発話者特定部３３０は、顔画像の口の動きに基づいて、複数のユーザ９０のうちの発話者を特定してもよい。発話者特定部３３０は、顔画像の口の動きに加えて、マイクロホンで収集された音声に更に基づいて、複数のユーザ９０の中から発話者を特定してもよい。
　以上に説明した実施形態において、移動体１０は車両であるとした。しかし、移動体１０として車両以外の任意の移動体を適用し得る。例えば、移動体１０は、列車、航空機、船舶等の輸送機器であってよい。
　以上に説明した実施形態にかかる遠隔会議システム５によれば、移動体１０内で複数のユーザ９０が異なる端末から同一の遠隔会議に参加している場合に、１つの端末を通じて会議に参加するよう促すことができる。これにより、１つの通信回線を通じて複数のユーザ遠隔会議に参加するよう促すことができる。更に、通信端末２０は、通信端末２０を通じて遠隔会議に参加するユーザの上限を、移動体１０に搭乗している人数や通信端末２０の通信状況に応じて決定するので、通信端末２０の通信量が遠隔会議用に予め定められた設定された通信量を超えないようにすることができる。更に、移動体１０を通じて複数のユーザが遠隔会議に参加している場合、移動体１０に設けられた複数のマイクロホンを通じて取得した音声と、着座情報とに基づいて現在の発話者を特定し、特定した発話者が発話している旨を、表示装置２２及びユーザ端末１２０に表示させる。これにより、単一の通信端末２０で複数のユーザ９０を遠隔会議への参加者として受け付けている場合であっても、誰が発話しているかを遠隔会議の各参加者に知らせることができる。
　図１０は、本発明の複数の実施形態が全体的又は部分的に具現化され得るコンピュータ２０００の例を示す。コンピュータ２０００にインストールされたプログラムは、コンピュータ２０００を、実施形態にかかる遠隔会議管理システム１１０又は当該システムの各部、もしくは通信端末２０等の各種装置又は当該装置の各部として機能させる、当該システム又はシステムの各部もしくは当該装置又は当該装置の各部に関連付けられるオペレーションを実行させる、及び／又は、実施形態に係るプロセス又は当該プロセスの段階を実行させることができる。そのようなプログラムは、コンピュータ２０００に、本明細書に記載の処理手順及びブロック図のブロックのうちのいくつか又はすべてに関連付けられた特定のオペレーションを実行させるべく、ＣＰＵ２０１２によって実行されてよい。
　本実施形態によるコンピュータ２０００は、ＣＰＵ２０１２、及びＲＡＭ２０１４を含み、それらはホストコントローラ２０１０によって相互に接続されている。コンピュータ２０００はまた、ＲＯＭ２０２６、フラッシュメモリ２０２４、通信インタフェース２０２２、及び入力／出力チップ２０４０を含む。ＲＯＭ２０２６、フラッシュメモリ２０２４、通信インタフェース２０２２、及び入力／出力チップ２０４０は、入力／出力コントローラ２０２０を介してホストコントローラ２０１０に接続されている。
　ＣＰＵ２０１２は、ＲＯＭ２０２６及びＲＡＭ２０１４内に格納されたプログラムに従い動作し、それにより各ユニットを制御する。
　通信インタフェース２０２２は、ネットワークを介して他の電子デバイスと通信する。フラッシュメモリ２０２４は、コンピュータ２０００内のＣＰＵ２０１２によって使用されるプログラム及びデータを格納する。ＲＯＭ２０２６は、アクティブ化時にコンピュータ２０００によって実行されるブートプログラム等、及び／又はコンピュータ２０００のハードウエアに依存するプログラムを格納する。入力／出力チップ２０４０はまた、キーボード、マウス及びモニタ等の様々な入力／出力ユニットをシリアルポート、パラレルポート、キーボードポート、マウスポート、モニタポート、ＵＳＢポート、ＨＤＭＩ（登録商標）ポート等の入力／出力ポートを介して、入力／出力コントローラ２０２０に接続してよい。
　プログラムは、ＣＤ－ＲＯＭ、ＤＶＤ－ＲＯＭ、又はメモリカードのようなコンピュータ可読記憶媒体又はネットワークを介して提供される。ＲＡＭ２０１４、ＲＯＭ２０２６、又はフラッシュメモリ２０２４は、コンピュータ可読記憶媒体の例である。プログラムは、フラッシュメモリ２０２４、ＲＡＭ２０１４、又はＲＯＭ２０２６にインストールされ、ＣＰＵ２０１２によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ２０００に読み取られ、プログラムと上記様々なタイプのハードウエアリソースとの間の連携をもたらす。装置又は方法が、コンピュータ２０００の使用に従い情報のオペレーション又は処理を実現することによって構成されてよい。
　例えば、コンピュータ２０００及び外部デバイス間で通信が実行される場合、ＣＰＵ２０１２は、ＲＡＭ２０１４にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インタフェース２０２２に対し、通信処理を命令してよい。通信インタフェース２０２２は、ＣＰＵ２０１２の制御下、ＲＡＭ２０１４及びフラッシュメモリ２０２４のような記録媒体内に提供される送信バッファ処理領域に格納された送信データを読み取り、読み取った送信データをネットワークに送信し、ネットワークから受信された受信データを、記録媒体上に提供される受信バッファ処理領域等に書き込む。
　また、ＣＰＵ２０１２は、フラッシュメモリ２０２４等のような記録媒体に格納されたファイル又はデータベースの全部又は必要な部分がＲＡＭ２０１４に読み取られるようにし、ＲＡＭ２０１４上のデータに対し様々な種類の処理を実行してよい。ＣＰＵ２０１２は次に、処理されたデータを記録媒体にライトバックする。
　様々なタイプのプログラム、データ、テーブル、及びデータベースのような様々なタイプの情報が記録媒体に格納され、情報処理にかけられてよい。ＣＰＵ２０１２は、ＲＡＭ２０１４から読み取られたデータに対し、本明細書に記載され、プログラムの命令シーケンスによって指定される様々な種類のオペレーション、情報処理、条件判断、条件分岐、無条件分岐、情報の検索／置換等を含む、様々な種類の処理を実行してよく、結果をＲＡＭ２０１４にライトバックする。また、ＣＰＵ２０１２は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第２の属性の属性値に関連付けられた第１の属性の属性値を有する複数のエントリが記録媒体内に格納される場合、ＣＰＵ２０１２は、第１の属性の属性値が指定されている、条件に一致するエントリを当該複数のエントリの中から検索し、当該エントリ内に格納された第２の属性の属性値を読み取り、それにより予め定められた条件を満たす第１の属性に関連付けられた第２の属性の属性値を取得してよい。
　上で説明したプログラム又はソフトウエアモジュールは、コンピュータ２０００上又はコンピュータ２０００近傍のコンピュータ可読記憶媒体に格納されてよい。専用通信ネットワーク又はインターネットに接続されたサーバーシステム内に提供されるハードディスク又はＲＡＭのような記録媒体が、コンピュータ可読記憶媒体として使用可能である。コンピュータ可読記憶媒体に格納されたプログラムを、ネットワークを介してコンピュータ２０００に提供してよい。
　コンピュータ２０００にインストールされ、コンピュータ２０００を遠隔会議管理システム１１０として機能させるプログラムは、ＣＰＵ２０１２等に働きかけて、コンピュータ２０００を、遠隔会議管理システム１１０の各部としてそれぞれ機能させてよい。これらのプログラムに記述された情報処理は、コンピュータ２０００に読込まれることにより、ソフトウエアと上述した各種のハードウエア資源とが協働した具体的手段である遠隔会議管理システム１１０の各部として機能する。そして、これらの具体的手段によって、本実施形態におけるコンピュータ２０００の使用目的に応じた情報の演算又は加工を実現することにより、使用目的に応じた特有の遠隔会議管理システム１１０が構築される。
　コンピュータ２０００にインストールされ、コンピュータ２０００を通信端末２０として機能させるプログラムは、ＣＰＵ２０１２等に働きかけて、コンピュータ２０００を、通信端末２０の各部としてそれぞれ機能させてよい。これらのプログラムに記述された情報処理は、コンピュータ２０００に読込まれることにより、ソフトウエアと上述した各種のハードウエア資源とが協働した具体的手段である通信端末２０の各部として機能する。そして、これらの具体的手段によって、本実施形態におけるコンピュータ２０００の使用目的に応じた情報の演算又は加工を実現することにより、使用目的に応じた特有の通信端末２０が構築される。
　様々な実施形態が、ブロック図等を参照して説明された。ブロック図において各ブロックは、（１）オペレーションが実行されるプロセスの段階又は（２）オペレーションを実行する役割を持つ装置の各部を表わしてよい。特定の段階及び各部が、専用回路、コンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプログラマブル回路、及び／又はコンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプロセッサによって実装されてよい。専用回路は、デジタル及び／又はアナログハードウエア回路を含んでよく、集積回路（ＩＣ）及び／又はディスクリート回路を含んでよい。プログラマブル回路は、論理ＡＮＤ、論理ＯＲ、論理ＸＯＲ、論理ＮＡＮＤ、論理ＮＯＲ、及び他の論理オペレーション、フリップフロップ、レジスタ、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、プログラマブルロジックアレイ（ＰＬＡ）等のようなメモリ要素等を含む、再構成可能なハードウエア回路を含んでよい。
　コンピュータ可読記憶媒体は、適切なデバイスによって実行される命令を格納可能な任意の有形なデバイスを含んでよく、その結果、そこに格納される命令を有するコンピュータ可読記憶媒体は、処理手順又はブロック図で指定されたオペレーションを実行するための手段をもたらすべく実行され得る命令を含む製品の少なくとも一部を構成する。コンピュータ可読記憶媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読記憶媒体のより具体的な例としては、フロッピー（登録商標）ディスク、ディスケット、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、リードオンリメモリ（ＲＯＭ）、消去可能プログラマブルリードオンリメモリ（ＥＰＲＯＭ又はフラッシュメモリ）、電気的消去可能プログラマブルリードオンリメモリ（ＥＥＰＲＯＭ）、静的ランダムアクセスメモリ（ＳＲＡＭ）、コンパクトディスクリードオンリメモリ（ＣＤ－ＲＯＭ）、デジタル多用途ディスク（ＤＶＤ）、ブルーレイ（ＲＴＭ）ディスク、メモリスティック、集積回路カード等が含まれてよい。
　コンピュータ可読命令は、アセンブラ命令、命令セットアーキテクチャ（ＩＳＡ）命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、又はＳｍａｌｌｔａｌｋ（登録商標）、ＪＡＶＡ（登録商標）、Ｃ＋＋等のようなオブジェクト指向プログラミング言語、及び「Ｃ」プログラミング言語又は同様のプログラミング言語のような従来の手続型プログラミング言語を含む、１又は複数のプログラミング言語の任意の組み合わせで記述されたソースコード又はオブジェクトコードのいずれかを含んでよい。
　コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ又はプログラマブル回路に対し、ローカルに又はローカルエリアネットワーク（ＬＡＮ）、インターネット等のようなワイドエリアネットワーク（ＷＡＮ）を介して提供され、説明された処理手順又はブロック図で指定されたオペレーションを実行するための手段をもたらすべく、コンピュータ可読命令を実行してよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。
　以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、請求の範囲の記載から明らかである。
　請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
５　遠隔会議システム
１０　移動体
１１　座席
２０　通信端末
２２　表示装置
２６　アンテナ
２８　撮像装置
６０　マイクロホン
７０　ユーザ端末
８０　ユーザ端末
９０　ユーザ
１００　遠隔会議サーバ
１１０　遠隔会議管理システム
１２０　ユーザ端末
３８０　記憶部
３９０　通信部
２１０　判断部
２２０　制御部
２３０　端末情報取得部
２４０　接続状態情報取得部
３１０　参加者情報取得部
３２０　制御部
３３０　発話者特定部
３４０　着座情報取得部
３５０　人数特定部
３６０　ユーザ数決定部
３７０　受付部
５００　画面
５１０　オブジェクト
５２０　オブジェクト
５３０　オブジェクト
６００　画面
６１０　オブジェクト
６２０　オブジェクト
６３０　オブジェクト
８００　画面
８１０　オブジェクト
８２０　オブジェクト
８３０　オブジェクト
９１０　移動体
９６０　マイクロホンアレイ
２０００　コンピュータ
２０１０　ホストコントローラ
２０１２　ＣＰＵ
２０１４　ＲＡＭ
２０２０　入力／出力コントローラ
２０２２　通信インタフェース
２０２４　フラッシュメモリ
２０２６　ＲＯＭ
２０４０　入力／出力チップ

Claims (9)

  1. 　移動体に搭載され遠隔会議を行うための通信端末であって、
    　前記遠隔会議への参加者として、前記移動体内の複数のユーザを受け付ける受付部と、
    　前記受付部が前記遠隔会議への参加者として受け付けた複数のユーザの中から、発話者を特定する発話者特定部と、
    　前記発話者特定部により発話者として特定されたユーザを、遠隔会議システム上で強調表示するための制御を行う制御部と
    を備える通信端末。
  2. 　前記発話者特定部は、（ｉ）前記移動体に搭載された撮像装置によって取得された前記移動体内の画像情報、及び、（ｉｉ）前記移動体に設置されたマイクロホンによって取得された音声情報のうちの少なくとも一方に基づいて、前記複数のユーザの中から発話者を特定する
    請求項１に記載の通信端末。
  3. 　前記移動体内の前記複数のユーザの着座位置を取得する着座情報取得部
    をさらに備え、
    　前記発話者特定部は、前記移動体に搭載された複数のマイクロホンによって取得された音声情報から検出される音源方向と、前記移動体内における前記複数のマイクロホンの設置位置と、前記着座情報取得部によって取得された前記複数のユーザの着座位置とに基づいて、前記複数のユーザの中から発話者を特定する
    請求項１に記載の通信端末。
  4. 　前記移動体内の前記複数のユーザの着座位置を取得する着座情報取得部
    をさらに備え、
    　前記発話者特定部は、前記移動体の複数の座席にそれぞれに対応して搭載されたマイクロホンのそれぞれによって取得された音声情報と、前記着座情報取得部によって取得された前記複数のユーザの着座位置とに基づいて、前記複数のユーザの中から発話者を特定する
    請求項１に記載の通信端末。
  5. 　前記着座情報取得部は、前記受付部が会議の参加者として前記複数のユーザを受け付ける場合に、前記移動体の座席位置を指定する情報を前記複数のユーザのそれぞれから取得することによって、前記複数のユーザの着座位置を取得する
    請求項３又は４に記載の通信端末。
  6. 　前記着座情報取得部は、前記受付部が会議の参加者として前記複数のユーザを受け付ける場合に、記複数のユーザがそれぞれ所持するユーザ端末から受信した無線信号から特定される前記ユーザ端末の位置に基づいて、前記複数のユーザの着座位置を取得する
    請求項３又は４に記載の通信端末。
  7. 　前記移動体は車両である
    請求項１から４のいずれか一項に記載の通信端末。
  8. 　移動体に搭載され遠隔会議を行うための通信端末が実行する方法であって、
    　前記遠隔会議への参加者として、前記移動体内の複数のユーザを受け付ける段階と、
    　前記遠隔会議への参加者として受け付けられた複数のユーザの中から、発話者を特定する段階と、
    　前記複数のユーザの中から前記発話者として特定されたユーザを、遠隔会議システム上で強調表示するための制御を行う段階と
    を備える方法。
  9. 　コンピュータを、請求項１から４のいずれか一項に記載の通信端末として機能させるためのプログラム。
PCT/JP2023/013393 2023-03-30 2023-03-30 通信端末、方法、及びプログラム Ceased WO2024201954A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN202380094746.0A CN120836153A (zh) 2023-03-30 2023-03-30 通信终端、方法和程序
EP23930591.5A EP4694104A4 (en) 2023-03-30 2023-03-30 COMMUNICATION TERMINAL, METHOD AND PROGRAM
JP2025509548A JPWO2024201954A1 (ja) 2023-03-30 2023-03-30
PCT/JP2023/013393 WO2024201954A1 (ja) 2023-03-30 2023-03-30 通信端末、方法、及びプログラム
US19/309,507 US20250392489A1 (en) 2023-03-30 2025-08-25 Communication terminal, method, and computer-readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2023/013393 WO2024201954A1 (ja) 2023-03-30 2023-03-30 通信端末、方法、及びプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US19/309,507 Continuation US20250392489A1 (en) 2023-03-30 2025-08-25 Communication terminal, method, and computer-readable storage medium

Publications (1)

Publication Number Publication Date
WO2024201954A1 true WO2024201954A1 (ja) 2024-10-03

Family

ID=92904431

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/013393 Ceased WO2024201954A1 (ja) 2023-03-30 2023-03-30 通信端末、方法、及びプログラム

Country Status (5)

Country Link
US (1) US20250392489A1 (ja)
EP (1) EP4694104A4 (ja)
JP (1) JPWO2024201954A1 (ja)
CN (1) CN120836153A (ja)
WO (1) WO2024201954A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN120752907A (zh) * 2023-03-30 2025-10-03 本田技研工业株式会社 通信终端、方法和程序

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60182253U (ja) * 1984-05-15 1985-12-03 小泉　正勝 伸縮自在式ボデ−
JP2005151471A (ja) * 2003-11-19 2005-06-09 Sony Corp 音声集音・映像撮像装置および撮像条件決定方法
US20080101576A1 (en) * 2006-11-01 2008-05-01 Avaya Technology Llc Tag interrogator and microphone array for identifying a person speaking in a room
JP2009206924A (ja) * 2008-02-28 2009-09-10 Fuji Xerox Co Ltd 情報処理装置、情報処理システム及び情報処理プログラム
JP2019033427A (ja) 2017-08-09 2019-02-28 株式会社デンソーテン 携帯端末、車両用システム、通信接続方法、及び、プログラム
JP2019061594A (ja) * 2017-09-28 2019-04-18 株式会社野村総合研究所 会議支援システムおよび会議支援プログラム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022109048A (ja) * 2021-01-14 2022-07-27 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
US11748845B2 (en) * 2021-01-27 2023-09-05 Nvidia Corporation Machine learning techniques for enhancing video conferencing applications

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60182253U (ja) * 1984-05-15 1985-12-03 小泉　正勝 伸縮自在式ボデ−
JP2005151471A (ja) * 2003-11-19 2005-06-09 Sony Corp 音声集音・映像撮像装置および撮像条件決定方法
US20080101576A1 (en) * 2006-11-01 2008-05-01 Avaya Technology Llc Tag interrogator and microphone array for identifying a person speaking in a room
JP2009206924A (ja) * 2008-02-28 2009-09-10 Fuji Xerox Co Ltd 情報処理装置、情報処理システム及び情報処理プログラム
JP2019033427A (ja) 2017-08-09 2019-02-28 株式会社デンソーテン 携帯端末、車両用システム、通信接続方法、及び、プログラム
JP2019061594A (ja) * 2017-09-28 2019-04-18 株式会社野村総合研究所 会議支援システムおよび会議支援プログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4694104A1

Also Published As

Publication number Publication date
EP4694104A4 (en) 2026-04-22
CN120836153A (zh) 2025-10-24
JPWO2024201954A1 (ja) 2024-10-03
US20250392489A1 (en) 2025-12-25
EP4694104A1 (en) 2026-02-11

Similar Documents

Publication Publication Date Title
US11404067B2 (en) Electronic device and method of operating the same
US9781106B1 (en) Method for modeling user possession of mobile device for user authentication framework
US11930082B1 (en) Multiple zone communications and controls
US9668048B2 (en) Contextual switching of microphones
CN113085782A (zh) 数字车钥匙定位系统和方法
US9372550B2 (en) Automatic audio-video switching
CN110556127A (zh) 语音识别结果的检测方法、装置、设备及介质
KR102447381B1 (ko) 통화 중 인공지능 서비스를 제공하기 위한 방법 및 그 전자 장치
US20170076139A1 (en) Method of controlling mobile terminal using fingerprint recognition and mobile terminal using the same
US20150347788A1 (en) Mobile device auto wipe
WO2021052306A1 (zh) 声纹特征注册
US20250392489A1 (en) Communication terminal, method, and computer-readable storage medium
JP2022546542A (ja) 通話方法、通話装置、通話システム、サーバ及びコンピュータプログラム
CN107818251A (zh) 一种人脸识别方法及移动终端
WO2021086731A1 (en) Teleconferencing device capability reporting and selection
CN111128115B (zh) 信息验证方法、装置、电子设备及存储介质
US9772815B1 (en) Personalized operation of a mobile device using acoustic and non-acoustic information
CN108737638A (zh) 应用控制方法、装置、移动终端及计算机可读介质
US10278033B2 (en) Electronic device and method of providing message via electronic device
WO2024201951A1 (ja) 遠隔会議管理システム、遠隔会議管理方法、及びプログラム
WO2024201945A1 (ja) 通信端末、方法、及びプログラム
CN108055644A (zh) 定位控制方法、装置、存储介质及终端设备
US11848791B2 (en) Detection and presentation of video conference attendee different from logged-in attendees
US12111998B2 (en) Touch control method and apparatus, device and storage medium
CN115019309B (zh) 基于图像的字符识别方法、装置、设备及存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23930591

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2025509548

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: CN2023800947460

Country of ref document: CN

Ref document number: 202380094746.0

Country of ref document: CN

WWP Wipo information: published in national office

Ref document number: 202380094746.0

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 2023930591

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2023930591

Country of ref document: EP

Effective date: 20251030

ENP Entry into the national phase

Ref document number: 2023930591

Country of ref document: EP

Effective date: 20251030

ENP Entry into the national phase

Ref document number: 2023930591

Country of ref document: EP

Effective date: 20251030

ENP Entry into the national phase

Ref document number: 2023930591

Country of ref document: EP

Effective date: 20251030

ENP Entry into the national phase

Ref document number: 2023930591

Country of ref document: EP

Effective date: 20251030

ENP Entry into the national phase

Ref document number: 2023930591

Country of ref document: EP

Effective date: 20251030

ENP Entry into the national phase

Ref document number: 2023930591

Country of ref document: EP

Effective date: 20251030

ENP Entry into the national phase

Ref document number: 2023930591

Country of ref document: EP

Effective date: 20251030

WWP Wipo information: published in national office

Ref document number: 2023930591

Country of ref document: EP