JP6838554B2 - 医療用制御装置、制御方法、プログラム、および医療用制御システム - Google Patents
医療用制御装置、制御方法、プログラム、および医療用制御システム Download PDFInfo
- Publication number
- JP6838554B2 JP6838554B2 JP2017543005A JP2017543005A JP6838554B2 JP 6838554 B2 JP6838554 B2 JP 6838554B2 JP 2017543005 A JP2017543005 A JP 2017543005A JP 2017543005 A JP2017543005 A JP 2017543005A JP 6838554 B2 JP6838554 B2 JP 6838554B2
- Authority
- JP
- Japan
- Prior art keywords
- display area
- displayed
- screen
- output destination
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/25—User interfaces for surgical systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/14—Display of multiple viewports
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/214—Specialised server platform, e.g. server located in an airplane, hotel, hospital
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
- A61B2090/371—Surgical systems with images on a monitor during operation with simultaneous use of two cameras
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2380/00—Specific applications
- G09G2380/08—Biomedical applications
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Public Health (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Radiology & Medical Imaging (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- General Physics & Mathematics (AREA)
- Pathology (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Gynecology & Obstetrics (AREA)
- General Business, Economics & Management (AREA)
- Business, Economics & Management (AREA)
- Computer Hardware Design (AREA)
- Biophysics (AREA)
- Optics & Photonics (AREA)
- Robotics (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
- Endoscopes (AREA)
Description
1.本実施形態に係る制御方法
2.本実施形態に係る医療用制御装置
3.本実施形態に係るプログラム
まず、本実施形態に係る制御方法について説明する。以下では、本実施形態に係る制御方法に係る処理を、本実施形態に係る医療用制御装置が行う場合を例に挙げる。
上述したように、既存の医療用制御装置が用いられる場合には、画像の入出力に係る制御と、医療用制御システムを構成する装置(入力元または出力先)の制御とを、1画面で行うことはできない。
・第1表示領域:画像の入力元に関するオブジェクトが表示される表示領域
・第2表示領域:画像の出力先に関するオブジェクトが表示される表示領域
・第3表示領域:入力元または出力先を制御するためのオブジェクトが表示される表示領域
本実施形態に係る医療用制御装置は、第1表示領域、第2表示領域、および第3表示領域を、1画面に表示させる。
・第1表示領域:入力元に関するオブジェクト
・第2表示領域:入力元の画像を表示させることが可能な出力先に関するオブジェクト
・第3表示領域:入力元を制御するためのオブジェクト
本実施形態に係る医療用制御装置は、第1表示領域、および第3表示領域を、1画面に表示させる。
・第1表示領域:出力先に表示させることが可能な入力元に関するオブジェクト、または、出力先に画像を記録させることが可能な入力元に関するオブジェクト
・第3表示領域:出力先を制御するためのオブジェクト
本実施形態に係る医療用制御装置は、第2表示領域、および第3表示領域を、1画面に表示させる。
・第2表示領域:入力元の画像を表示させることが可能な出力先に関するオブジェクト
・第3表示領域:入力元を制御するためのオブジェクト
次に、本実施形態に係る制御方法が適用される医療制御システムにおける表示の一例を示しつつ、本実施形態に係る制御方法に係る制御処理について説明する。
が、エンコーダに該当し、例えば“Transcoder” が、トランスコーダに該当する。なお、本実施形態に係る医療制御システムでは、画像信号をIP化して伝送しないことも可能である。
図2〜図9は、本実施形態に係る制御方法が適用される医療制御システム1000における表示の一例を説明するための説明図である。図2〜図9は、表示対象の装置500の表示画面に表示されるデバイス選択画面の全体、またはデバイス選択画面の一部をそれぞれ示している。以下、図2〜図9を適宜参照しつつ、デバイス選択画面について説明する。
・サムネイル未取得の場合:図5のB
・未入力の場合;図5のC
次に、デバイス制御画面について説明する。デバイス制御画面は、本実施形態に係る制御方法に係る制御処理によって表示させる画面の一例に該当する。以下では、医療用制御装置100が行う制御処理についても、適宜説明を行う。
・Deviceペイン(以下、符号P1で表す。)
・Controlペイン(以下、符号P2で表す。)
・Connectペイン(以下、符号P3で表す。)
図11〜図16は、本実施形態に係る制御方法が適用される医療制御システム1000における表示の一例を説明するための説明図である。図11〜図16は、表示対象の装置500の表示画面に表示されるデバイス制御画面の全体、またはデバイス制御画面の一部をそれぞれ示している。
・ConnectペインP3をタッチする操作(表示対象の装置500の表示デバイスがタッチパネルである場合)
・物理的なボタンなどの表示対象の装置500が備える操作デバイス、または、リモート・コントローラなどの外部操作デバイスを用いた操作
・DeviceペインP1のサムネイル画像に対するピンチ操作など、表示画面上の領域を選択することが可能な操作(表示対象の装置500の表示デバイスがタッチパネルである場合)
・物理的なボタンなどの表示対象の装置500が備える操作デバイス、または、リモート・コントローラなどの外部操作デバイスを用いた操作
図17、図18は、本実施形態に係る制御方法が適用される医療制御システム1000における表示の一例を説明するための説明図である。図17、図18は、表示対象の装置500の表示画面に表示されるデバイス制御画面の全体、またはデバイス制御画面の一部をそれぞれ示している。
・図17の“Swap”に示すボタン:DeviceペインP1に示されているデバイスが、PinP機能(独立して画像を表示することが可能な表示領域を1画面内に複数設けることが可能な機能)を有している場合に、メインとなる表示領域と、サブとなる表示領域とを切り替えるためのボタン
・図17の“Flip”に示すボタン:DeviceペインP1に示されているデバイスにおける表示の向きを制御するためのボタン
・図17の“Contrast”に示す調整ボタン:DeviceペインP1に示されているデバイスにおけるコントラストを調整するためのボタン
・図17の“Color”に示す調整ボタン:DeviceペインP1に示されているデバイスにおける輝度、色相、あるいは、RGBのバランスを調整するためのボタン
・図17の“2D/3D Mode”に示すボタン:DeviceペインP1に示されているデバイスにおける立体視に係る表示モードの切り替えを、制御するためのボタン
図19A、図19Bは、本実施形態に係る制御方法が適用される医療制御システム1000における表示の一例を説明するための説明図である。図19A、図19Bは、表示対象の装置500の表示画面に表示されるデバイス制御画面の全体をそれぞれ示している。図19Aに示すデバイス制御画面と、図19Bに示すデバイス制御画面とは、ユーザの操作によって切り替えられる。
・記録媒体への画像データの記録を開始させるための録画ボタン(図19Aに示すO1)
・行われている処理を停止させるための停止ボタン(図19Aに示すO2)
・行われている処理を一時的に停止させるための停止ボタン(図19Aに示すO3)
・記録媒体に記憶されている画像データの再生を開始させるための再生ボタン(図19Aに示すO4)
・再生されている画像の巻き戻しをさせるための巻き戻しボタン(図19Aに示すO5)
・再生されている画像の早送りをさせるための早送りボタン(図19Aに示すO6)
・表示画面をスワイプする操作など、表示画面の表示の切り替えを行うことが可能な操作(表示対象の装置500の表示デバイスがタッチパネルである場合)
・物理的なボタンなどの表示対象の装置500が備える操作デバイス、または、リモート・コントローラなどの外部操作デバイスを用いた操作
医療用制御装置100が本実施形態に係る制御方法に係る制御処理を行うことによって、例えば下記に示す効果が奏される。なお、本実施形態に係る制御方法が用いられることにより奏される効果が、下記に示す効果に限られないことは、言うまでもない。
・例えば、図11、図17、図19A、図19Bに示すデバイス制御画面が用いられることによって、ユーザは、1画面で画像の切り替えと、機器の制御とを行うことができるので、効率的に作業を行うことができる。
・例えば、図11のConnectペインP3、図17のConnectペインP3、図19AのConnectペインP3、および図19BのConnectペインP4に示すように、デバイス制御画面には、画像の切り替えを行うことが可能な機器のみが表示されるので、ユーザの誤操作の防止が図られる。
・レコーダ(装置400の一例)のように、信号源と出力先とが、行われる処理(レコーダが用いられる目的に対応する処理)によって変わる機器においても、例えば図19A、図19Bを参照して示したように、ユーザは、スワイプ操作などのユーザの操作によってモードを切り替えることによって、統一した操作を行うことができる。
・例えば図15、図16を参照して示したように、1つの画像から画角を変えた複数の画像を、それぞれ異なるモニタ(出力先の一例)に出力することができる。
次に、上述した本実施形態に係る制御方法に係る処理を行うことが可能な本実施形態に係る医療用制御装置の構成の一例を説明する。
図21は、本実施形態に係る医療用制御装置100のハードウェア構成の一例を示す説明図である。医療用制御装置100は、例えば、MPU150と、ROM152と、RAM154と、記録媒体156と、入出力インタフェース158と、操作入力デバイス160と、表示デバイス162と、通信インタフェース164とを備える。また、医療用制御装置100は、例えば、データの伝送路としてのバス166で各構成要素間を接続する。
コンピュータを、本実施形態に係る医療用制御装置として機能させるためのプログラム(例えば上記制御処理など、本実施形態に係る制御方法に係る処理を実行することが可能なプログラム)が、コンピュータにおいてプロセッサなどにより実行されることによって、ユーザの操作性の向上を図ることができる。
(1)
画像の入力元に関するオブジェクトが表示される第1表示領域と画像の出力先に関するオブジェクトが表示される第2表示領域との一方または双方と、前記入力元または前記出力先を制御するためのオブジェクトが表示される第3表示領域とを、1画面に表示させる処理部を備える、医療用制御装置。
(2)
前記第1表示領域と前記第2表示領域との双方と、前記第3表示領域とを、1画面に表示させる場合、
前記処理部は、
前記第2表示領域に、前記入力元の画像を表示させることが可能な前記出力先に関するオブジェクトを表示させ、
前記第3表示領域に、前記入力元を制御するためのオブジェクトを表示させる、(1)に記載の医療用制御装置。
(3)
前記処理部は、前記第2表示領域に対する操作に基づいて、前記第2表示領域に対する操作により選択された、前記入力元の画像を表示させる前記出力先を、明示させる、(2)に記載の医療用制御装置。
(4)
前記処理部は、前記第1表示領域に対する操作、および前記第2表示領域に対する操作に基づいて、前記第2表示領域に対する操作により選択された、前記第1表示領域に対する操作により選択された前記入力元の画像の一部に対応する画像を表示させる、前記出力先を、さらに明示させる、(3)に記載の医療用制御装置。
(5)
前記第1表示領域と、前記第3表示領域とを、1画面に表示させる場合、
前記処理部は、
前記第1表示領域に、前記出力先に画像を表示させることが可能な前記入力元に関するオブジェクト、または、前記出力先に画像を記録させることが可能な前記入力元に関するオブジェクトを表示させ、
前記第3表示領域に、前記出力先を制御するためのオブジェクトを表示させる、(1)〜(4)のいずれか1つに記載の医療用制御装置。
(6)
前記出力先が、独立して画像を表示することが可能な表示領域を1画面内に複数設けることが可能な機能を、有する場合、
前記処理部は、前記第3表示領域に、前記出力先における前記表示領域のうちの1または2以上への表示を制御するためのオブジェクトを、表示させる、(5)に記載の医療用制御装置。
(7)
前記第2表示領域と、前記第3表示領域とを、1画面に表示させる場合、
前記処理部は、
前記第2表示領域に、前記入力元の画像を表示させることが可能な出力先に関するオブジェクトを表示させ、
前記第3表示領域に、前記入力元を制御するためのオブジェクトを表示させる、(1)〜(6)のいずれか1つに記載の医療用制御装置。
(8)
前記処理部は、前記第2表示領域に、前記出力先の表示画面に表示されている画像のサムネイル画像を表示させる、(2)〜(4)、(6)のいずれか1つに記載の医療用制御装置。
(9)
前記サムネイル画像は、動画像である、(8)に記載の医療用制御装置。
(10)
画像の入力元に関するオブジェクトが表示される第1表示領域と画像の出力先に関するオブジェクトが表示される第2表示領域との一方または双方と、前記入力元または前記出力先を制御するためのオブジェクトが表示される第3表示領域とを、1画面に表示させるステップを有する、医療用制御装置により実行される制御方法。
(11)
画像の入力元に関するオブジェクトが表示される第1表示領域と画像の出力先に関するオブジェクトが表示される第2表示領域との一方または双方と、前記入力元または前記出力先を制御するためのオブジェクトが表示される第3表示領域とを、1画面に表示させる機能を、コンピュータに実現させるためのプログラム。
(12)
画像の入力元となる装置と、
画像の出力先となる装置と、
医療用制御装置と、
を有し、
前記医療用制御装置は、
前記入力元に関するオブジェクトが表示される第1表示領域と前記出力先に関するオブジェクトが表示される第2表示領域との一方または双方と、前記入力元または前記出力先を制御するためのオブジェクトが表示される第3表示領域とを、1画面に表示させる処理部を備える、医療用制御システム。
102 通信部
104 制御部
110 処理部
200 入力元の装置
300 出力先の装置
400 装置
500 表示対象の装置
600 その他の装置
1000 医療制御システム
Claims (11)
- 複数の動画像の入力元に関するオブジェクトと、該複数の動画像の入力画像のそれぞれに1対1に対応する、それぞれ動画像による複数のサムネイル画像それぞれが表示される第1表示領域と、
複数の動画像の出力先に関するオブジェクトと、該出力先に出力されている動画像のそれぞれに1対1に対応する、それぞれ動画像による複数のサムネイル画像のそれぞれが表示される第2表示領域と、
の一方または双方と、
前記入力元または前記出力先を制御するためのオブジェクトが表示される第3表示領域と、
を1画面に表示させる処理部を備える、医療用制御装置。 - 前記第1表示領域と前記第2表示領域との双方と、前記第3表示領域とを、1画面に表示させる場合、
前記処理部は、
前記第2表示領域に、前記入力元の画像を表示させることが可能な前記出力先に関するオブジェクトを表示させ、
前記第3表示領域に、前記入力元を制御するためのオブジェクトを表示させる、請求項1に記載の医療用制御装置。 - 前記処理部は、前記第2表示領域に対する操作に基づいて、前記第2表示領域に対する操作により選択された、前記入力元の画像を表示させる前記出力先を、明示させる、請求項2に記載の医療用制御装置。
- 前記処理部は、前記第1表示領域に対する操作、および前記第2表示領域に対する操作に基づいて、前記第2表示領域に対する操作により選択された、前記第1表示領域に対する操作により選択された前記入力元の画像の一部に対応する画像を表示させる、前記出力先を、さらに明示させる、請求項3に記載の医療用制御装置。
- 前記第1表示領域と、前記第3表示領域とを、1画面に表示させる場合、
前記処理部は、
前記第1表示領域に、前記出力先に画像を表示させることが可能な前記入力元に関するオブジェクト、または、前記出力先に画像を記録させることが可能な前記入力元に関するオブジェクトを表示させ、
前記第3表示領域に、前記出力先を制御するためのオブジェクトを表示させる、請求項1に記載の医療用制御装置。 - 前記出力先が、独立して画像を表示することが可能な表示領域を1画面内に複数設けることが可能な機能を、有する場合、
前記処理部は、前記第3表示領域に、前記出力先における前記表示領域のうちの1または2以上への表示を制御するためのオブジェクトを、表示させる、請求項5に記載の医療用制御装置。 - 前記第2表示領域と、前記第3表示領域とを、1画面に表示させる場合、
前記処理部は、
前記第2表示領域に、前記入力元の画像を表示させることが可能な出力先に関するオブジェクトを表示させ、
前記第3表示領域に、前記入力元を制御するためのオブジェクトを表示させる、請求項1に記載の医療用制御装置。 - 前記処理部は、前記入力元に対してパラメータを調整するオブジェクトをさらに表示させる、請求項1に記載の医療用制御装置。
- 複数の動画像の入力元に関するオブジェクトと、該複数の動画像の入力画像のそれぞれに1対1に対応する、それぞれ動画像による複数のサムネイル画像それぞれが表示される第1表示領域と、
複数の動画像の出力先に関するオブジェクトと、該出力先に出力されている動画像のそれぞれに1対1に対応する、それぞれ動画像による複数のサムネイル画像のそれぞれが表示される第2表示領域と、
の一方または双方と、
前記入力元または前記出力先を制御するためのオブジェクトが表示される第3表示領域と、
を1画面に表示させるステップを有する、医療用制御装置により実行される制御方法。 - 複数の動画像の入力元に関するオブジェクトと、該複数の動画像の入力画像のそれぞれに1対1に対応する、それぞれ動画像による複数のサムネイル画像それぞれが表示される第1表示領域と、
複数の動画像の出力先に関するオブジェクトと、該出力先に出力されている動画像のそれぞれに1対1に対応する、それぞれ動画像による複数のサムネイル画像のそれぞれが表示される第2表示領域と、
の一方または双方と、
前記入力元または前記出力先を制御するためのオブジェクトが表示される第3表示領域と、
を1画面に表示させる機能を、コンピュータに実現させるためのプログラム。 - 複数の動画像の入力元となる装置と、
複数の動画像の出力先となる装置と、
医療用制御装置と、
を有し、
前記医療用制御装置は、
前記複数の動画像の入力元に関するオブジェクトと、該複数の動画像のそれぞれに1対1に対応する、それぞれ動画像による複数のサムネイル画像それぞれが表示される第1表示領域と、
前記複数の動画像の出力先に関するオブジェクトと、該出力先に出力されている動画像のそれぞれに1対1に対応する、それぞれ動画像による複数のサムネイル画像のそれぞれが表示される第2表示領域と、
の一方または双方と、
前記入力元または前記出力先を制御するためのオブジェクトが表示される第3表示領域と、
を1画面に表示させる処理部を備える、医療用制御システム。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015196415 | 2015-10-02 | ||
| JP2015196415 | 2015-10-02 | ||
| PCT/JP2016/073901 WO2017056762A1 (ja) | 2015-10-02 | 2016-08-16 | 医療用制御装置、制御方法、プログラム、および医療用制御システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPWO2017056762A1 JPWO2017056762A1 (ja) | 2018-07-19 |
| JP6838554B2 true JP6838554B2 (ja) | 2021-03-03 |
Family
ID=58427418
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017543005A Active JP6838554B2 (ja) | 2015-10-02 | 2016-08-16 | 医療用制御装置、制御方法、プログラム、および医療用制御システム |
Country Status (5)
| Country | Link |
|---|---|
| US (3) | US20180271613A1 (ja) |
| EP (1) | EP3342365B1 (ja) |
| JP (1) | JP6838554B2 (ja) |
| CN (3) | CN113384360A (ja) |
| WO (1) | WO2017056762A1 (ja) |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6838554B2 (ja) | 2015-10-02 | 2021-03-03 | ソニー株式会社 | 医療用制御装置、制御方法、プログラム、および医療用制御システム |
| WO2018101514A1 (ko) * | 2016-12-01 | 2018-06-07 | 엘지전자 주식회사 | 영상표시장치, 및 이를 구비하는 영상표시 시스템 |
| US11896195B2 (en) | 2018-07-24 | 2024-02-13 | Sony Corporation | Distributed image processing system in operating theater |
| JP6440136B1 (ja) * | 2018-09-06 | 2018-12-19 | 株式会社Medi Plus | 医療映像スイッチャー |
| US12574480B2 (en) * | 2021-03-25 | 2026-03-10 | Sony Group Corporation | Surgical operation room system, image recording method, program, and medical information processing system |
| USD1091560S1 (en) * | 2021-04-22 | 2025-09-02 | Google Llc | Display screen or portion thereof with graphical user interface |
| USD1091562S1 (en) * | 2021-04-22 | 2025-09-02 | Google Llc | Display screen or portion thereof with graphical user interface |
| USD1091601S1 (en) * | 2021-04-22 | 2025-09-02 | Google Llc | Display screen or portion thereof with graphical user interface |
| USD1091561S1 (en) * | 2021-04-22 | 2025-09-02 | Google Llc | Display screen or portion thereof with graphical user interface |
| US11694655B2 (en) * | 2021-05-20 | 2023-07-04 | Tcl China Star Optoelectronics Technology Co., Ltd. | Video play system, video play device, and video play method |
| JP7783720B2 (ja) * | 2021-10-28 | 2025-12-10 | キヤノンメディカルシステムズ株式会社 | モダリティ制御装置、および表示制御プログラム |
| JP7816994B2 (ja) * | 2022-01-31 | 2026-02-18 | キヤノンメディカルシステムズ株式会社 | 医用画像診断装置 |
| CN117935753A (zh) * | 2024-01-22 | 2024-04-26 | 深圳市朗腾威视科技有限公司 | 一种基于雷电芯片的多屏显示系统及其控制方法 |
Family Cites Families (68)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS5034256B1 (ja) | 1970-01-20 | 1975-11-07 | ||
| JP3012342B2 (ja) | 1990-01-19 | 2000-02-21 | オリンパス光学工業株式会社 | 医療用画像表示装置 |
| JP3012432B2 (ja) | 1993-06-24 | 2000-02-21 | ヤンマー農機株式会社 | 追随型走行車両の作動停止距離調節構造 |
| US5812125A (en) * | 1995-06-30 | 1998-09-22 | International Business Machines Corporation | Method and apparatus for selectively generating display images |
| JP2001000449A (ja) * | 1999-06-22 | 2001-01-09 | Olympus Optical Co Ltd | 医療用システム |
| US6493036B1 (en) * | 1999-11-17 | 2002-12-10 | Teralogic, Inc. | System and method for scaling real time video |
| US20060064716A1 (en) * | 2000-07-24 | 2006-03-23 | Vivcom, Inc. | Techniques for navigating multiple video streams |
| JP2002125219A (ja) * | 2000-10-17 | 2002-04-26 | Olympus Optical Co Ltd | システム制御装置 |
| GB2400254A (en) * | 2003-03-31 | 2004-10-06 | Sony Uk Ltd | Video processing |
| JP2004313341A (ja) * | 2003-04-14 | 2004-11-11 | Olympus Corp | 医療機器システム |
| JP4081046B2 (ja) | 2003-09-05 | 2008-04-23 | 松下電器産業株式会社 | 放送受信アンテナ、及びテレビジョン放送受像機 |
| US7312764B2 (en) * | 2003-09-26 | 2007-12-25 | The General Electric Company | Methods and apparatus for displaying images on mixed monitor displays |
| JP4468672B2 (ja) * | 2003-10-06 | 2010-05-26 | オリンパス株式会社 | 手術支援システム |
| JP2005245961A (ja) * | 2004-03-08 | 2005-09-15 | Olympus Corp | 画像処理装置 |
| JP2005304935A (ja) * | 2004-04-23 | 2005-11-04 | Olympus Corp | 医療システム用制御装置 |
| CN100498761C (zh) * | 2004-05-24 | 2009-06-10 | 株式会社东芝 | 医疗图像显示设备 |
| US7543239B2 (en) * | 2004-06-04 | 2009-06-02 | Stereotaxis, Inc. | User interface for remote control of medical devices |
| JP4207900B2 (ja) * | 2004-12-22 | 2009-01-14 | ソニー株式会社 | リモコン・システム、リモート・コマンダ、並びにリモコン・サーバ |
| US8069420B2 (en) * | 2004-12-29 | 2011-11-29 | Karl Storz Endoscopy-America, Inc. | System for controlling the communication of medical imaging data |
| KR100699091B1 (ko) * | 2005-03-09 | 2007-03-23 | 삼성전자주식회사 | 디스플레이장치 및 그 제어방법 |
| JP5160025B2 (ja) * | 2005-04-14 | 2013-03-13 | オリンパスメディカルシステムズ株式会社 | 手術システム |
| CN101291635B (zh) * | 2005-10-20 | 2013-03-27 | 直观外科手术操作公司 | 医用机器人系统中的计算机显示屏上的辅助图像显示和操纵 |
| US7843865B2 (en) * | 2005-12-08 | 2010-11-30 | Intel Corporation | System and method for controlling home network devices using multicast enabled remote controls |
| JP5034256B2 (ja) * | 2006-02-11 | 2012-09-26 | 富士ゼロックス株式会社 | 会議室制御システム |
| US20070159457A1 (en) * | 2006-04-27 | 2007-07-12 | Thomas Arthur | Multiple-input selectable systems integrated display and control functions unit for electrophysiology and the like |
| JP2008000282A (ja) * | 2006-06-21 | 2008-01-10 | Olympus Medical Systems Corp | 手技画像記録制御システム及び手術システム |
| US7927272B2 (en) * | 2006-08-04 | 2011-04-19 | Avantis Medical Systems, Inc. | Surgical port with embedded imaging device |
| US7567233B2 (en) * | 2006-09-06 | 2009-07-28 | Stereotaxis, Inc. | Global input device for multiple computer-controlled medical systems |
| JP4981397B2 (ja) * | 2006-10-04 | 2012-07-18 | オリンパスメディカルシステムズ株式会社 | 医療用画像処理システム |
| US7871403B2 (en) * | 2008-02-26 | 2011-01-18 | Olympus Medical Systems Corp. | Medical support control system |
| DE102008017846A1 (de) * | 2008-04-08 | 2009-10-29 | Siemens Aktiengesellschaft | Verfahren und Benutzerschnittstelle für die grafische Darstellung von medizinischen Daten |
| BRPI0911559B1 (pt) * | 2008-05-02 | 2021-01-05 | Savant Systems Llc | aparelho e método para controlar e selecionar entrada de vídeo para emitir em um ou mais dispositivos de exibição de saída de vídeo. |
| US20090282437A1 (en) * | 2008-05-09 | 2009-11-12 | Tap.Tv | System and Method for Controlling Media at a Plurality of Output Devices |
| KR101012980B1 (ko) * | 2009-03-16 | 2011-02-10 | 한국방송공사 | 계층적 방송 장치 및 방법 |
| US9241062B2 (en) * | 2009-05-20 | 2016-01-19 | Citrix Systems, Inc. | Methods and systems for using external display devices with a mobile computing device |
| US20120182244A1 (en) * | 2010-06-11 | 2012-07-19 | Systemsone, Llc | Integrated Multi-Display with Remote Programming and Viewing Capability |
| JP5465135B2 (ja) * | 2010-08-30 | 2014-04-09 | 富士フイルム株式会社 | 医療情報表示装置および方法、並びにプログラム |
| US20120173281A1 (en) * | 2011-01-05 | 2012-07-05 | Dilella James M | Automated data entry and transcription system, especially for generation of medical reports by an attending physician |
| US9495511B2 (en) * | 2011-03-01 | 2016-11-15 | Covidien Lp | Remote monitoring systems and methods for medical devices |
| US20120189173A1 (en) * | 2011-01-26 | 2012-07-26 | Markowitz H Toby | Image display |
| US20120254933A1 (en) * | 2011-03-31 | 2012-10-04 | Hunt Electronic Co., Ltd. | Network video server and video control method thereof |
| US10039502B2 (en) * | 2011-04-12 | 2018-08-07 | Medtronic Ablation Frontiers Llc | Electrophysiological signal processing and utilization |
| US10714219B2 (en) * | 2011-04-28 | 2020-07-14 | Tiatros, Inc. | System and method for uploading and sharing medical images within trusted health-user communities |
| CA2844807C (en) * | 2011-08-19 | 2022-07-26 | Hospira, Inc. | Systems and methods for a graphical interface including a graphical representation of medical data |
| KR20130053587A (ko) * | 2011-11-15 | 2013-05-24 | 삼성전자주식회사 | 의료기기 및 이를 이용한 의료영상 디스플레이 방법 |
| KR101474768B1 (ko) * | 2011-12-21 | 2014-12-19 | 삼성전자 주식회사 | 의료기기 및 이를 이용한 영상표시방법 |
| JP5347089B1 (ja) * | 2012-01-26 | 2013-11-20 | オリンパスメディカルシステムズ株式会社 | 医療情報記録装置 |
| WO2013116240A1 (en) * | 2012-01-30 | 2013-08-08 | Inneroptic Technology, Inc. | Multiple medical device guidance |
| WO2013129448A1 (ja) * | 2012-03-01 | 2013-09-06 | 株式会社 日立メディコ | 医用画像表示装置、及び医用画像表示方法 |
| JP6165468B2 (ja) * | 2012-03-05 | 2017-07-19 | 東芝メディカルシステムズ株式会社 | 医用画像処理システム |
| WO2013164826A1 (en) * | 2012-05-04 | 2013-11-07 | Given Imaging Ltd. | System and method for automatic navigation of a capsule based on image stream captured in-vivo |
| US9642606B2 (en) | 2012-06-27 | 2017-05-09 | Camplex, Inc. | Surgical visualization system |
| JP5935216B2 (ja) * | 2012-11-27 | 2016-06-15 | 株式会社 日立産業制御ソリューションズ | 医療情報表示装置および医療情報表示プログラム |
| EP2737845B1 (en) * | 2012-12-03 | 2020-08-05 | Samsung Electronics Co., Ltd | Control apparatus operatively coupled with medical imaging apparatus and medical imaging apparatus having the same |
| CN203195765U (zh) * | 2012-12-20 | 2013-09-18 | 上海联影医疗科技有限公司 | 一种医学信息显示系统 |
| WO2014104129A1 (ja) * | 2012-12-25 | 2014-07-03 | 株式会社 東芝 | 画像観察装置、画像観察方法、及びコンピュータ読み取り可能な記録媒体 |
| WO2014168128A1 (ja) | 2013-04-12 | 2014-10-16 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム及び内視鏡システムの作動方法 |
| KR102071579B1 (ko) | 2013-09-02 | 2020-01-30 | 삼성전자주식회사 | 화면 미러링을 이용한 서비스 제공 방법 및 그 장치 |
| US9058375B2 (en) * | 2013-10-09 | 2015-06-16 | Smart Screen Networks, Inc. | Systems and methods for adding descriptive metadata to digital content |
| US10445465B2 (en) * | 2013-11-19 | 2019-10-15 | General Electric Company | System and method for efficient transmission of patient data |
| US11977998B2 (en) * | 2014-05-15 | 2024-05-07 | Storz Endoskop Produktions Gmbh | Surgical workflow support system |
| JP6323183B2 (ja) * | 2014-06-04 | 2018-05-16 | ソニー株式会社 | 画像処理装置および画像処理方法 |
| JP2016071762A (ja) * | 2014-09-30 | 2016-05-09 | 富士フイルム株式会社 | 診療支援装置、システム、プログラム及び方法 |
| WO2016068581A1 (en) * | 2014-10-31 | 2016-05-06 | Samsung Electronics Co., Ltd. | Device and method of managing user information based on image |
| CA2974080A1 (en) * | 2015-01-21 | 2016-07-28 | Smiths Medical Asd, Inc. | Medical device control |
| US10600015B2 (en) * | 2015-06-24 | 2020-03-24 | Karl Storz Se & Co. Kg | Context-aware user interface for integrated operating room |
| JP6838554B2 (ja) | 2015-10-02 | 2021-03-03 | ソニー株式会社 | 医療用制御装置、制御方法、プログラム、および医療用制御システム |
| CN110505047B (zh) | 2019-08-14 | 2022-08-23 | 江苏海洋大学 | 一种用于虹膜特征保护的双重加密方法 |
-
2016
- 2016-08-16 JP JP2017543005A patent/JP6838554B2/ja active Active
- 2016-08-16 US US15/761,325 patent/US20180271613A1/en not_active Abandoned
- 2016-08-16 CN CN202110496598.8A patent/CN113384360A/zh active Pending
- 2016-08-16 CN CN201680055980.2A patent/CN108135669B/zh active Active
- 2016-08-16 EP EP16850939.6A patent/EP3342365B1/en active Active
- 2016-08-16 WO PCT/JP2016/073901 patent/WO2017056762A1/ja not_active Ceased
- 2016-08-16 CN CN202110496002.4A patent/CN113384359B/zh active Active
-
2020
- 2020-06-18 US US16/904,589 patent/US11197736B2/en active Active
-
2021
- 2021-10-22 US US17/507,904 patent/US12127891B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN108135669A (zh) | 2018-06-08 |
| CN113384359B (zh) | 2024-08-20 |
| CN113384360A (zh) | 2021-09-14 |
| US20200337799A1 (en) | 2020-10-29 |
| EP3342365B1 (en) | 2023-10-11 |
| EP3342365A4 (en) | 2019-01-09 |
| US20220039905A1 (en) | 2022-02-10 |
| US12127891B2 (en) | 2024-10-29 |
| US20180271613A1 (en) | 2018-09-27 |
| US11197736B2 (en) | 2021-12-14 |
| CN108135669B (zh) | 2021-05-25 |
| CN113384359A (zh) | 2021-09-14 |
| WO2017056762A1 (ja) | 2017-04-06 |
| EP3342365A1 (en) | 2018-07-04 |
| JPWO2017056762A1 (ja) | 2018-07-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6838554B2 (ja) | 医療用制御装置、制御方法、プログラム、および医療用制御システム | |
| US9152139B2 (en) | Automation Control of Electronic Devices | |
| US9756126B2 (en) | Information processing device, and information processing system | |
| US8443414B2 (en) | Information processing apparatus and method for controlling a TV receiver | |
| CN104093054B (zh) | 网络智能显示控制系统 | |
| JP2005181404A (ja) | 複数画像表示可能な画像投射制御装置 | |
| JP2009201010A (ja) | プロジェクタシステム、プロジェクタ及びリモートコントローラ | |
| US20160343347A1 (en) | Information terminal, system, control method and recording medium | |
| CN104093056A (zh) | 网络智能显示控制系统 | |
| JP6922170B2 (ja) | 情報処理装置、情報処理方法、プログラム、及び情報処理システム | |
| US8848042B2 (en) | Display device, video device, menu-screen display method, and video display system | |
| JP6773039B2 (ja) | 医療用制御装置、制御方法、およびプログラム | |
| WO2020012643A1 (ja) | 多画面表示調整システムおよび多画面表示調整方法 | |
| US20120162530A1 (en) | Electronic Apparatus and Display Control Method | |
| JP2017191144A (ja) | 表示制御装置、その制御方法およびプログラム | |
| JP5944000B2 (ja) | 画像表示システム、情報端末、情報端末の制御方法及び制御プログラム | |
| WO2010146768A1 (ja) | 情報処理装置 | |
| JPWO2010109598A1 (ja) | 映像表示装置 | |
| CN219227672U (zh) | 一种hdmi多模式画面分割切换器 | |
| JP6702552B2 (ja) | デコーダ装置、リモコン端末および画面操作方法 | |
| JP2014211547A (ja) | 表示制御装置および映像表示システム | |
| JP2019204032A (ja) | 表示装置 | |
| JP2019168600A (ja) | 表示装置、及びその制御方法、プログラム | |
| JP2010170423A (ja) | 情報処理装置およびプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190208 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20190214 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190222 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190515 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190522 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190805 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190805 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200818 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201012 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210112 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210125 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6838554 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |