CN106910322B - 一种基于立体视觉和行为分析的头戴式预防近视装置 - Google Patents

一种基于立体视觉和行为分析的头戴式预防近视装置 Download PDF

Info

Publication number
CN106910322B
CN106910322B CN201710126985.6A CN201710126985A CN106910322B CN 106910322 B CN106910322 B CN 106910322B CN 201710126985 A CN201710126985 A CN 201710126985A CN 106910322 B CN106910322 B CN 106910322B
Authority
CN
China
Prior art keywords
user
computer
module
mobile phone
pad
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201710126985.6A
Other languages
English (en)
Other versions
CN106910322A (zh
Inventor
裴明涛
张博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Institute of Technology BIT
Original Assignee
Beijing Institute of Technology BIT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Institute of Technology BIT filed Critical Beijing Institute of Technology BIT
Priority to CN201710126985.6A priority Critical patent/CN106910322B/zh
Publication of CN106910322A publication Critical patent/CN106910322A/zh
Application granted granted Critical
Publication of CN106910322B publication Critical patent/CN106910322B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING SYSTEMS, e.g. PERSONAL CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18—Status alarms
    • G08B21/24—Reminder alarms, e.g. anti-loss alarms
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image

Landscapes

  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Eye Examination Apparatus (AREA)
  • Telephone Function (AREA)

Abstract

一种基于立体视觉和行为分析的头戴式预防近视装置，属于计算机视觉技术领域。装置包括双目摄像头，无线模块，计算模块以及提醒模块。双目摄像头用于获取两路图像；通过无线模块将两路图像传输到计算模块；计算模块通过立体视觉的方法恢复场景的深度信息；同时根据获得的图像进行行为分析，当判断用户在进行看书/用电脑/用Pad/用手机为主的行为时，根据三维恢复的结果，判断眼睛距离书/电脑/Pad/手机的距离，若距离过近，则通过提醒模块进行提醒；通过图像分析场景中的光线是否过暗，如果过暗，通过提醒模块进行提醒；此外如果用户看书/用电脑/用Pad/用手机的时间过长，也通过提醒模块进行提醒。从而可以有效的预防近视的发生。

Description

一种基于立体视觉和行为分析的头戴式预防近视装置
技术领域
本发明涉及一种基于立体视觉和行为分析的头戴式预防近视装置，属于计算机视觉技术领域。
背景技术
青少年近视是目前我们面临的一个很大的社会问题，近视的产生常常是由于看书/电脑的姿势不对，眼睛距离目标过近，看书/电脑的时间过长以及照明光线昏暗等原因造成的。如何有效的监测上述情况的发生，从而有效的预防近视是一个亟待解决的问题。
目前有通过超声波或红外进行测距并进行提醒的预防近视装置，但是此类装置只能测量眼睛前方物体距离眼睛的距离，而无法判断眼前的物体是否是书/电脑，当用户眼前的物体不是书/电脑时，或者用户不是在进行阅读活动而只是眼前有书/电脑时，此类装置都会进行提醒，给用户的生活带来干扰和不便；同时用户在看书/看电脑/用手机等不同场景下，需要不同的阅读距离和阅读间隔，之前的装置无法自动判断是何种阅读场景，无法自动的进行设置，给用户的使用带来不便。
为了克服目前预防近视装置的以上问题，我们提出了一种基于立体视觉和行为分析的头戴式预防近视装置。通过该装置可以自动测量眼睛距离书/电脑/Pad/手机的距离以及判断用户的行为，如果用户是在读书/用电脑/用Pad/用手机，如果眼睛距离目标的距离过近，则可以提醒用户，纠正姿势；如果判断用户读书/用电脑/用Pad/用手机的时间过长，或者场景中的光线过暗，也可以提醒用户；同时该装置可自动判断当前是何种阅读活动，根据不同的阅读活动可自动的设置相应参数，可以有效的达到预防近视的目的。
发明内容
本发明的目的是为了有效预防近视发生，提出了一种基于立体视觉和行为分析的头戴式预防近视装置。
一种基于立体视觉和行为分析的头戴式预防近视装置，简称本装置，主要由双目摄像头、无线模块、计算模块以及提醒模块组成。
其中，无线模块通过无线网络连接计算模块，将双目摄像头获取的图像传输给计算模块，同时将计算和分析的结果传送给提醒模块；
其中，无线网络是具有无线传输功能及相关协议的局域网、WiFi或城域网；
计算模块通过无线网络接收双目摄像头获取的图像，并进行立体恢复和行为分析，之后立体恢复和行为分析的结果通过无线模块传送给提醒模块；提醒模块根据立体恢复和行为分析的结果通过语音及震动为主的方式提醒用户保持距离、适度休息或增加照明以预防近视。
本装置在使用时戴在用户的头上，其中，双目摄像头的位置接近用户的眼睛位置。
基于本装置预防近视的具体操作步骤如下：
步骤一、本装置在使用前经过标定，确定双目摄像头的内外参数；
步骤二、双目摄像头获取两路场景图像，通过无线模块传送到计算模块；
步骤三、计算模块基于获取的两路图像恢复场景的三维信息并对用户行为进行分析，并根据分析结果进行相应操作；
其中，恢复场景的三维信息是指恢复图像上每一点所对应场景点的三维信息，对用户行为进行分析是指判断用户是否在进行阅读，阅读时间是否过长，眼睛与阅读相关物体距离是否过近以及场景照明是否合适，根据分析结果进行相应操作是指对用户进行提醒或返回步骤二重新获取两路场景图像；步骤三，具体为：
步骤3.1根据双目摄像头获取的两路场景图像，通过立体匹配得到两幅图像中的对应点，得出立体匹配结果；
步骤3.2根据步骤一得到的双目摄像头的内外参数，通过三角化的方法对步骤3.1输出的立体匹配结果进行处理，得到场景中点的三维信息；
步骤3.3对用户行为进行分析并针对行为分析结果进行相应操作，具体为：
通过物体检测方法在图像中检测书、电脑、Pad以及手机等阅读相关的物体，并当检测到此类物体后，判断此类物体距离用户的距离是否保持稳定，根据稳定与否的结果进行阅读时间测量及提醒或返回步骤二重新获取两路场景图像，具体为：
3.3A若书、电脑、Pad及手机等阅读相关的物体距离用户的距离比较稳定并持续一段时间，则可以认为用户在看书/用电脑/用Pad/用手机；此时，根据步骤3.2得到的场景中点的三维信息及书、电脑、Pad或手机的检测结果，测量用户与目标的距离，并根据测量得到的距离，决定是否通过提醒模块以声音或震动的方式提示用户；并进一步的根据阅读时间实现时间递减密集型提醒；
其中，持续一段时间定义为大于等于30秒；
其中，时间递减密集型提醒是指随着看书/用电脑/用Pad/用手机行为时间的持续，设置指数增加的提醒频率；同时随着阅读行为的持续及场景图像的实时分析结果，对用户照明进行相应提醒；
3.3B若书、电脑、Pad及手机等阅读相关的物体距离用户的距离不稳定且也未持续一段时间，则可以认为用户没有在看书/用电脑/用Pad/用手机，跳转到步骤二；
至此，从步骤一到步骤三，完成了基于本装置预防近视的具体操作。
有益效果
一种基于立体视觉和行为分析的头戴式预防近视装置，与现有技术相比，具有如下有益效果：
本发明是一种头戴式装置，可以随时随地的检测用户的看书/用电脑/用Pad/用手机行为；根据不同的行为自动的设置相应的参数，更好的预防近视的发生，同时不会对非阅读行为进行误判和干扰，方便用户的使用。
本装置可随时随地的提醒用户保持良好的阅读距离和适度的阅读时间；
本装置还可以提醒用户保持良好的阅读照明，有效的预防近视的发生。
附图说明
图1为本发明一种基于立体视觉和行为分析的头戴式预防近视装置的组成示意图；
其中，左图为预防近视头箍，右图为预防近视眼镜，101是双目摄像头，102是提醒模块，103是无线模块，104是计算模块，计算模块可放置在任何可以无线网络相连的地点。
具体实施方式
头戴式预防近视装置可以做成预防近视头箍，或者预防近视眼镜的形式，如图1所示，其中101是双目摄像头，102是提醒模块，103是无线模块，104是计算模块，计算模块可放置在任何可以无线网络相连的地点。
(1)双目摄像头
双目摄像头用于获取场景的两路图像，获取的图像用来恢复场景的三维信息，以及对用户的行为进行分析。
恢复场景的三维信息通过立体视觉的方式进行，装置在使用前经过标定，确定双目摄像头的内外参数，使用时根据拍摄到的两路图像，通过立体匹配得到两幅图像中的对应点，然后通过三角化的方法得到场景中点的三维信息。
行为分析首先检测书/电脑/Pad/手机等物体，当检测到此类物体后，判断此类物体距离用户的距离是否保持稳定，如果此类物体距离用户的距离比较稳定并持续一段时间，则可以认为用户是在进行看书/用电脑/用Pad/用手机的行为。此时如果眼睛距离目标过近，则提示用户；如果用户看书/用电脑/用Pad/用手机的行为持续时间过长，也提示用户；同时通过图像来分析场景的照明情况，如果光线较暗，也提示用户。
(2)无线模块
无线模块通过无线网络连接计算模块，将摄像头获取的图像传输给计算模块，同时将计算和分析的结果传送给提醒模块。
(3)计算模块
计算模块通过无线网络接收双目摄像头获取的图像，并进行立体恢复和行为分析，恢复和分析的结果通过无线模块传送给提醒模块。
(4)提醒模块
根据分析的结果，提醒模块将通过语音，震动等方式提醒用户保持距离，适度休息或增加照明，以预防近视。
实施例
本发明可以用于读书/用电脑/用Pad/用手机等多种学习和生活场景，下面以三个典型的应用场景为例进行叙述。
(1)看书场景
当用户看书时，可佩戴预防近视头箍或预防近视眼镜，通过双目摄像头获取图像并进行分析，如果用户看书时间过长(超过45分钟)，或者眼睛距离书本过近(距离小于35厘米)，或者场景中光线较暗，则通过提醒模块以语音或震动的方式提醒用户。
(2)用电脑场景
当用户使用电脑时，可佩戴预防近视头箍或预防近视眼镜，通过双目摄像头获取图像并进行分析，如果用户使用电脑时间过长(超过30分钟)，或者眼睛距离电脑屏幕过近(距离小于60厘米)，则通过提醒模块以语音或震动的方式提醒用户。
(3)用手机场景
当用户使用手机时，可佩戴预防近视头箍或预防近视眼镜，通过双目摄像头获取图像并进行分析，如果用户使用手机时间过长(超过20分钟)，或者眼睛距离电脑屏幕过近(距离小于30厘米)，则通过提醒模块以语音或震动的方式提醒用户。
以上所述为本发明的较佳实施例而已，本发明不应该局限于该实施例和附图所公开的内容。凡是不脱离本发明所公开的精神下完成的等效或修改，都落入本发明保护的范围。

Claims (1)

1.一种基于立体视觉和行为分析的头戴式预防近视装置，其特征在于：所述装置包括双目摄像头、无线模块、计算模块以及提醒模块；
其中，无线模块通过无线网络连接计算模块，将双目摄像头获取的图像传输给计算模块，同时将计算和分析的结果传送给提醒模块；
计算模块通过无线网络接收双目摄像头获取的图像，并进行立体恢复和行为分析，之后立体恢复和行为分析的结果通过无线模块传送给提醒模块；提醒模块根据立体恢复和行为分析的结果通过语音及震动的方式提醒用户保持距离、适度休息或增加照明以预防近视；
其中，无线网络是具有无线传输功能及相关协议的Wi F i或城域网；
本装置在使用时戴在用户的头上，其中，双目摄像头的位置接近用户的眼睛位置；
基于本装置预防近视的具体操作步骤如下：
步骤一、本装置在使用前经过标定，确定双目摄像头的内外参数；
步骤二、双目摄像头获取两路场景图像，通过无线模块传送到计算模块；
步骤三、计算模块基于获取的两路图像恢复场景的三维信息并对用户行为进行分析，并根据分析结果进行相应操作；
步骤三，具体为：
步骤3.1根据双目摄像头获取的两路场景图像，通过立体匹配得到两幅图像中的对应点，得出立体匹配结果；
步骤3.2根据步骤一得到的双目摄像头的内外参数，通过三角化的方法对步骤3.1输出的立体匹配结果进行处理，得到场景中点的三维信息；
步骤3.3对用户行为进行分析并针对行为分析结果进行相应操作；
步骤3.3，具体为：
通过物体检测方法在图像中检测书、电脑、Pad以及手机阅读相关的物体，并当检测到此类物体后，判断此类物体距离用户的距离是否保持稳定，根据稳定与否的结果进行阅读时间测量及提醒或返回步骤二重新获取两路场景图像，具体为：
3.3A若书、电脑、Pad及手机阅读相关的物体距离用户的距离比较稳定并持续一段时间，则认为用户在看书/用电脑/用Pad/用手机；此时，根据步骤3.2得到的场景中点的三维信息及书、电脑、Pad或手机的检测结果，测量用户与目标的距离，并根据测量得到的距离，决定是否通过提醒模块以声音或震动的方式提示用户；并进一步的根据阅读时间实现时间递减密集型提醒；
其中，持续一段时间定义为大于等于30秒；
其中，时间递减密集型提醒是指随着看书/用电脑/用Pad/用手机行为时间的持续，设置指数增加的提醒频率；同时随着阅读行为的持续及场景图像的实时分析结果，对用户照明进行相应提醒；
3.3B若书、电脑、Pad及手机阅读相关的物体距离用户的距离不稳定且也未持续一段时间，则认为用户没有在看书/用电脑/用Pad/用手机，跳转到步骤二；
其中，恢复场景的三维信息是指恢复图像上每一点所对应场景点的三维信息，对用户行为进行分析是指判断用户是否在进行阅读，阅读时间是否过长，眼睛与阅读相关物体距离是否过近以及场景照明是否合适，根据分析结果进行相应操作是指对用户进行提醒或返回步骤二重新获取两路场景图像；至此，从步骤一到步骤三，完成了基于本装置预防近视的具体操作。
CN201710126985.6A 2017-03-06 2017-03-06 一种基于立体视觉和行为分析的头戴式预防近视装置 Expired - Fee Related CN106910322B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710126985.6A CN106910322B (zh) 2017-03-06 2017-03-06 一种基于立体视觉和行为分析的头戴式预防近视装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710126985.6A CN106910322B (zh) 2017-03-06 2017-03-06 一种基于立体视觉和行为分析的头戴式预防近视装置

Publications (2)

Publication Number Publication Date
CN106910322A CN106910322A (zh) 2017-06-30
CN106910322B true CN106910322B (zh) 2019-02-22

Family

ID=59186076

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710126985.6A Expired - Fee Related CN106910322B (zh) 2017-03-06 2017-03-06 一种基于立体视觉和行为分析的头戴式预防近视装置

Country Status (1)

Country Link
CN (1) CN106910322B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108777058B (zh) * 2018-05-18 2020-08-07 Oppo广东移动通信有限公司 姿态提醒方法、电子装置及计算机可读存储介质
CN110533894B (zh) * 2019-09-02 2021-11-02 深圳市新系区块链技术有限公司 一种视觉疲劳提醒的方法、装置、设备及可读存储介质
CN111144363B (zh) * 2019-12-31 2023-02-28 北京理工大学 一种基于场景和物体信息的第一视角下的行为识别方法
CN112365690A (zh) * 2020-10-30 2021-02-12 四川大学华西医院 基于场景识别的智能穿戴设备及其预警方法
CN113867163A (zh) * 2021-10-09 2021-12-31 深圳康佳电子科技有限公司 一种智能家居场景切换方法、装置、智能终端及存储介质
CN115264800A (zh) * 2022-06-16 2022-11-01 青岛海尔空调器有限总公司 一种基于空调的电子产品使用时长提示方法、装置及空调

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102956090A (zh) * 2011-08-26 2013-03-06 陈仕国 双镜头图像传感防近视提醒器
CN104614876A (zh) * 2015-02-16 2015-05-13 刘博� 预防近视和矫正坐姿的装置
CN104637263A (zh) * 2015-01-30 2015-05-20 刘博� 预防近视及矫正坐姿的装置及方法
TW201608229A (zh) * 2014-08-29 2016-03-01 國立臺灣大學 表面增強拉曼散射試片及其製備方法
CN106297211A (zh) * 2015-06-12 2017-01-04 上海渐华科技发展有限公司 基于活动摄像头与投射光的坐姿校正提醒系统及其应用

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102956090A (zh) * 2011-08-26 2013-03-06 陈仕国 双镜头图像传感防近视提醒器
TW201608229A (zh) * 2014-08-29 2016-03-01 國立臺灣大學 表面增強拉曼散射試片及其製備方法
CN104637263A (zh) * 2015-01-30 2015-05-20 刘博� 预防近视及矫正坐姿的装置及方法
CN104614876A (zh) * 2015-02-16 2015-05-13 刘博� 预防近视和矫正坐姿的装置
CN106297211A (zh) * 2015-06-12 2017-01-04 上海渐华科技发展有限公司 基于活动摄像头与投射光的坐姿校正提醒系统及其应用

Also Published As

Publication number Publication date
CN106910322A (zh) 2017-06-30

Similar Documents

Publication Publication Date Title
CN106910322B (zh) 一种基于立体视觉和行为分析的头戴式预防近视装置
US20220176200A1 (en) Method for Assisting Fitness and Electronic Apparatus
CN114111704B (zh) 测量距离的方法、装置、电子设备及可读存储介质
CN109168102A (zh) 一种耳机佩戴状态检测方法、装置及耳机
CN105183170B (zh) 头戴式可穿戴设备及其信息处理方法、装置
US20140306874A1 (en) Near-plane segmentation using pulsed light source
KR101471488B1 (ko) 시선 추적 장치 및 방법
CN105788185A (zh) 一种坐姿监测方法及装置
US20120155716A1 (en) Biometric information measurement apparatus and method using user terminal
CN104036169B (zh) 生物认证方法及生物认证装置
CA2915473A1 (en) Correlating sensor data obtained from a wearable sensor device with sensor data obtained from a smart phone
CN108848313B (zh) 一种多人拍照方法、终端和存储介质
CN108897423A (zh) 一种vr眼镜及其在线考试防作弊方法
CN104766056A (zh) 一种人机交互方法、装置及虚拟头戴设备
US12210150B2 (en) Head-mountable display systems and methods
KR20110038568A (ko) 시선 위치 추적 장치 및 방법
CN108259887A (zh) 注视点校准方法及装置、注视点标定方法及装置
CN105049596B (zh) 一种移动终端及其疲劳状态检测方法
CN104794776B (zh) 一种基于物联网的行车记录仪
JP2015107155A (ja) 計測装置及び計測方法
EP4224485A1 (en) Adaptive action evaluation method, electronic device, and storage medium
CN110930372A (zh) 一种图像处理方法、电子设备及计算机可读存储介质
US20230256327A1 (en) Visual guidance-based mobile game system and mobile game response method
CN109253701A (zh) 猪胴体背膘厚度激光检测系统和方法
CN108399365B (zh) 利用瞳孔直径检测活体人脸的方法及其设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190222

Termination date: 20200306

CF01 Termination of patent right due to non-payment of annual fee