申请/专利权人：塞罗拉公司;亚当·J·西蒙

申请日：2015-06-30

公开（公告）日：2020-11-24

公开（公告）号：CN107847194B

主分类号：A61B5/16(20060101)

分类号：A61B5/16(20060101)

优先权：["20140630 US 62/019,291"]

专利状态码：失效-未缴年费专利权终止

法律状态：2022.06.14#未缴年费专利权终止;2018.04.20#实质审查的生效;2018.03.27#公开

摘要：一种通过提供以下编码方案使具有操作延迟的PC与具有实时时钟的支持生物传感器的微控制器同步的系统：捕获受试者的绝对反应时间并且将受试者的反应时间从具有延迟的PC发送至具有实时时钟的微控制器。该系统包括：发送器，其从具有延迟的PC发送刺激信号；输入设备，其指示受试者对刺激信号的响应；编码电路，其适于对刺激信号和受试者对刺激信号的响应之间的时间差异进行编码；发射器，其适于发送表示受试者的反应时间的编码差异信号；以及互补接收器，其适于检测编码差异信号。接收器包括对编码差异信号进行解码以确定受试者的反应时间的解码电路，并且该接收器将受试者的反应时间提供至具有实时时钟的微控制器以与接收的生物传感器数据例如EEG数据进行同步。

主权项：1.一种用于使具有操作延迟的PC与具有实时时钟的支持生物传感器的微控制器同步的系统，包括：发送器，所述发送器从所述具有延迟的PC发送刺激信号；输入设备，所述输入设备指示受试者对所述刺激信号的响应；编码电路，所述编码电路适于对所述刺激信号和所述受试者对所述刺激信号的响应之间的时间差异进行编码；发射器，所述发射器适于发送表示所述受试者的反应时间的编码差异信号；以及互补接收器，所述互补接收器适于检测所述编码差异信号，所述互补接收器包括对所述编码差异信号进行解码以确定所述受试者的反应时间的解码电路，所述互补接收器将所述受试者的反应时间提供至所述具有实时时钟的支持生物传感器的微控制器，用以使所述具有操作延迟的PC与所述具有实时时钟的支持生物传感器的微控制器同步。

全文数据：用于使非实时操作系统PC与远程实时数据收集微控制器同步的系统及方法[0001]相关申请的交叉引用[0002]本申请要求于2014年6月30日提交的第62019,291号美国临时专利申请的优先权。该专利申请的内容通过引用以其全部内容被合并到本申请中。技术领域[0003]本发明涉及使具有标准而非实时操作系统例如Windows、Linux或iOS的商用PC机上的刺激和探针的呈现与嵌入式微控制器中的实时数据采集的精确时钟同步的硬件和系统。背景技术[M04]对于诊断评估而言，参照在脑评估期间收集的EEG数据对患者刺激和患者响应进行精确计时非常重要。非精确计时使得EEG迹线的正确数据段不能够与实际的刺激响应事件时间同步。[_5]数据收集引擎的功能是从生物传感器、人机接口设备HID包括键击和鼠标触摸板触摸屏事件）中的每一个收集数据并且提供数据流的同步时间戳。数据收集引擎还与REM进行通信，以接收数据包流例如通过蓝牙或Wi-Fi以及发送配置命令和刺激数据例如音频文件）。数据收集引擎还提供所有输出刺激视频显示的时间戳。该模块必须具有在设备上运行任意程序的最高优先级，以确保所有输入和输出数据的时间戳精确和准确。[0006]例如，对于该类型的每个事件而言，鼠标点击事件、键盘开关接触事件或触摸板事件与软件指定的时间戳之间的间隔必须具有相同的延迟。另外，鼠标点击的软件生成时间戳必须与EEG数据采样时间戳精确对准。此外，刺激例如对象在视频画面上的显示的时间戳必须与输入数据流准确同步。这使得能够识别在另一输入事件例如鼠标单击或刺激事件例如视频显示事件期间发生的确切的EEG数据采样。当以该精度等级控制数据收集时，则设备之间的延迟差异变得不那么严重。[0007]在非确定性环境中，最重要的事情是使抖动而非延迟最小化。[0008]通常，收集生物传感器数据的计算机服务器提供用于客户端访问功能的环形缓冲器以及易失性存储缓冲区和存储器或加密平面文件。数据收集引擎利用安全模块数据加密模块以在本地存储数据或将数据保留在易失性存储器RAM中，并且使用云通信模块将加密数据发送至云APLI0模块还允许其他客户端软件组件访问数据流。该服务器也允许外部设备连接至环形缓冲区以进行只读访问。[0009]对于Windows操作系统而言，存在很多使得引擎例如该引擎能够实时运行或以实时线程运行的软件广品。一种这样的产品是tenAsys在httpwww.tenasvs.comoverview-ifw中描述的用于Windows的INTime。[0010]对于Android操作系统而言，这在不对设备进行根权限管理root和更换内核或调度程序的情况下要困难得多。但是，使用Android操作系统的最新版本和大量软件修改，能够创建近乎实时数据收集设备。参见，例如佐治亚理工学院的MondiaBS和MdisettiVK于2010年提交的“ReliableRealpTimeApplicationsonAndroidOS”。[0011]目前，对于数据收集引擎定义了两个精度等级。[0012]等级1:优于10毫秒分辨率的时间戳精度。几乎所有的功能都会处于该等级。例如，键盘事件和EEG数据采样时间戳之间的时间戳精度需要小于10毫秒。具体地，键盘事件将在与键盘事件一起发生的EEG数据采样的10毫秒内被加上时间戳。[0013]等级2:在1毫秒内或小于1毫秒的时间戳精度。这种精度等级被保留用于两种基本任务:音频诱发响应电位ERP任务和两个反应时间任务。在该等级下，数据采样时间戳必须在1毫秒内在输入流之间同步。例如，对于音频ERP任务，音频音调的开始必须发生并且在与音频音调共同发生的EEG数据采样的1毫秒内被加上时间戳。第二示例是反应时间任务。在此，鼠标键按压事件、键盘按压事件或触摸屏事件相对于屏幕上的图像的开始必须以1毫秒的精度被加上时间戳。由于人类反应时间以毫秒或亚毫秒量级来度量，所以该精度等级极其重要。[0014]目前，该精度等级在PC上可行。然而，假定触摸事件与每秒60帧的垂直同步中断一其对应于16毫秒分辨率一同步，则该精度等级在Android平板电脑上不可行。[0015]期望使具有标准而非实时操作系统例如Windows、Linux或iOS的商用PC机上的刺激和探针的呈现同步，使得可以实时获取数据。本发明解决这些需求以及本领域中的其他需求。发明内容[0016]本发明包括一种使具有标准而非实时操作系统例如Windows、Linux或iOS的商用PC机上的刺激和探针的呈现与嵌入式微控制器中的实时数据采集的精确时钟同步的系统。还可以提供配对的发射器接收器以及在处理设备上实现的编码软件，以使在其输入端接收生物传感器输出的处理设备的操作系统与由处理设备的实时时钟设置的实时环境在时间上精确同步。[0017]该系统的示例性实施方式通过提供以下编码方案使具有操作延迟的PC与具有实时时钟的支持生物传感器的微控制器同步:捕获受试者的绝对反应时间并且将受试者的反应时间从具有延迟的PC发送至具有实时时钟的微控制器。该系统包括:发送器，其从具有延迟的刺激信号;输入设备，其指示受试者对刺激信号的响应;编码电路，其适于对刺激f曰可和受试者对刺激彳曰号的响应之间的时间差异进行编码;发射器，其适于发送表示受试者的反应时间的编码差异信号；以及互补接收器，其适于检测编码差异信号。该接收器包括对编码差异信号进行解码以确定受试者的反应时间的解码电路，并且该接收器将受试者的反应时间提供至具有实时时钟的微控制器以与接收的生物传感器数据例如EEG数据进行同步。[0018]在示例性实施方式中，发射器包括可见光LED、超声换能器、红外（IRLED、可听声扬声器、可听声换能器、蓝牙发送器收发器、Wi-Fi发送器收发器、ZigBee发送器收发器或AM发送器收发器或FM发送器收发器，而互补接收器包括可见光光电二极管、可见光光电晶体管、超声接收器麦克风、红外（IR光电二极管、红外光电晶体管、可听声麦克风、蓝牙接收器收发器、Wi-Fi接收器收发器、ZigBee接收器收发器、规接收器收发器SFM接收器收发器。[0019]输入设备可以是向编码电路提供输入的鼠标。该编码电路还响应于来自发送器的刺激信号并且将差异信号编码为开关OnOff键控无线信号，该开关键控无线信号被提供给发射器以无线传输至互补接收器。在示例性实施方式中，编码电路还可以将鼠标左击编码为一个键控脉冲而将鼠标右击编码为两个键控脉冲。[0020]在示例性实施方式中，互补接收器位于受试者的EEG头戴式耳机处。EEG头戴式耳机包括解码电路和用于使受试者的反应时间与由EEG头戴式耳机收集的EEG数据同步的微控制器。在这样的实施方式中，发射器可以包括可听声扬声器，以及接收器可以包括受试者的耳塞，其中耳塞将接收的声音信号提供至解码电路。EEG头戴式耳机还可以适于包括手指敲击输入设备作为输入设备。[0021]在其他实施方式中，输入设备可以为触控笔，以及具有延迟的PC可以为平板PC。附图说明[0022]参照以下附图可以更好地理解本发明的实施方式，在附图中：[0023]图1是示出了当微处理器在实时环境中从多个传感器收集生物传感器数据时用于任务探针显不和刺激的PC的示意图。[0024]图2是使用发射器接收器对LED光电二极管）、超声换能器us接收器、红外LED光电二极管、可听声麦克风、蓝牙模块对以使PC操作系统的抖动和延迟与微处理器的实时数据收集同步的示意图。[0025]图3是概括使用发射器接收器对LED光电二极管）、超声换能器US接收器、红外LED光电二极管、可听声麦克风、蓝牙模块对或任何其他“收发器丨”和“收发器2”以使PC操作系统的抖动和延迟与微处理器的实时数据收集同步的示意图。[0026]图4是使用整体同步系统来减小商用PC和基于微控制器的采集系统内的实时数据采集的多模式采集之间的抖动和延迟的示意图。[0027]图5是包括计算机屏幕上的独特的视觉刺激的规格的PC的示意图。[0028]图6是适用于使PC的抖动和延迟与基于实时数据收集微控制器的系统同步的电子电路的示意性框图。[0029]图7是使用计算机鼠标或其他人机接口设备内的快速开关来实现PC与基于实时数据收集微控制器的系统的同步以及两者之间抖动和延迟的减小的示意图。[0030]图8是示出了PC与实时数据收集微控制器的时间同步的示意图，其中上时间迹线示出了受试人的动作，而下时间迹线示出了以高频传输无线信号，无线信号与受试人的交互的上升沿和下降沿相对应。[0031]图9是使用具有实时微控制器的电子模块中的电路以与其他数据流同步地添加另一数据流的示意性框图，但该数据流以高时间精度从与PC相关联的硬件软件接收。[0032]图10是PC与实时数据收集微控制器的时间同步的示意图，其中上时间迹线示出了受试人的动作，而下时间迹线示出了放置在受试者的脑壳上的EEG生物传感器中的同步信号。[0033]^11是作为高精度实时同步数据的来源的、安装在头部定位的电子模块内的、直接从PC显示器捕获光的光传感器和透镜的无线光电配置的示意性框图。[0034]图12是嵌入在触控笔或其他人机接口设备中的实现PC与包括生物传感器和基于实时的微控制器的远程电子模块之间的有线同步以及二者之间的抖动和延迟的减小的快速开关的不意图。[0035]图13是作为由远程实时微控制器收集的多模生物传感器系统的另外的输入的声音换能器或扬声器与麦克风的无线声电配置的示意框图。i[0036]图14是连接至高响应频率或短延迟电路以无线发送音频信号在耳塞或人类声源中的出现和消失的耳塞或其他声音换能器对的有线声电配置的示意框图。[0037]图15是使用本地加速度计或运动处理单元可能具有陀螺测试仪）以使受试人能够敲击或提供其他物理机械的输入信号以指示对视觉、听觉或其他感官刺激或认知过程的响应的示意图。[0038]图16是PC与实时数据收集微控制器的时间同步的示意图，其中上时间迹线示出了受试人相对于视觉或听觉刺激的动作，由此鼠标左击或触摸事件被记录为单个脉冲以及鼠标右击或触摸事件由双脉冲来编码，而下时间迹线示出了被馈送至无线收发器以传送至被连接至收集数据的远程实时微控制器的收发器的高速振荡器的同步信号。具体实施方式[0039]下面将参照图1至图16详细描述本发明。本领域的技术人员应当理解的是，本文中关于这些图给出的描述仅用于示例性目的，而并不意在以任何方式限制本发明的范围。关于本发明的范围的所有问题，可以通过参考所附权利要求来解决。[0040]定义[0041]“到头皮的电极electrodetothescalp”表示包括但不限于需要下述项的那些电极:凝胶、干电极传感器、非接触式传感器以及对由电磁装置引起的电势或表观电感应电势进行测量的任何其他装置。[0042]“监视脑和神经系统”表示包括但不限于正常健康和衰老的监护、脑功能障碍的早期检测和监视、脑损伤和恢复的监视、监视疾病发作、发展以及对于治疗的响应，对于治疗方法和药物治疗方法的发现和优化而言，包括但不限于监视研宄中的化合物和注册的药物制剂，以及监视非法物质以及在驾驶、参加体育运动或从事其他受管制行为时这些非法物质的存在或对个体的影响。[0043]本文所使用的“医学疗法”旨在涵盖具有潜在医学效果的任何形式的疗法，包括但不限于:任何药物剂或药物治疗、化合物、生物制剂、医学设备疗法、运动、生物反馈或其组合。[0044]“EEG数据”表示包括但不限于:原始时间序列、傅立叶变换或其他变换至频域之后所确定的任何频谱特性、非线性分析之后的任何非线性特性、任何小波特性、任何汇总生物特征变量以及其任意组合。[0045]本文所使用的“感官和认知挑战”旨在涵盖：（对五种感官的）任何形式的感官刺激、（对精神的认知挑战和其他挑战例如呼吸co2挑战、虚拟现实平衡挑战、膝跳反射挑战等。[0046]本文所使用的“感官和认知挑战状态，，旨在涵盖在暴露于感官刺激和认知负荷挑战期间脑和神经系统的任何状态。[0047]本文所使用的“电子系统”旨在包括但不限于:硬件、软件、固件、模拟电路、DC耦接电路或AC耦接电路、光学电路、数字电路、FPGA、ASICS、视觉显示器、音频换能器、温度换能器、嗅觉生成器和气味生成器或上述项的任意组合。[0048]“谱频带（spectralband”表示但不限于标准文献规约中普遍接受的定义，使得PSD的频带通常被分成S频带（f4Hz、0频带（4Hz〈f7Hz、a频带8Hzf12Hz、P频带（12Hzf30Hz和y频带（30Hzf〈100Hz。对于该领域中的所有从业者来说，这些频带的确切边界受制于某些解释，但不认为是硬性规定。[0049]“校准”表示将已知信号输入到系统中并且调整内部增益、偏移或其他可调参数以将系统带入再现性的定量状态的过程。[0050]“实施质量控制”表示使用已知输入信号对系统进行评估并且验证系统的输出与预期一致。此外，验证已知输入基准信号的输出构成了一种形式的质量控制，其确保系统在从受试人收集数据块之前或恰在从受试人收集数据块之后都处于良好的工作状态。[0051]“生物标记”表示生物或生理功能或过程的客观度量。[0052]“生物标记特征或测定值”表示对原始底层时间序列数据的一些方面进行表征的变量、生物标记、测定值或特征。作为客观量度，这些术语是生物标记的等同物，并且可以互换使用。[0053]“非侵入地”表示不需要穿透受试人的皮肤或组织。[0054]“诊断”表示诊断的多个预定用途中的任意一个，包括:将受试者分为分类组;在与其他附加信息一起使用时辅助诊断;不存在先验原因时以高水平进行筛选;用作预后标记；用作疾病或损伤进展标记;用作治疗响应标记或甚至用作治疗监测终点。[0055]“电子模块”或“EM”或“可重复使用的电子模块”或“REM”或“多功能生物传感器”或“MFB”表示能够用于在不同时刻记录来自同一受试者或多个受试者的生物信号的电子模块或设备。同样的术语还表示能够使用一次然后被丢弃的可弃置型电子模块，随着微型化变得越来越普遍以及生产成本降低，该可弃置型电子模块在未来会非常常见。电子模块可以仅具有一种感测功能或多种多于一种感测功能，其中后者（多于一种）比较常见。所有这些术语是等同的，并且不限制本发明的范围。[0056]“生物信号biosignals或biosignals或bio-signals”表不从待评估的受试人直接得到或从受试人间接得到的任何直接或间接的生物信号测量数据流。出于说明目的的非限制性示例包括从头皮直接记录或从头皮非接触式记录的EEG脑波数据、核心温度、从体戴式加速度计、陀螺仪和磁罗盘获得的物理运动或平衡、来自用于捕获个体声音的麦克风的声学声音；来自前置相机的相机图像流、来自脉搏血氧仪的心率、心率变异性和动脉血氧、沿皮肤测量的皮肤电导Galvonic皮肤电导电阻，也称为皮肤电活动）、被记录为键盘敲击事件、鼠标点击事件或触摸屏事件记录的认知任务信息。还存在很多要被记录的其他生物信号。[0057]“微处理器”或“微控制器”表示任何面向计算的硅或包括具有或不具有直接存储RAM的微处理器的其他集成电路技术，作为非限制性的说明示例，包括来自飞思卡尔、意法半导体或其他制造商的16位TIMSP430或32位ARMCortexM0或M4微控制器。[0058]“具有延迟的抖动PC”表示具有下述操作系统的任何商用计算设备，所述操作系统能够离开去做用户无法控制的活动和任务例如垃圾收集），而不被认为是嵌入式微控制器领域公知的“实时操作系统，’（RTOS。这将包括大部分的商用PC，包括运行微软公司的Windows、Linux和谷歌公司的Android操作系统或苹果公司的i〇S操作系统的标准版本的台式电脑、膝上型计算机、平板电脑和智能手机。安装有实时操作系统的设备排除在外，由此，所有的事件控制提供给工程师和用户，而没有给设备制造商和操作系统的创造者保留事件控制。[0059]“实时时钟”表示形成高精度和高准确度时间设施的任何计时实现，该时间设施允许通过固件或软件以低计算开销确定事件的时间戳。作为非限制性示例，高精度可以被理解为小于0•1毫秒的计时间隔，而高准确度可以被理解为±5PPM。[0060]具有用于在脑相关问题的定期生物传感器评估时进行刺激和记录生理和脑响应的多个换能器的系统[0061]本发明的系统和方法包括用于进行刺激和记录脑和身体的生理反应以评估其健康和功能的多个换能器。该系统的核心是能够根据非侵入地放置在头皮上或头皮附近的电极直接记录脑波活动。此外，可以从测量以下项的换能器中得到关于脑健康和功能的另外的信息:仅举几个非限制性的另外的生物信号测量数据流示例，位置和运动、温度、诸如心率、心率变异性和动脉氧的心血管性能、以及认知信息、语音、眼球运动和表面皮肤电导。通常需要将该系统带至受试人，带出医院或医生的办公室，以及使得能够在家里或体育场或格斗剧场进行数据收集，从而以轻巧且便携的形式要素提供对脑健康和功能评估的可访问性。此外，有利的是，具有与该系统相关联的最低成本，使得可以在全球各地使用该系统来帮助需要脑健康和功能评估的人。[0062]这些问题的解决方案包括创建以下系统，该系统包括身戴式或身体接近式电子模块EMS或可重复使用的电子模块REMS，其能够记录生物信号测量数据流生物传感器数据）以及将刺激以各种感官和认知挑战和任务的形式呈现给受试人。具体地，一个这样的电子模块EM或可重复使用的电子模块REM可以被放置在头部附近，并且在不接触人体的情况下反复使用或者在与人体直接接触的情况下被处理掉。_3]外围PC与具有传感器输入的微控制器之间的精确同步需求[00M]外围计算机系统通常是膝上型计算机或平板PC，但是也包括智能电话和其他中间形式要素）用于管理受试人的脑健康评估，其包括记录生理参数和生物传感器数据流的各种生物传感器。也可以包括对受试者在呈现有感官刺激（即视频、声音时的反应时间的时间测量，并且在经由外围计算机的时钟来测量刺激呈现与受试者的响应之间的反应时间时通过计算机或其他输入设备（即鼠标、触控笔、键盘、麦克风、加速度计等记录受试者的响应。反应时间测量的精度和可重复性通常取决于由于软件延迟和计时抖动会引入计时误差的商用多任务操作系统例如微软公司的Windows、Linux、谷歌公司的Android或苹果公司的i〇S。[0065]本发明描述了一种能够附接至外围计算机系统的成本低且实现简单的电子硬件解决方案。在一种特定实施方式中，本发明提供患者的刺激、患者的响应和从受试人流送至具有实时时钟的嵌入式微控制器的其他生物传感器数据之间的实时时间戳，从而与未被设计为实时操作系统RT0S的商用多任务0S相比能够以更高的速率小于丨毫秒并且可能快至1微秒和更大的时间精度使多个数据包同步。[0066]在示例性实施方式中，实时硬件系统包括:传感器，其检测计算机系统何时生成刺激或刺激何时被呈现给受试者;第二传感器，其感测受试者的响应；以及微控制器，其以微秒分辨率精确记录响应时间。另外，本发明向生物传感器测量系统提供同步信号，以实现生物传感器数据相对于外围计算机中的刺激响应事件的时间锁定。[0067]通常难以以比PC上的操作系统（最经常的Windows、Linux、Android或iOS的固有波动的延迟大的时间分辨率使商用PC台式电脑、膝上型计算机、或平板电脑、或智能电话）上的刺激和探针的呈现同步。本发明是一种可以通过使用各种编码方案使膝上型PC上的探针和刺激与生物传感器系统在时间上同步的解决方案。[0068]使具有延迟的抖动PC上的刺激探针与附接至具有实时时钟的嵌入式微控制器的生物传感器数据流同步的时间精确装置[0069]图1示出了本发明的一种实施方式。在该实施方式中，如果使用诸如I2C或SPI或UART的本地串行数据总线或者诸如蓝牙、WiFi或ZigBee的无线连接将附接至受试者的生物传感器阵列都集成至嵌入式微控制器的输入端，则微控制器的实时时钟可以在各种传感器数据之间保持微秒精度或更好）。具体地，可以使用流行的微控制器例如德州仪器MSP430系列或ARMCortex系列。难以做到使商用PC上的探针呈现与嵌入式微控制器的实时时钟同步。[0070]考虑图1，其中具有视觉显示探针和音频显示探针的膝上型或平板PC420经由蓝牙模块1434连接至蓝牙模块2432。多个传感器422被组合成一个，以及I2C或替代地SPI数字总线426将生物传感器数据提供至具有实时时钟的微控制器430。具有实时时钟的支持生物传感器的微控制器430经由UART接口对接至蓝牙模块2432，这完成了到蓝牙无线电装置1434的回路，蓝牙无线电装置1434为PC或平板420的一部分。[0071]可以在PC端定期地从PC420输出能够由连接至具有实时时钟的嵌入式微处理器430的传感器感测的信号。作为第一个非限制性示例，PC声卡可以发出各种频率的短20毫秒正弦波脉冲串。第一秒的第一脉冲串可以是1010Hz，使得在短20毫秒传输中可以广播20个周期。在一秒以后的下一个脉冲串中，频率可以为1020Hz，第三发射可以为1030Hz等。因此，N秒之后，频率将被编码成包含1000Hz+N*10Hz。如果N=120秒，则最后一个脉冲串将包含1000Hz+120*10Hz=2200Hz。以这种方式，附接至嵌入式微处理器的麦克风传感器可以用于精确调整可变PC操作系统的延迟。[0072]一般而言，将信息从外围PC传送至微控制器需要能够从PC被发送至微控制器的能量。该能量在硬连线的情况下可以为电信号的形式，或者替代地可以为光光子）、声波、无线电传输RF的形式。还可以设想其他形式的能量。衍生形式还可以进一步被分段，例如光子可以是可见光或紫外线或红外线。在声波情况下，声波可以是人听得见的声波或超声波。[0073]在图2中可以看到替选实施方式，在该替选实施方式中可以使用附接至PC520的发射器522中任之一来发射能够由直接连接至具有实时时钟和操作系统的支持生物传感器的微处理器微控制器530的传感器526检测的能量。在示例性实施方式中，附接至PC520的LED用作发射器，而光电二极管或其他光接收器附接至嵌入式微控制器530。与基于声音的编码方案类似，基于光的编码方案可以将从PC到一个专门包括的传感器的基准信号调制成微处理器530的输入，从而独立地和精确地测量PC520上的探针刺激与记录的生物传感器信号在时间上的相对位置。由于光比声音传得更快，因此这将更精确，但并不一定需要。[0074]替选实施方式是自明的，并且包括通过超声换能器使用20KHz-50KHZ范围内的超声波，该范围的超声波人类听不见，但是容易使用现代发射器和接收器来广播和测量。可以将小型发射器装置插入到USB、耳机输出端和PC520的其他模拟和数字输出端，然后将其耦接至微处理器530中包括的特定生物传感器，以使PC与记录生物传感器阵列时间上同步。[0075]替选实施方式包括使用红外LED波长小于眼睛能看到的波长和接收所发送的光的适当的IR光电二极管、可听声和可听声麦克风或甚至第一蓝牙无线电装置1和第二蓝牙无线电装置2。[0076]如在图3中可以看到，这种配对的发射器--接收器方法可以通过包含附接至具有延迟的PC520的收发器1532和附接至实时嵌入式微处理器530的收发器2534来概括。[0077]视觉刺激一鼠标点击响应硬件[0078]如图4所示，视觉刺激和鼠标点击响应计算机系统的硬件包括光传感器566即光电二极管、光电晶体管、光电管、光敏电阻器），其附接至计算机屏幕570即LCD、触摸屏）。光传感器566被定位在屏幕的角落，使得它不阻挡计算机屏幕的主视图。光传感器566可以借助于吸盘、夹子、胶带或其他装置来附接。光传感器566将被遮蔽以防止房间杂散光照射在检测器上，以确保该传感器仅检测来自计算机显示器的光。[0079]当向患者呈现视觉刺激时，在光传感器566的影响下，小点568也同时被照射在计算机显示器570上。光传感器信号580将由放大器582图6进行放大并且通过电压比较器584进行脉冲成形。基准电压583设置光强度阈值。该基准电压可以通过来自微控制器586的模拟输出来自动调整。光传感器580和电压比较器584的电路向微控制器586呈现精确触发信号，由此用信号表示视觉刺激的开始时间。微控制器将立即激活数字输出588逻辑高来用信号表示刺激的开始。然后，无线发送器590将数字输出588提供给天线592以供传输。[0080]为了感测病人的响应，使用定制鼠标572图4。微控制器将监测计算机鼠标的开关触点600图7。当受试者通过点击鼠标键来响应刺激时，微控制器将数字输出588复位成逻辑低，以用信号表示患者的反应响应发生的精确时间。数字输出610图8的脉冲宽度表示受试者的反应时间，以及上升沿612图8指示视觉刺激的开始时间。[0081]选通数字开关脉冲588将用于接通关断无线发送器559,其将开关键控00K调制载波发送至匹配的接收器578图9。接收器578对该载波进行放大632和解调630,由此将反应时间脉冲的数字副本616图8呈现给生物传感器数据收集微控制器。该生物传感器数据收集微控制器将使用生物传感器数据646图10给该数据加上时间戳。[0082]无线发送器接收器对可以是如下所述的在RF频谱中操作的发送器、在红外光谱中操作的脉冲红外光或在超声声谱中操作的超声脉冲。[0083]RF链路[0084]用于RF无线链路的硬件可以包括在433MHz的RF频段操作的LTNX公司的TXM-433-LR射频发送器和RXM-433-LR接收器对。该小型集成电路实现RF链路的简单部件数少的解决方案。http:www.linxtechnologies.comresourcesdata-guidestxm-xxx-lr.pdf〇替选选择包括与在868MHz和915MHz的频段可操作的ST4313或射频解决方案AM110C1-315配对的芯科科技公司（SiliconLabs的Si4010。甚至可以在配对中使用2.4GHz的无线发送器例如北欧的nRF24L01+。蓝牙收发器、ZigBee、ANT及其他也是本发明的实施方式。甚至在配对中可以采用Wi-Fi模块例如ESP8266ffi_Fi。[0085]红外链路[0086]用于红外线无线链路的IR发送器硬件可以包括以940nm的红外波长操作并通过微控制器在36KHz的载波频率下启动关断pUlsedOnOff的威世半导体TSAL4400红外（IR发光二极管LEDAttp:www•vishay•comdocs81006tsal4400•pdf。作为非限制性示例，IR接收器硬件可以包括具有消除背景噪音的36KHz带通滤波器的威世半导体TS0P6236。http:www_vishay.comdocs82463tsop62.pdf。也可以是VS1838TL和TL1838或VS1838B通用接收头。[0087]超声链路[0088]用于超声链路的超声发送器硬件可以包括利用微控制器在4〇KHz的声频率下操作以生成40KHz载波的村田电子MA40S4S超声发送器。http:www.murata.com~mediawebrenewalsupportlibrarycatalogproductsk70e.ashxD超声接收器硬件可以包括村田电子MA40S4R接收器。超声空间中的替选发送器接收器对包括HC-SR04发送器与US-015接收器，以及TCT40-16T发送器与TCT40-16R接收器。[0089]硬连线链路[0090]传输链路还可以是生物传感器头戴式耳机和刺激响应电路之间的硬连线连接。在这种配置中，可以使用光隔离电路来确保患者的安全。[0091]测试号识别校准[0092]可以通过使用附接至计算机屏幕570的两个或更多个光传感器容易地发送开始患者的测试之前的前置码传输。通过以二进制格式点亮适当的点阵列，微控制器可以确定哪些测试即将发生并且将该信息发送至EEG数据收集微控制器。[0093]因此，在图4所示的实施方式中，一种用于使具有视觉显示器570的具有延迟的抖动PC560与受试者上的包括嵌入式微控制器的头戴式电子模块576同步的系统。在该特定实施方式中，发射器是视觉显示器570的特定区域568,该特定区域568发射由光电二极管或光电晶体管566接收的光，所述光电二极管或光电晶体管566被连接到电子电路564,电子电路564包括编码方案562,编码方案562将编码数据无线发送至由受试者佩戴的电子模块576中的接收电路578。另外，经由连接574直接接线的鼠标572的鼠标点击的精确计时通过电子电路564输入至该系统。[0094]现在可以更详细地描述系统的各个部件。如图5所示，具有视觉屏幕570的PC560具有特定关注区域568,该关注区域568负责生成与PC视觉显示器570上显示的并且作为探针呈现给受试者的其他对象571很好地同步的基准光信号。[0095]图6示出了接线到电子电路564的光电二极管或光敏电阻器580的细节，电子电路564包括放大器582,放大器582的输出连接至电压比较器584,电压比较器584查看阈值基准583并且在微控制器586中将两者进行比较，微控制器586具有选通开关输出588,其移至无线发送器590以经由天线592输出。[0096]图7示出了计算机鼠标572的细节，计算机鼠标572具有在其制造中包括的高速精密开关600，使得鼠标左键和右键602可以经由到受试者样式嵌入式微控制器的有线接口或无线接口的直接链路574被编码。[0097]图8示出了编码方案562的详细视图，由此在上迹线看到随着沿x轴的时间变化的幅值的图形表示。在上迹线的最左边可以看到视觉刺激612开始，然后在点击鼠标响应时间614结束，从而产生测试1反应时间610。在下迹线中，可以看到发射器的为相对高频率的开关键控无线信号形式的输出，以实现在确定视觉刺激开始ei2和受试者的鼠标点击响应结束614的精确计时，从而通过键控高频率无线信号的存在和持续时间对测试1反应时间进行编码。在上迹线的右侧，可以看到第二测试反应时间618并且在其下面可以看到其相应的键控高频无线信号620,其中通过键控高频无线信号620的起始和终止对试验的反应时间618的持续时间进行编码。[0098]图9提供了更详细地观察具有无线接收器的EEG头戴式耳机或戴在头上的其他电子模块576，该无线接收器用于捕获与EEG数据、加速度数据、脉搏血氧数据和基于任何其他头戴式生物传感器的信号同步的无线反应时间信号。可以在受测者576佩戴的电子模块内看到接收器电路578,接收器电路578包括接收天线634,接收天线634附接至放大器632,放大器632由解调器630来解调。[0099]图10示出了受试者的反应时间信息如何与具有实时时钟的微控制器中的基于生物传感器的信号例如EEG信号精确同步。该方案580在上迹线中示出了来自受试者与具有延迟的抖动PC的交互的数字信号的随着x轴上的时间变化的y轴上的幅值。如前所述，诸如视觉刺激的事物呈现在642处开始，以及受试者将会具有事件或响应，在此示出为非限制性的鼠标点击响应644,因此产生视觉刺激642与响应644之间的差异，该差异构成测试1反应时间640。然后该数字信号与在本示例中示出为非限制性的EEG信号的基于生物传感器的连续信号紧密同步。与图10的左侧类似，在图10的上迹线右侧可以看到有较长的响应测试2反应时间648连同同步的并且与下迹线右侧对应的生物传感器信号650,在该情况下生物传感器信号650为EEG信号。[0100]在替选实施方式中，图11示出了安装在EEG头戴式耳机或直接从计算机LCD或视觉显示器捕获光的受试者佩戴的电子模块中的光传感器662和透镜660。在该情况下，来自由具有延迟的抖动PC的视觉显示器发出的光经由透镜660直接收集在光电二极管或光电晶体管662中。光电二极管或光电晶体管信号被耦合至放大器664,放大器664连同阈值基准666连接至电压比较器668，使得微控制器670可以因此确定从具有延迟的抖动PC收集的光何时上升超过预设阈值，该预设阈值指示受试者对其响应的探针或刺激的呈现。该实施方式具有以下优点:在具有延迟的抖动PC附近不需要另外的硬件，但是具有另外的要求：由具有延迟的抖动PC的视觉显示器发出的光被接收并且可以通过透镜660收集。[0101]图12示出了本发明的替选实施方式，该实施方式不包括计算机鼠标而是包括在该情况下与线686连接的特定触控笔684,由此触控笔684具有嵌入在触控笔的末端的高速开关682，使得每次触控笔按压到平板PC或视觉显示器680上时，以高速开关682的开启和关闭对精确计时进行编码。可以理解，这种人类接口设备与鼠标不同并且可以在某些情况下提供更自然的交互，从而更好地评估受试者对视觉显示器上的刺激探针或经由声卡通向受试者的听觉皮层的听觉刺激的响应的相对计时。[0102]发送器和接收器之间的听觉联动[0103]本发明也可以用于其他类型的刺激例如听觉刺激。在该配置中，使用附接至计算机的扬声器格栅grill的微型麦克风694图13来替换光传感器，该扬声器格栅用信号表示听觉刺激被呈现给患者的确切时间，这与计算机的操作系统计时抖动无关。如果使用耳塞而不是扬声器，可以在源生成声卡和耳塞之间插入加密狗。如图13中所示，可听声用作用于同步的能量传送。在该情况下，可听声麦克风694被包括为在由受试者佩戴的电子设备模块中的或本地定位在外围PC上的、从用作发射器的PC扬声器69〇产生的人类可听声捕获声音的接收器。更精确地说，该计算机扬声器690发出声波作为能量源692，能量源692由麦克风694在受试人上接收，麦克风694的输出端连接至电子电路7〇8,电子电路7〇8包括放大器696,放大器696与输入阈值基准698—起耦接至电压比较器7〇〇。然后，电压比较器700的输出转到微控制器702，微控制器702具有开关选通输出，该开关选通输出由无线发送器704接收作为输入，无线发送器机704的输出通过天线706来生成。该实施方式的优点在于，由PC扬声器690生成的声音被均匀地接纳，使得该声音易于由受试者佩戴的麦克风694检测。这种方法的潜在问题是声音对受试者的中枢神经系统的影响。[0104]在图14中，示出了用于检测通过耳塞递送的可听声的替选实施方式。在该实施方式中，在接线盒714处拦截要进入耳塞712的有线声音，接线盒714经由连接710对电声音信号的第二副本进行划分，连接710以类似类型进入电子电路708。在该情况下，当声音安静，幅值相对于阈值基准将为低，并且当声音实际上被接受时，检测到的信号将大于阈值基准，这将以高精度和相对短延迟同步地选通和关断无线发送器，以实现耳塞712的可听刺激探针与由具有实时时钟的微控制器收集的基于生物传感器的数据的其余部分之间的同步无线传输。[0105]其他类型的响应设备[0106]本发明也可以与除了计算机鼠标以外的其他患者响应设备一起使用。在图12中，例如，对于平板PC680，本发明可以被并入具有开关682的触控笔684，以检测触控笔何时接触PC的触摸屏的屏幕。在另一种实施方式中，触控笔可以具有不同着色的两个末端以唯一地标记每个末端。根据所呈现的刺激，可以按压着色标记有A并且包含微型开关的末端。对于另一任务，可以按压标记有B的替选末端，从而区分受试者的选择。雪茄形状的形式要素可以替选地用于坡度或加速度计内，以测量受试者的响应。可以经由陀螺测试仪获得角旋转，以进行6轴而不是仅3线性轴运动分析从而对受试者的运动微妙细化。[0107]此外，对刺激的响应也可以是受试者眨眼。在这种布置中，位置Fpl和或Fp2处的EEG信号会很容易直接获得眨眼响应。[0108]如在图15所实现的，如果加速度计被并入生物传感器头戴式耳机电子模块720或邻近于生物传感器头戴式耳机电子模块720放置，则对刺激的响应也可以是患者的头部倾斜。还可以利用手势检测，由此运动处理单元加速度+专门的微控制器722被用作为事件标记器，使得一次物理敲击对一种类型的事件进行编码，而连续两次物理敲击对第二类型事件进行编码。更具体地，替代使用鼠标点击，右敲击一次，左敲击两次。[0109]图I5的这种配置的优点在于，受试者仅需敲击他们的头部，以向嵌入式微控制器722指示以下响应:指示他们听到了什么、看到了什么或其他感官和认知输入。[0110]用于二进制和更多选择的其他编码方案[0111]图I6示出了以下替选实施方式，其包括将鼠标左击或右击事件或右触摸屏事件或左触摸屏事件编码成开关键控无线信号的替选手段，在此鼠标左击被被编码为单输出脉冲而鼠标右击被编码为双输出脉冲。在该方案中，可以看到上迹线示出了数字信号的随着时间变化的幅值，并且在上迹线精确同步的正下方是开关键控无线信号的随着时间变化的幅值输出。当视觉刺激或听觉刺激呈现在732处开始时，该视觉刺激或听觉刺激由受试者通过鼠标点击一在这种情况下响应734—来感知，并且时间差被示出为测试1反应时间730。在这结束时，如果鼠标左键被按下，则数字系统736表达单个脉冲。在左下迹线中，可以看到，如750所示，开关键控无线系统在刺激呈现开始和受试者的鼠标响应点击之间具有高幅值，以及在该开关键控无线信号之后是单个脉冲的持续时间输出74S。这种后续输出脉冲对这是鼠标左键而不是鼠标右键的事实进行编码。类似地，在右手侧的上迹线中，可以看到由鼠标点击响应740—在这种情况下鼠标右键响应一结束的测试2反应时间738,所以固定宽度能量的两个脉冲742被标记在反应时间之后。这可以在右下迹线被可视化为以开关键控无线信号746对反应时间进行编码，其中在鼠标点击响应中，上升沿指示视觉刺激的开始而下降缘指示对视觉刺激开始的响应，但是在该情况下在开关键控无线信号746之后是两个能量脉冲744,从而对这是右手侧鼠标键按压而非左手侧鼠标键按压的事实进行编码。本领域的普通技术人员可以设想其他类似的方案，由此以另外的能量脉冲的频率或者以多个能量脉冲或者在该情况下实际数目的能量脉冲的幅值对另外的信息进行编码。[0112]本领域的技术人员还将理解，本发明可以适用于其他应用，并且在不偏离本发明的范围的情况下可以对本发明进行修改。例如，可以在工业应用中使用本文所描述的具有延迟的抖动PC，以及远程传感器和嵌入式微控制器可以在服务器上、在云中、在电子模块中或在本地PC、平板PC、智能电话或定制手持设备上。因此，本发明的范围并不意在受上述示例性实施方式限制，而是仅由所附权利要求书限制。

权利要求：1.一种用于使具有操作延迟的PC与具有实时时钟的支持生物传感器的微控制器同步的系统，包括：发送器，所述发送器从所述具有延迟的PC发送刺激信号；输入设备，所述输入设备指示受试者对所述刺激信号的响应；编码电路，所述编码电路适于对所述刺激信号和所述受试者对所述刺激信号的响应之间的时间差异进行编码；发射器，所述发射器适于发送表示所述受试者的反应时间的编码差异信号；以及互补接收器，所述互补接收器适于检测所述编码差异信号，所述互补接收器包括对所述编码差异信号进行解码以确定所述受试者的反应时间的解码电路，所述接收器将所述受试者的反应时间提供至所述具有实时时钟的微控制器以与接收的生物传感器数据进行同步。2.根据权利要求1所述的系统，其中，所述发射器包括可见光LED、超声换能器、红外IRLED、可听声扬声器、可听声换能器、蓝牙发送器收发器、Wi-Fi发送器收发器、ZigBee发送器收发器或AM发送器收发器或FM发送器收发器。3.根据权利要求2所述的系统，其中，所述接收器包括可见光光电二极管、可见光光电晶体管、超声接收器麦克风、红外（IR光电二极管、红外光电晶体管、可听声麦克风、蓝牙接收器收发器、Wi-Fi接收器收发器、ZigBee接收器收发器、AM接收器收发器或FM接收器收发器。4.根据权利要求1所述的系统，其中，所述输入设备为鼠标，以及所述编码电路响应于来自所述发送器的所述刺激信号和来自所述鼠标的对所述刺激信号作出响应的输入信号。5.根据权利要求4所述的系统，其中，所述编码电路将所述差异信号编码为开关键控无线信号，并且将所述编码差异信号提供至所述发射器以无线传输至所述互补接收器。6.根据权利要求5所述的系统，其中，所述编码电路将鼠标左击编码为一个键控脉冲，而将鼠标右击编码为两个键控脉冲。7.根据权利要求1所述的系统，其中，所述互补接收器位于所述受试者的EEG头戴式耳机处，所述EEG头戴式耳机包括所述解码电路和用于使所述受试者的反应时间与由所述EEG头戴式耳机收集的EEG数据同步的所述微控制器。8.根据权利要求7所述的系统，其中，所述发射器包括可听声扬声器，以及所述接收器包括所述受试者的耳塞，所述耳塞将接收的声音信号提供至所述解码电路。9.根据权利要求7所述的系统，其中，所述EEG头戴式耳机包括手指敲击输入设备作为所述输入设备。10.根据权利要求1所述的系统，其中，所述输入设备为触控笔，以及所述具有延迟的PC为平板PC。

百度查询： 塞罗拉公司;亚当·J·西蒙 使有操作延迟的PC与有实时时钟的微控制器同步的系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD