CN101939740A - 在集成语言导航服务环境中提供自然语言语音用户界面 - Google Patents

在集成语言导航服务环境中提供自然语言语音用户界面 Download PDF

Info

Publication number
CN101939740A
CN101939740A CN2008801265252A CN200880126525A CN101939740A CN 101939740 A CN101939740 A CN 101939740A CN 2008801265252 A CN2008801265252 A CN 2008801265252A CN 200880126525 A CN200880126525 A CN 200880126525A CN 101939740 A CN101939740 A CN 101939740A
Authority
CN
China
Prior art keywords
information
user
navigation
destination
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2008801265252A
Other languages
English (en)
Other versions
CN101939740B (zh
Inventor
麦可·肯尼维克
凯萨琳·张
L·贝尔德文
亚力·所罗门
M·特加尔弗
席特·古德高力
L·阿姆斯特隆
P·迪克里斯托
柏尼·齐墨曼
S·米纳克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
VoiceBox Technologies Corp
Original Assignee
VoiceBox Technologies Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by VoiceBox Technologies Corp filed Critical VoiceBox Technologies Corp
Priority to CN201810956617.9A priority Critical patent/CN109147781A/zh
Publication of CN101939740A publication Critical patent/CN101939740A/zh
Application granted granted Critical
Publication of CN101939740B publication Critical patent/CN101939740B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3605Destination input or retrieval
    • G01C21/3608Destination input or retrieval using speech input, e.g. using speech recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0261Targeted advertisements based on user location
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/04Segmentation; Word boundary detection
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/18Speech classification or search using natural language modelling
    • G10L15/183Speech classification or search using natural language modelling using context dependencies, e.g. language models
    • G10L15/19Grammatical context, e.g. disambiguation of the recognition hypotheses based on word sequence rules
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/18Speech classification or search using natural language modelling
    • G10L15/183Speech classification or search using natural language modelling using context dependencies, e.g. language models
    • G10L15/19Grammatical context, e.g. disambiguation of the recognition hypotheses based on word sequence rules
    • G10L15/193Formal grammars, e.g. finite state automata, context free grammars or word networks

Abstract

本发明提供一种会话式的、自然语言语音用户界面,其可以提供集成语音导航服务环境。该语音用户界面允许用户以自然语言提出关于各种导航服务的请求,并且还可以按照合作的、会话的对话方式与用户交互,来解析该请求。除其他以外,通过动态的上下文的认识、可用的信息源、域知识、用户行为和偏好、以及外部系统和设备,该语音用户界面可以提供集成的环境,在该环境中用户能够使用自然语言会话式地进行讲话,以发出查询、命令、或与该环境中提供的与导航服务有关的其他请求。

Description

在集成语言导航服务环境中提供自然语言语音用户界面
技术领域
本发明涉及一种自然语言语音用户界面,该语音用户界面能够促进在集成语音导航服务环境中的合作的、会话式交互,并且具体而言,本发明涉及一种其中用户能够使用会话式、自然语言查询或命令来请求导航服务的自然语言语音用户界面。
背景技术
随着技术进步,消费电子产品在日常生活中有扮演越来越重要的角色的趋势。从而,用户倾向于期望他们的电子设备(例如,现代移动电话、导航设备、个人数字助理、便携式媒体播放器、以及提供了核心应用以外的大量功能的其他设备)具有更大的功能性、可移动性以及方便性。然而,更大的功能性通常倾向于伴随有显著的学习曲线和阻碍用户充分开发设备能力的其他障碍(例如,功能通常被隐藏在难以导航的菜单或界面之中)。此外,尽管日益增加的对于移动性的需求放大了对于简单的正在进行中(on-the-go)设备交互机制的需要,但是现有的系统通常具有复杂的人机界面。例如,现有的人机界面倾向于主要利用键盘、按键、点选式(point and click)技术、触摸屏显示器、或其他界面机制的各种组合。然而,这些界面会通常不适合于移动设备或车辆设备(例如,导航设备),这是因为在交互的速度和精力不集中的危险会引起重大问题的环境中,这些界面是不方便的。因而,现有的系统通常达不到提供简单并直观的交互机制的目的,潜在地抑制了采用某些技术的巨大市场。因而,对于以直观方式开发技术的方法有日益增长的需求。
为了解决这些和其他问题,各种现有的系统已经转向语音识别软件以简化人机交互。例如,语音识别软件可以使用户能够开发设备的那些另外可能是不熟悉的、未知的或者难于使用的应用和特征。然而,当现有语音用户界面实际工作时,它们还需要在用户的这部分上进行有效的学习。例如,现有的语音用户界面(例如,命令和控制系统)通常需要用户记住句法、词汇、短语或其他关键字或限定词以发出查询或命令。类似地,当用户可能不确定所需要的确切内容,或者设备能够提供的内容时,现有的系统不能以产生的、合作的、自然语言对话的方式来应答用户,以解析需求并推进会话。相反,很多现有的语言界面强迫用户使用预定的命令或关键字来以这些系统能够理解的方式传送请求。与之相反,对于人类交互的认知研究表明,提问或给出命令的人通常在很大程度上依赖于上下文和解答人的共有知识。类似地,解答人也倾向于依赖上下文和共有知识来告知什么会是合适的响应。然而,现有的语音用户界面没有充分地利用上下文、共有知识或其他类似信息来提供这样一种环境,在这种环境中用户和设备能够合作,通过会话的、自然语言的交互来满足互相之间的目的。
此外,在近些年中,对于全球定位系统和能够导航的设备的需求显著地增长。导航设备通常倾向于当用户在驾驶、正在进行或者在具有无需用手的界面就能够提供关键优势的其他环境中时使用。例如,用户会希望避免由于将视线离开公路而造成分心,用户还会希望与导航设备进行交互,例如,计算到目的地的路线、响应于交通状况而重新计算路线、找到本地的餐馆、加油站或其他感兴趣的地点、或者执行其他的与导航相关的任务。在这些和其他情况中,有效地处理基于自然语言语音的输入能够使得用户以更安全、更简单和更有效的方式与导航设备进行交互。然而,现有的系统通常不能够提供能够在导航和其他移动环境中提供这些优势的集成的、会话式的、自然语言语音用户界面。
现有的系统受到这些和其他的问题的影响。
发明内容
根据本发明的各个方面,与现有系统相关的各种问题都可以通过提供集成语音导航服务环境的会话式的、自然语言语音用户界面来解决。
根据本发明的各个方面,自然语言语音用户界面能够解析与导航相关的语音请求(例如,计算路线、识别位置、显示地图等)。导航应用能够向用户提供交互的、到目的地或旅途基准点的数据驱动指示,其中用户能够使用自由形式的自然语言来指定目的地或旅途基准点(例如,用户能够识别全部或部分目的地,包括具体地址、大概的附近区域、城市、地点的名称或类型、商业的名称或类型、人的姓名等)。由于自由形式的语音目的地输入会以多种不同的形式来提供,所以可以对全部或部分语音目的地输入执行后处理,以识别合适的目的地地址用于计算路线(例如,“有意义”的最近似的地址)。例如,对包含全部或部分目的地的话语进行分析,以识别一个或多个可能的地址(例如,目的地的N最佳列表)。可以对该N最佳列表进行后处理,来为可能的目的地分配权重或排序(例如,基于对应于所期望的目的地的给出的可能目的地的确定程度)。因此,可以计算从用户的当前位置到N最佳列表中的可能目的地中的权重最高的一个目的地的路线。此外,当语音目的地条目包括局部目的地时,会在一个或多个随后的语言目的地条目之上逐次提炼最终目的地。导航应用还可以提供到目的地的动态的、数据驱动的指示或路线。例如,导航应用可以访问与各种用户指定以及环境数据源相关的数据,以提供沿路线的个性化数据驱动指示,该路线可以基于从数据源取得的信息重新计算或修改。因而,可以动态地获取数据以识别可替换的路线、重新计算路线或者另外提供路线服务。此外,可以根据当前路线过滤对于给定话语的可能的答复或响应。
根据本发明的各个方面,自然语言语音用户界面会动态地产生和/或加载用于解释在话语中说了什么(例如,话语的内容)的识别语法。在动态识别语法中包含的信息可以为导航代理、自动语音识别器(Automatic Speech Recognizer)、上下文堆栈或语音用户界面中使用语法信息的各种其他部件使用。基于各种因素,通过有效地产生、更新、加载、扩展或另外构建动态语法能够避免处理瓶颈、能够减少冲突、并且能够优化使用识别语法解释话语的其他方面。例如,所产生的语法的大小会受系统中可用资源量的限制(例如,嵌入式设备或具有少量动态存储器的其他设备,受限制的语法大小会限制要占据的资源量)。在另一个示例中,动态语法的大小可以通过消除在上下文堆栈、共有知识,或其他本地资源中可用的冗余关键字、标准或其他信息来减少。因此,能够通过减少语法中的复杂状态来改进正确解释的有利程度(例如,当两个或多个元素可能会被混淆时,会消除这些元素中的一个或多个元素来减少混淆)。
根据本发明的各个方面,自然语言语音用户界面可以使用地理组块(geographical chunking)技术产生动态识别语法。可以在给定时刻确定用户的位置,以确定一个或多个地理近似(geographic proximity),该地理近似可用于为语法形成适当的拓扑域。例如,该拓扑域可以反映物理上的近似(例如,距离当前位置的距离)、民间组织(civil organization)上的近似(例如,区、州、城市、附近地区、分支、地区等)、时间上的近似(例如,从当前位置起的行进时间量)、方向上的近似(例如,基于方向行进向量)、或它们的各种组合。从而,通过将用户的地理近似映射到一个或多个拓扑域,可以在存储器中或在存储器之外剪除、扩展或交换或者另外产生和/或加载动态语法,以提供基于位置、时间、行程或其他因素的最优识别(例如,当用户从一个区域移动到另一个区域时,可以在语法中或语法之外交换信息,保证系统资源利用当前关于给定位置的信息)。
根据本发明的各个方面,自然语言语音用户界面可以包括由一个或多个拓扑域形成的动态语法,拓扑域可以被细分为多个瓦区(tile),该瓦区还可以被细分为多个子瓦区(subtile)。因此,用于构建动态语法的信息可以按照各种方式细分或加权,以确定应当在语法中包括什么信息。此外,可以将基于物理上的、民间组织上的、时间上的、方向上的或其他近似的地理组块扩展到能够设置拓扑分类的其他域中。从而,除在导航或其他依赖位置的系统中具有相关性之外,地理组块技术能够被应用在地理或位置可以是相关的其他上下文或域中。此外,被操作地耦接到语音用户界面的服务器可以分析各种形式的信息,以建立或提炼语法信息的资源。例如,当各种设备与服务器通信时,信息被传送到服务器可以用于更新近似、拓扑域、瓦区、子瓦区、对等相似性(peer-to-peer affinity)或其他语法信息。
根据本发明的各个方面,自然语言语音用户界面可以计算路线、提供到目的地的动态的数据驱动指示、提供到目的地的动态路线、执行全部或部分目的地条目的后处理、或另外提供各种语音导航服务。此外,可以使用对语音目的地条目进行逐次提炼的技术来识别目的地和/或路线,其中,除其他以外,上下文、代理自适应(agent adaptation)和共有知识都能够帮助用户使用语音命令、多模式命令或其各种组合来缩小最终目的地。然而,很显然,可以将该逐次提炼技术应用于能够通过语音或多模式命令对概括估计进行逐次提炼以缩小用户所要寻找的信息,包括各种其他的域、上下文、应用、设备或采用在此说明的技术的其他部件。
根据本发明的各个方面,自然语言语音用户界面可以通过逐渐地缩小最终目的地来允许对最终目的地的进行逐次提炼。例如,逐次提炼目的地可以模仿人类交互的方式,在人类交互方式中,可以通过交互的过程来缩小或提炼路线或目的地。例如,用户可以大致近似一个目的地,这可以导致沿着到该近似的目的地的优选路线计算路线。当在到该近似的目的地的途中时,用户和语音用户界面可以通过一个或多个随后的交互来合作提炼最终目的地。因此,用户可以使用自由形式的自然语言(例如,包括语音命令和/或多模式命令)提供全部或部分目的地输入。对应于语音目的地输入的一个或多个可能的目的地的解释可以以目的地的N最佳列表的方式进行组织。可以对该可能的目的地的列表进行后处理,以向其中的一个或多个条目分配权重或排序,从而根据全部或部分语音目的地输入确定最可能感兴趣的目的地。因此,后处理操作可以根据关于用户的共有知识、域指定的知识、对话历史、或其他因素来对可能的目的地进行排序或加权。从而,可以分析全部或部分目的地输入以识别能够计算到其路线的地址(例如,通过解析关于输入的目的地的“有意义”的最近似的地址)。随后的输入可以提供关于目的地的其他信息,并且可以反复地提炼加权的N最佳列表,直到通过逐次提炼能够识别最终目的地。从而,当已经识别出了适当的最终目的地时,就可以完成到该最终目的地的路线。
根据本发明的各个方面,自然语言语音用户界面可以包括一个或多个广告模型,用于产生和/或检测与导航系统的位置依赖广告有关的事件(例如,通过本地或远程广告引擎或经由数据信道或以其他方式产生)。例如,导航系统通常包括用于确定当前位置的各种机制(例如,全球定位系统、射频识别系统、基于到可识别的无线电天线塔或接入点的距离计算位置的系统等)。从而,位置检测系统可以在商人用来提供广告所使用的数据信道上检测与射频标识符有关的信息。商人可以经由数据信息对广告进行广播,从当导航系统处于RFID的适当附近区域之中时触发事件。从而,可以根据当前路线信息或其他上下文参数过滤与该事件有关的信息,以确定应当对其做何反应。在其他实例中,可以通过一个或多个广告合作者将广告上载到服务器,其中上载的广告可以与元数据或识别识别目标听众、位置依赖信息、或其他标准的其他描述信息相关联。在另一示例中,可以在语音用户界面处本地存储多个广告,并且推理引擎可以确定应当产生事件以向用户传送一个或多个广告的适当环境。从而,很显然,广告事件可以以多种方式产生,并且可以本地地、远程地、通过检测RFID或以其他方式产生和/或检测所述广告事件。
根据本发明的各个方面,自然语言语音用户界面可以跟踪用户与所传送的广告的交互。以此方式,可以产生基于相似性的模型,例如,以保证宣传或广告将被传送给可能的目标听众。从而,当关于用户的行为、偏好或其他特征的共有知识与和关于广告的对等相似性相关联的一个或多个标准匹配时,可以产生和/或检测到与给定广告相关的事件。在其他示例中,广告模型可以包括移动每次使用付费系统、对等本地指南或推荐、或其他形式的广告。另外,可以根据应用于各种拓扑域的映射产生各个方面的广告模型(诸如本地指南或推荐)。例如,一些类型的广告可以依赖于地理或拓扑特征,并且这种广告可以与基于地理组块的拓扑分类相关联。从而,可以根据物理上的近似、时间上的近似、方向上的近似、民间组织上的近似、或它们的各种组合来产生和/或检测各种广告事件。
根据本发明的各个方面,自然语言语音用户界面可以允许用户使用自然语言向导航设备提出请求(例如,查询、命令或其他请求)。因而,用户和导航设备可以进行合作的、会话式的对话方式接合,以解析该请求。例如,除其他事情以外,语音用户界面可以使用现有的上下文、对话历史、域知识、关于用户行为和偏好的短期和长期共有知识、噪声容忍、和认知模型,来提供集成的环境,在该环境中用户能够使用自然的语言会话地讲话,来发出能够被机器理解并处理的查询、命令或其他请求。从而,语音用户界面可以理解自由形式的人类话语,使用户不再受关于如何表达命令、查询或其他类型的请求的限制。替代地,用户能够使用自然的或不经意的讲话方式在集成环境中请求各种语音服务,其中在该集成环境中,可以使用自然语言以会话的方式控制各种设备。例如,语音用户界面可以知道与导航设备、媒体设备、个人计算机、个人数字助理、移动电话或在该环境中可用的各种其他计算设备或系统有关的数据和服务。
根据本发明的各个方面,自然语言语音用户界面可以包括接收基于语音的输入的输入机构,该基于语音的输入至少包括用户讲的话语或语言表达。输入机构可以包括能够接收基于语音的输入的适当的设备或设备组合(例如,定向麦克风、麦克风阵列、或对语音进行编码的其他设备)。可以将输入机构优化为在用户的方向中增益最大化、取消回波、零点(null point)噪声源、执行可变速率的采样、滤除背景谈话或噪音、或者另外优化编码语音的保真度。从而,输入机构可以以容忍会干扰对语音进行解释的噪音或其他因素的方式来产生编码语音。此外,在各种实现中,输入机构可以包括一个或多个其他(非语音的)输入模式,这些模式能够被处理和/或与一个或多个以前的、当前的、或随后的话语或其他基于语音的输入相关联。从而,用户能够利用,例如,触摸屏界面、尖笔/写字板界面、小键盘或键盘、或者其他输入界面来提供其他形式的输入以澄清话语,或使用其他的输入模式来提供关于话语的附加信息。例如,用户可以将尖笔或其他指示设备触摸到在触摸屏界面上显示的地图的一部分,同时还提供关于所触摸部分的话语(例如,“向我显示在这儿周围的餐馆。”)。在此示例中,可以将输入相互关联来将“在这儿周围”解释为很可能是指所触摸的地图部分,与用户当前的位置不同或具有一些其他含义。
根据本发明的各个方面,自然语言语音用户界面可以包括自动语音识别器,其处理编码语音以产生一个或多个在话语中说了什么(例如,话语的内容)的初步解释。例如,自动语音识别器可以基于动态自适应识别语法使用语音听写(phonetic dictation)来识别音素流以产生初步的解释。动态自适应识别语法可以基于字典或来自各种输入域(例如,针对语言、导航、音乐、电影、天气、各种时间或地理近似的域、或者各种其他域)的短语。因此,自动语音识别器可以产生话语的一个或多个解释,该话语可以表示为一系列的音素或音节。可以对一个或多个解释(例如,利用人类语言的语言规则或模型)进行分析来产生关于用户说了什么的初步解释的N最佳列表。然后,可以将初步解释提供给会话语言处理器,其利用共有知识、上下文信息、和各种其他信息源来产生关于实际含意、用户的意图、或话语的其他方面的智能假定。通过使用模仿人与人的日常对话的各种特征和部件对该假定进行明确地叙述,会话语言处理器可以产生关于话语的含意和意图的假定,其可以通知解析包含在话语中的一个或多个请求的处理器。
根据本发明的各个方面,除其他以外,自然语言语音用户界面可以包括上下文跟踪引擎,其针对给定的话语的创建含意。例如,上下文跟踪引擎能够管理在创建含意的一个或多个特定上下文的域代理(例如,对于给定上下文、域、系统、或应用提供功能性的可重新分配的、自适应引擎或模块)之间的竞争。域代理可以对话语的初步解释进行分析,以产生特定域的可能解释。例如,一个或多个代理可以包括自适应词汇表、概念、可得到的任务、或指定用于各域或上下文的其他形式的信息。另外,代理能够使用语音搜索引擎来针对系统中没有的信息搜索网络。可以为可能的解释分配加权排序或分数,这可用于选择代理中的“获胜的”一个代理。因此,除其他代理外,可以将代理中的获胜的一个代理指定为负责建立或推理进一步的信息(例如,基于域或特定上下文的信息)、更新共有知识、或解析话语中的请求。上下文跟踪引擎还可以保持上下文堆栈以跟踪对话主题、跟踪以前调用的引擎、评价标准、加权参数、或保持关于会话上下文的信息(例如,可以按照最近的上下文、经常使用的上下文、或在其中包括的其他信息来回移动上下文堆栈,以确定用户最有可能的意图)。通过识别上下文,或相关联地,通过识别容量、任务、词汇表、或上下文中的其他信息,上下文跟踪引擎能够提供除与话语有关的语音线索(例如,可以基于词汇在给定上下文中的含意、在对话中以前的使用情况等,消除具有多个可能含意的词汇的歧义)之外的用于建立意图的相关信息。
根据本发明的各个方面,自然语言语音用户界面可以利用各种形式的信息来允许共享关于给定话语、会话、或其他人机交互的假定和预期。例如,为了通知在语音用户界面中作出的决定,语音用户界面可以包括信息源,该信息源包含关于用户行为、偏好、或其他特征的短期和长期共有知识(例如,特定用户、全球用户、对等用户等的短期和长期简档)。短期共有的知识可以在当前的会话期间积累信息,来动态地建立语音用户界面的状态的认识(例如,以前的话语的识别文本、跨模式的用户界面操作历史、以前选择的任务或调用的查询的列表、或者其他信息)。短期知识的存储会模仿人类交互,从而在心理地适当的时间量之后某些信息会过期(例如,擦除陈旧的数据),反之可以将具有长期意义的信息添加到长期共有知识(例如,建立很可能随着时间的过去而保持不变的数据的持久稳固的认识)。从而,长期共有知识会基于随着时间积累的信息对各种特征、偏好、行为、或者关于用户的其他信息(例如,特定用户的专用语、人口状况、认知方式、经常请求的任务、喜好的主题或概念等)进行建档或建模。从而,语音用户界面可以利用各种形式的可经由上下文跟踪引擎、域代理、语音搜索引擎、共有知识、内部或外部数据库、与其他设备关联的数据、或其他的知识源得到的信息。因此,能够识别会话类型或与话语有关的目的。基于可得到的信息和会话的类型或目的,语音用户界面会尝试解析话语(例如,通过调用代理,该代理利用一个或多个应用来执行请求的任务、检索请求的信息等)。
根据本发明的各个方面,自然语言语音用户界面可以产生对句法、语法、和上下文敏感的跨模式(cross-modal)智能响应,其可以向系统产生的响应提供会话的感觉。当可用时,所产生的智能响应可以提供所解析的请求的结果(例如,关于任务的反馈、所检索到的作为查询结果的信息等)。此外,例如使用口头和/或非口头输出(例如,信息可以在显示设备上、经由听得见的警报、语言表示的输出、其他输出机构、或它们的各种组合来呈现)的结合,可以跨模式提供智能响应。此外,跨模式响应的语言表示部分(例如,通过改变音调、速度、定时、或其他变量)可以适应于用户的讲话方式,从而建立具有自然变化和个性的口头响应。还可以明确地表达智能响应来提供输出,该输出将用户引导向更可能被识别的后续响应(例如,后续的话语)。例如,当因为不明确的上下文、不能识别的词汇或短语、或者会导致不明确的或不能识别的解释的其他因素而不能解析话语时,能够制定智能响应消除上下文的歧义或从用户请求另外的信息,以澄清话语的含意。此外,当后续信息表明给定的解释或假定不正确时,会重新解释一个或多个以前的话语,来提炼上下文并更新短期或长期会话模型(例如,“不,我的意思是……”这样的话语可以表明对以前的话语解释得不正确,在此情况中,可以基于正确的解释对各种以前的话语重新进行解释,因此建立更精确的会话上下文)。从而,通过自适应机制,语音用户界面可以容忍全部或部分失败。
根据本发明的各个方面,自然语言语音用户界面可以在基于代理的架构之内提供语音导航服务。该架构可以包括多个自适应代理(例如,专门的软件、数据、内容、或其他信息,其在多个各自上下文域中提供功能、行为、服务、数据、和其他信息),其中至少一个代理提供导航服务(例如,路线计算、地图控制、位置敏感信息、数据驱动指示等)。当代理处理请求时,该代理可以自治地进行反应、自适应、和重新配置,以在各自域中提供最佳的语音服务。例如,通过随着时间建立上下文(例如,通过产生短期和长期的用户简档、与用户的会话、频繁的主题或偏好等),代理会自动地结合知识、自适应偏好、移除冲突、或执行其他自适应来提炼或优化其操作结构。响应于解析基于语音请求的各种代理,例如,代理(至少包括导航代理)的自适应可以跨越多个代理而发生。从而,自适应可以作为提供语音服务、产生推理、识别相似性(例如,在用户、对等人、团体等之间)、从外部源接收更新(例如,使用更新管理器)、或其他方式的代理的副产品会自治地发生将是显而易见的。
根据本发明的各个方面,自然语言语音用户界面可以包括用于提供语音导航服务的基于代理的架构。例如,该基于代理的架构可以包括一个或多个域或上下文指定的代理,其中至少包括导航代理。除其他以外,导航代理可以包括各种导航指定内容分组(例如,字典、可用查询、任务、命令、动态语法等)、响应列表(例如,对命令、查询、或其他请求的适当响应)、个性简档(例如,用于为系统产生的语音建立自然的感觉)、置换列表(例如,将数据置换或转换成能够被目标信息源理解的结构形式)、或各种其他形式的导航指定信息。此外,导航代理还可以与指向本地或远程数据源的指示器、与该架构中其他服务相关联提供的参数和操作数据、或者各种其他形式的信息进行关联。例如,导航代理使用的数据源可以包括与导航相关的数据、感兴趣的地点、交通、事件、停车、个人数据、对等相似性、或各种其他信息源。此外,可以通过自适应、各种模型的分析、与数据服务的通信、或其他方式来组装(populate)、扩展、剪除、或构造数据源将将是显而易见的。
根据本发明的各个方面,自然语言语音用户界面可以包括导航代理,其可以与各种信息源耦接,并且可以利用上下文、与各种其他自适应代理以及其他系统部件进行通信来提供应用导航服务。例如,导航代理可以使用与导航域有关的上下文信息,包括跟踪的主题、用户位置、行进路线、之前请求、用户界面状态、用户行为、偏好、人口统计状况、或其他特征、或者各种其他类型的上下文信息。从而,导航代理可以具有各种知识源和对解析语音导航请求可用的资源。例如,导航代理可以使用可用的知识和资源应用各种规则、策略、或其他推理技术来产生推理(例如,使用推理引擎),以产生话语的解释(例如,语音失真匹配、归纳逻辑、贝叶斯概率分析、单调或非单调推理等)。从而,导航代理能够推理在话语中没有明确提供的关键词或标准、确定对于主观的或不确定的话语的适当响应、产生事件、识别对等相似性、或者产生对解析与导航相关请求的推理。
根据本发明的各个方面,自然语言语音用户界面可以包括一个或多个推理引擎,其能够通过以前的上下文的认识、短期或长期共有知识、命令历史、车辆系统的状态、用户界面状态、和各种其他数据源产生各种推理。在各种实现中,一个或多个代理可以与各自的推理引擎相关联,所述推理引擎能够使用域指定知识、规则、策略、或其他标准产生推理。例如,推理引擎可以识别话语中没有的关键词或标准、推理意图的含意、自治地建议可用任务、或辅助相关联的代理来识别在话语中包含的查询、命令、或其他请求。另外,当使用与导航代理相关的信息源或通过产生推理不能够适当地解析信息时,可以从一个或多个其他代理、其他设备、网络信息源(例如,经由语音搜索引擎)、或以其他方式来请求该信息将是显而易见的。一旦通过一个或多个其他源识别了该信息,请求代理会适合于使得该信息随后可用。因此,架构中的不同设备、应用、系统、和其他部件可以合作地共享可用信息和服务(例如,上下文、对话历史、共有知识、地图、感兴趣的地点、联系人列表、用户或对等相似性、动态语法、可用应用、命令历史等)。从而,该架构可以提供集成语音导航服务环境,在该环境中用户能够讲出关于各种可用上下文、域、应用、设备、信息源、或它们的各种组合的自然语言请求。
根据本发明的各个方面,自然语言语音用户界面可以接受基于自然语言语音的输入来控制除与语音用户界面在其中进行操作的环境所关联的各种其他设备外的能够提供导航信息的电子设备。此外,该语音用户界面的各种功能方面可以存在于客户设备、服务器、或它们的各种组合中。
根据本发明的各个方面,自然语言语音用户界面可以支持多模式语音输入。因此,除一个或多个非语音输入部分(例如,经由小键盘、触摸屏、尖笔/书写板组合、鼠标、键盘、或其他输入模式提供的输入)外,给定的多模式语音输入至少还可以包括语音部分(例如,话语)。从而,非语音输入部分能够提供附加信息或关于话语的澄清,添加到处理语音时的可用输入信息量。例如,用户可以使用其他输入模式来澄清话语的含意、提供关于话语的附加信息、减少做出给定请求所需的设备交互数量、或者提供关于给定话语的附加信息。
根据本发明的各个方面,自然语言语音用户界面可以利用各种认知模型、上下文模型、用户指定模型、或其他模型来识别语音输入中的查询、命令、或其他请求。例如,给定的输入可以包括关于一个或多个上下文域的信息,域中的一个或多个可以被调用来解释和/或推理包含在输入中的关键词、概念、或其他信息。另外,可以在还考虑了语义分析和上下文推理的混合识别模型中使用关于用户行为和偏好的短期和长期共有知识。例如,某些音节、词汇、短语、请求、查询、命令、或其他信息会更有可能在给定的上下文中发生。因此,混合识别模型会分析语义模式来解析话语所说的内容,并且会进一步依赖上下文历史或其他信息来解析话语意味着什么。混合识别模型可以与对等识别模型联合使用或单独使用。例如,识别模型可以包括对全球使用方式、偏好、或者同等用户的其他特征的认识,其中同等用户会在上下文中采用某些关键字、概念、查询、命令、或上下文结构的其他方面。
基于下列附图和详细说明,本发明的其他目的和优点将得以呈现。
附图说明
图1示出了根据本发明各个方面的用于提供具有会话式的自然语言语音用户界面的导航设备的示例性系统的框图。
图2示出了根据本发明各个方面的用于提供具有会话式的自然语言语音用户界面的导航设备的示例性的基于代理的架构的框图。
图3示出了根据本发明各个方面的用于动态产生用于具有会话式的自然语言语音用户界面的导航设备的识别语法的示例性方法的流程图。
图4示出了根据本发明各个方面的用于处理提供到具有会话式的自然语言语音用户界面的导航设备的多模式基于语音的输入的示例性方法的流程图。
图5示出了根据本发明各个方面的用于根据提供到具有会话式的自然语言语音用户界面的导航设备的基于语音的输入来计算路线的示例性方法的流程图。
图6示出了根据本发明各个方面的用于根据当前的导航路线提供语音服务的示例性方法的流程图。
具体实施方式
根据本发明的各个方面,图1示出了用于提供具有会话式的自然语言语音用户界面的导航设备的示例性系统100的框图。如图1所示,该系统100可以允许用户与能够进行语音导航的设备采用自然语言的、合作的、会话式对话进行接合(engage)。例如,系统100可以理解自由形式的人类话语,使用户不再受应该如何表达命令、查询或其他类型请求的限制。替代地,除各种其他语音服务(例如,与电信息业务、通讯、媒体、消息、外部系统、市场、信息检索、或各种其他计算服务有关的服务)之外,用户可以使用随意或自然的讲话方式来请求各种语音导航服务。从而,用户可以使用系统100以使用自然语言的对话方式来控制导航设备、媒体设备、个人计算机、个人数字助理、无线电话、或者其他计算设备或系统。除其他以外,通过使用上下文、现有的信息、域知识、短期或长期共有知识、噪声容忍、和认知模型,系统100可以提供集成环境,在该环境中用户可以使用自然的语言以对话方式讲话来发出能过被机器理解并处理的查询、命令或其他请求。例如,在各种实现中,系统100可以利用如于2003年6月3日提交的题为“Systems and Methods for Responding to Natural Language Speech Utterance”的同时待审的美国专利申请10/452,147和于2003年6月15日提交的题为“Mobile System and Methods for Responding to Natural Language Speech Utterance”的同时待审的美国专利申请10/618,633中所说明的一种或多种技术,因此通过引用将其全部内容并入本文。
根据本发明的各个方面,系统100可以包括输入机构105,其接收基于语音的输入,该基于语音的输入至少包括用户讲的一句话语或语言表达。输入机构105可以包括用于接收基于语音的输入的适当的设备或这些设备的组合(例如,定向麦克风、麦克风阵列或对语音进行编码的其他设备)。在各种实现中,例如,可以通过最大化用户方向中的增益、取消回波、零点(null point)噪声源、执行各种速率的采样、对背景谈话或环境噪音进行过滤、或者执行用于最大化编码语音的保真度的各种其他技术来优化输入机构105,以接收基于语音的输入。从而,由输入机构105产生的编码语音可以高度地容忍可能干扰解释人的讲话的噪声或者其他因素。
此外,在各种实现中,输入机构105可以被耦接到其他输入模式,其中除语音外的各种形式的输入都可以被处理和/或与一个或多个以前的、当前的、或随后的基于语音的输入相关联。例如,输入机构105可以被耦接到触摸屏界面、尖笔/书写板界面、小键盘或键盘、或者其他设备或系统界面将是显而易见的。从而,可以最大化对于系统100处理语音潜在可用的输入信息量,这是因为用户可以使用其他输入模式来澄清话语或提供关于话语的附加信息。例如,用户可以将尖笔或其他指示设备触摸到在触摸屏界面上显示的地图的一部分,同时还提供关于所触摸部分的话语(例如,“向我显示在这儿周围的餐馆。”)。在此示例中,系统100可以将输入相互关联,以将“在这儿周围”解释为很可能是指所触摸的地图部分,以和用户当前的位置或其他含义进行区分。
系统100还可以包括自动语音识别器110,其接收编码语音输入并产生其一个或多个初步解释。例如,自动语音识别器110可以使用语音听写来识别基于语音的输入,以基于动态自适应识别语法来识别音素流。从而,自动语音识别器110可以提供词汇表之外的能力,其可以容忍用户的错误讲话、讲话信号的一部分被减弱、或会干扰对话语进行解释的其他因素。动态自适应识别语法可以基于字典或来自各种输入域(例如,不同语言、导航、音乐、电影、天气、各种时间或地理近似的域、或者各种其他域)的短语。此外,可以通过剪除与识别语法相关的搜索空间(例如,语法可以包括诸如schwa的链接元素,来表示经常被讲的无重音的中央元音,甚至不需用户有意识的认识)来改进自动语音识别器110的性能。因此,使用这些和其他技术,自动语音识别器110可以分析输入的编码话语,以将话语的各部分表示为一系列的音素或音节,除其他子种类以外,这些音素或音节可以被进一步分解为开始、中心、和结尾的核心部分。然后可以分析该一系列的音素或音节,以识别关于用户说了什么的多个初步解释或最佳猜测(例如,N最佳列表)。然而,很显然,自动语音识别器110可以使用各种技术来产生编码话语的初步解释,这些技术包括,例如,于2006年8月31日提交的题为“Dynamic Speech Sharpening”的同时待审的美国专利申请第11/513,269号中所说明的技术,通过引用将其全部内容并入本文。
可以将由自动语音识别器110产生的多个初步解释提供给会话语言处理器120,其利用共有知识产生真实含意、用户意图、或基于语音的输入的其他方面的智能假定。会话语言处理器120可以使用共同地操作以模仿人与人的日常对话的各种特征和部件对该假定进行明确地表达。
例如,会话语言处理器120可以包括上下文跟踪引擎140,除其他以外,上下文跟踪引擎140建立针对给定的话语的含意,管理在一个或多个上下文指定域代理125(例如,为给定上下文、域、系统、或应用提供功能性的可重新分配的、可自适应的分组或模块)中的竞争。例如,自动语音识别器110可以对初步解释进行排序,代理125可以进一步分析初步解释,以产加权的排序或得分,排序或得分可用于选择代理125中的“获胜的”一个代理。然后,代理125中的获胜的一个代理可以负责建立或推理进一步的信息、更新共有知识、或者执行其他任务来辅助产生智能的假定。此外,上下文跟踪引擎140可以使用上下文堆栈来跟踪会话主题、评价标准、加权参数、或者保持用于基于会话的上下文产生假定的上下文信息(例如,可以按照最近的上下文、经常使用的上下文、或在其中包括的其他信息来回移动上下文堆栈,以确定用户最有可能的意图)。通过识别上下文,或相关地,通过识别容量、任务、词汇表、或上下文中的其他信息,除了不足的语音线索之外,上下文跟踪引擎140还可以提供用于建立意图的高度相关信息。
此外,会话式语言处理器120可以利用各种其他形式的知识来通知智能假定的产生。例如,各种代理125可以自适应地包括域指定或上下文指定的词汇表、概念、可用任务、或与各域或上下文相关的其他形式的信息。另外,与会话式语言处理器120关联的各种部件能够调用语音搜索引擎135(例如,针对信息搜索网络的引擎)来解析不是内部可得到的信息(例如,当外部知识源会有助于澄清话语的特定词汇、命令、查询对象、或其他方面背后的意图时)。
系统100还可以使用户和该系统100共享关于给定话语、会话、或其他交互的假定和预期。例如,会话语言处理器120可以耦接到存储短期和长期共有知识的一个或多个数据存储库160,这些共有知识用于通知在会话语言处理器120中作出的决定。短期共有知识可以在当前会话期间积累信息(例如,以前话语的识别文本、跨模式用户界面操作历史、以前选择的任务或调用查询的列表、或者其他信息),从而动态地建立语音用户界面的跨模式状态的认识。短期知识的存储可以模仿人类交互,从而某些数据会在心理适当时间量之后过期(例如,擦出陈旧的数据),而可以将具有长期意义的信息添加到长期共有知识(例如,用户的长期联系人的新地址)。从而,长期共有知识可以基于随着时间积累的信息对用户的环境的、认知的、历史的、人口的、或其他方面建档或建模(例如,用户指定的专用语、经常请求的任务、感兴趣的主题或概念等)。
从而,会话语言处理器120包括可用于针对用户在给定话语中的意图来产生智能假定的各种特征。例如,假定可以基于经由上下文跟踪引擎140、代理125、语音搜索引擎135、共有知识、或其他的知识源提供的信息。从而,会话式语言处理器120尝试识别会话类型或话语目的(例如,用于检索离散信息片段的查询、用于澄清由语音用户界面提供的信息的教导式交互、或者随着会话过程可以在其中临时提供会话目的的探索交互等)。基于可用的信息和会话的类型或目的,可以为所产生的假定指定某一等级,其可以通知会话语言处理器120要如何解析话语。例如,当某一等级表明已经识别了足够的信息时,会话式语言处理器可以调用一个或多个代理125,代理125然后可以进一步利用一个或多个应用150来执行所请求的任务(例如,关于导航应用、广告应用、音乐应用、电子交易应用的任务、或者其他适当的应用或任务)。在另一个示例中,一个或多个代理125可以查询数据存储库160或语音搜索引擎135去检索所请求的信息,或另外采取动作解析包含在话语中的信息的请求。
另外,会话语言处理器120可以产生跨模式的智能响应,该智能响应可以对句法、语法、和上下文敏感,从而为系统产生的响应提供会话的感觉。当可用时,智能响应可以向用户呈现所执行的任务或所执行的查询的结果,并且可以跨越各个模式提供该响应。例如,可以分离地或共同地使用口头和/或非口头输出180(例如,通过使用显示设备、听得见的警报、语言话输出、另外的输出机构、或它们的各种组合来呈现信息)。此外,跨模式输出180的语言部分(例如,通过改变音调、速度、定时、或其他变量)可以适应于用户的讲话方式,从而建立具有自然变化和个性的口头响应。
还可以明确地表达智能响应以提供输出180,该输出180引导用户朝向对识别可能更有利的随后的响应。例如,当特定的级别反映出不明确的上下文时(例如,当竞争导致各个代理125之间的死锁时),自适应的错误识别引擎130可以将该话语识别为不明确的或未被识别的,可以制定智能响应消除上下文的歧义,或请求来自用户的随后请求澄清话语的含意。此外,当会话语言处理器120或错误识别引擎130确定给定的解释或假定不正确时,会重新解释一个或多个以前的话语,来提炼上下文并建立更精确的短期或长期会话模型(例如,“不,我的意思是……”这样的话语可以表明对以前的话语解释得不正确,在此情况中,可以基于正确的解释对各种以前的话语重新进行解释,从而建立更精确的会话上下文)。从而,会话语言处理器120可以恢复全部或部分失败。可以包括用于自适应地响应于错误识别或不明确的其它技术,诸如那些于2005年8月10日提交的题为“System and Method of Supporting Adaptive Misrecognition in Conversational Speech”的同时待审的美国专利申请第11/200,164号中所说明的技术,通过引用将其全部内容并入本文。
关于在此说明的各种技术的附加信息,以及系统100用于提供会话式的、自然语言的交互的其他技术会被提供在,例如,于2005年8月5日提交的题为“Systems and Methods for Responding to Natural Language Speech Utterance”的同时待审的美国专利申请第11/197,504号、于2005年8月29日提交的题为“Mobile Systems and Methods of Supporting Natural Language Human-Machine Interactions”的同时待审的美国专利申请第11/212,693号、以及于2006年10月16日提交的题为“System and Method for a Cooperative Conversational Voice User Interface”的同时待审的美国专利申请第11/580,926号中,因此通过引用将其全部内容并入本文。
因此,系统100可以提供在用户和该系统100之间能够进行会话式的自然语言的交互环境。此外,如将在下面更详细说明的那样,可以将系统100实现为会话式的自然语言的交互,作为到一个或多个电子设备或应用(包括导航设备)的语音用户界面。通过在此提供的进一步说明将还显而易见的是,该系统100具有跨设备和跨模式认知的能力,从而系统100提供一种环境,用户能够在其中采用合作的、自然语言的对话的方式进行接合,来请求关于多种不同设备或应用的语音服务。
根据本发明的各个方面,图2示出了示例性基于代理的架构200的框图,该架构200能够为导航设备提供会话式的、自然语言语音用户界面。架构200可以包括多个代理225a-n,其包括专门的软件、数据、内容、或其他信息,这些信息在多个各自上下文域中提供功能、行为、服务、数据、和其他信息。架构200可以是集成的并且动态自适应的环境,代理225在其中自治地进行反应、自适应、并重新配置,以便该环境中提供最佳的服务。例如,通过建立随着时间变化的上下文(例如,通过产生短期和长期的用户简档、与用户的会话、经常的主题或偏好等),导航代理225a会自动地结合知识、自适应偏好、去除冲突、或执行其他适应来提炼或优化其操作结构。
例如,至少包括导航代理225a的代理225可以通过正在使用的关于用户行为、偏好、或其他特征的短期共有知识270和长期共有知识275来进行自适应。此外,例如,响应于解析基于语音的请求的各代理(例如,通过调用一个或多个应用250、查询一个或多个数据源260、与一个或多个其他代理225合作、或通过错误识别引擎230、语音搜索引擎235、上下文跟踪引擎24等进行学习),可以跨越多个代理225进行代理自适应。在各种实现中,自适应可以自治进行作为代理225提供语音服务、产生推理、识别相似性(例如,在用户、同等人、团体等之间等)、从外部源接收更新(例如,更新管理器能够为一个或多个代理25更新内容、行为、数据、命令、域知识、关键词、概念、字典、或其他信息)的副产品,或自适应可以以其他方式进行都是显而易见的。
如图2所示,架构200至少利用导航代理225a向导航设备提供会话式的、自然语言语音用户界面。除其他以外,导航代理225a可以包括各种导航指定的内容分组(例如,字典、可用查询、任务、命令、动态语法等)、响应列表(例如,对命令、查询、或其他请求的适当的响应)、个性简档(例如,用于为系统产生的语音建立自然的感觉)、置换列表(例如,将数据置换或转换成能够被目标信息源理解的结构形式)、或各种其他形式的导航指定的信息。此外,除各种其他形式的信息外,导航代理225a还可以与架构200中其他服务(例如,可用设备、应用250、代理225等)提供的参数和操作数据、本地或远程数据源的指示器(例如,短期共有知识270、长期共有知识275、数据源260、语音搜索引擎235等)进行关联。
除其他以外,由导航代理225a使用的数据源260可以包括与导航相关的数据(例如,地图、地址、街道名称、通讯录、可替换的路线等)、感兴趣的地点(例如,餐馆、旅馆、博物馆、游览胜地、加油站等)、交通(例如,动态道路状况、交通、便道、或与交通相关的其他信息)、事件(例如,体育事件、音乐会、抗议等)、停车(例如,停车场、限制的区域或时间、街道地段(street lot)、路边停车等)、个人数据(例如,与用户的联系人列表相关联的电话号码和地址)、对等相似性(例如,基于具有相似的偏好、人口统计的简档、或其他特征的用户的相似性的推荐)。此外,可以通过诸如基于一个或多个模型提供数据源260、经由数据服务器接收数据源260、通过自适应、或其他方式来扩展或提炼数据源260将是显而易见的。
此外,除其他以外,可以经由上下文跟踪引擎240、短期共有知识270、和长期共有知识275维护关于导航域的上下文信息。例如,除其他类型的上下文信息以外,上下文信息可以涉及跟踪的主题、用户位置、行进的路线、以前的请求、用户界面状态、用户行为、偏好、人口统计、或其他特征。例如,可以使用如上参考图1、或如上参考的同时待审的美国专利申请、或者其各种结合进行更详细说明的技术建立并利用上下文。此外,当导航代理225a不能在架构200以内找到本地的信息,并且不能推理该信息时,则可以从一个或多个其他代理225b-n(例如,请求特定域的信息)、其他设备、语音搜索引擎235(例如,搜索网络)、外部源(例如,可以调用更新管理器来下载可能会具有该信息的可用更新)、或其他源请求该信息将是显而易见的。如果能够通过一个或多个其他源定位该信息,则可以对导航代理225a进行自适应、扩展、或更新,以使得该信息随后可得到。
因此,当导航代理225a与各种其他自适应代理225b-n或其他系统部件进行通信以提供语音导航服务时,导航代理225a可以与该信息的不同源进行耦接,并且可以使用上下文。因此,上下文、共有知识、地图、感兴趣的位置、联系人列表、用户或对等相似性、动态语法、可用应用、或导航架构200的各种其他方面能够为该架构200的各种部件、设备、或方面共享或为其所用。从而,包括在导航代理255a中的推理引擎255可以耦接各种知识源和可用于提供集成语音导航服务环境的其他源。例如,推理引擎255可以通过应用一个或多个规则、策略、或其他推理机制来从可用的知识和资源产生推理,以产生所述环境中的话语的可能解释(例如,语音失真匹配、归纳逻辑、贝叶斯概率分析、单调或非单调推理等)。
例如,如上更详细的说明,导航代理225a和一个或多个其他代理225b-n可以在分析话语的一个或多个初步解释中进行竞争,以产生话语的一个或多个各自可能解释。然后,一旦被识别为竞争代理中的“获胜的”一个代理,导航代理225a就可以被调用来处理该可能的解释(例如,通过解析包含在话语中的信息)。例如,竞争代理中的哪个获胜会取决于上下文或包含在话语中的其他信息,从而响应于话语“这个交通太糟糕了,试试支路”,导航代理225a获胜并重新计算路线,而响应于话语“交通太糟糕了,试试来些老歌吧”,音乐代理会获胜并改变无线电频道,而响应于话语“交通很糟糕,试试喜剧吧”,电影代理会获胜并搜索电影放映时间。因此,当导航代理225a产生导致成为代理225中获胜的一个代理的可能解释时,导航代理225a可以管理用于搜索、推理、或根据上下文来识别信息的处理,来使用一个或多个应用250(例如,导航、语法产生、位置确定、响应产生、广告、设备控制、或在架构200中可用的其他应用)提供语音导航服务。
例如,导航代理225a可以利用推理引擎255来推理没有在话语中明确提供的关键词或标准、确定对于主观的或不确定的话语的适当响应(例如,选择对于查询最可能的回答、向用户请求更多信息等)、产生事件、识别对等相似性、或者产生用于解析与导航相关的请求的推理。推理引擎255能够通过以前的上下文的认识(例如,通过有上下文跟踪引擎240提供的信息)、短期或长期共有知识270、命令历史、车辆系统的状态、用户界面、或者其他设备、数据源260、或其他可用的信息产生这种推理。例如,在示例性说明中,以前的上下文、共有知识、和其他信息源可以与推理引擎255和/或架构200中的各种其他部件一起使用,以允许会产生如下的人机交互:
  用户   “向我显示在这儿周围的餐馆。”
  语音用户界面   “我能找到的都是你不喜欢的快餐。”
  用户   “好吧,那附近的旅馆如何?”
  语音用户界面   “找到一个评价不错的印度餐厅。要我给他们打
  电话吗?”
  用户   “好,打吧,听起来不错。”
在上述说明性的示例中,第一个话语建立了“餐馆”的上下文,并且语音用户界面根据表明该用户不喜欢快餐的共有知识推理对该话语进行响应。此外,尽管第二个话语没有明确涉及餐馆,但可以使用在第一个话语中建立的上下文来推理没有提及的信息,从否则可能是不明确的请求中形成明确的请求。进一步,关于用户的长期共有知识275(例如,用户常去印度餐厅)和关于用户的短期共有知识(例如,与当前路线关联的旅馆)可以缩小用于解析第二个话语的搜索空间。此外,语音用户界面可以调用响应产生应用来促进会话解析(例如,通过提示用户给餐馆打电话)。因为该集成环境具有跨设备的认识,因此该用户随后的响应会导致明确表达适当命令结构的设备控制应用拨通用户的移动电话,该移动电话可以同于或不同于该导航导航设备。因此,如在此示例中所说明的那样,除其他以外,健全的上下文认识、共有知识、可用应用、和可用系统或设备使得用户能够使用自然语言来定位沿着当前路线与用户偏好匹配的餐馆,同时还允许用户拨打电话给该餐馆,而无需用户与设备手动地进行交互或与麻烦的人机界面交互。
然而应当理解,上述示出的对话仅提供了在用户与包括上述架构200的系统之间发生的合作会话的一个示例。因为该架构200支持自由形式的交互,并且能够容忍在人类讲话、词汇使用中偶然发生的变化、或其他因素,因此应当理解,不需要用户与该系统之间没有两个会话的交互是相似的。从而,用户能够在各上下文之中无接缝地切换,这允许随后的话语发生在各种可用域中(例如,与导航相关的话语“带我到Seahawks体育场”会跟随有跨域的话语,诸如“还有票吗?”或“什么时候开始?”)。因此,尽管各种说明示出了基于代理的架构200能够被用于语音导航服务的示例性方式,但显而易见的是,在给定的话语中,用户可以提供关于各种可用上下文、域、应用、设备、信息源、或它们的各种组合的基于自然语言的语音请求。
架构200内可用的导航应用会解析自然语言、关于导航的基于语音的请求(例如,计算路线、识别位置、显示地图等)。该导航应用能够为用户提供交互的、数据驱动的到目的地或旅途基准点的指示,其中用户可以使用自由形式的自然语言来指定目的地或旅途基准点(例如,用户可以识别全部或部分目的地,包括具体地址、大概的附近地区、城市、地点的名称或类型、商业的名称或类型、人的姓名等)。从而,在各种实现中,导航应用会对全部或部分目的地执行后处理,以识别合适的地址用于计算路线(例如,“有意义”的最近似的地址)。例如,可以对包含全部或部分目的地的话语进行分析,以识别一个或多个可能的目的地(例如,目的地的N最佳列表),可以对这些可能的目的地进行基于各种因素为识别的可能的目的地进行加权的后处理。因此,可以从N最佳列表中识别出的最可能的目的地以提供合适的(初步或完全的)路线。
例如,在示出的用户与语音用户界面之间的会话中,用户可以发出基于语音的输入“带我到西雅图”。基于用户的当前位置(例如,使用一个或多个导航传感器、射频识别器、本地或远程地图数据库等所确定的那样),导航应用可以选择西雅图中的一个地址,提供从当前位置到西雅图的路线(例如,对于长途旅行会选择西雅图的中心点,而对于当前位置近似北西雅图的就会选择西雅图北部的一个地址)。此外,当所请求的目的地未指定最终目的地时(例如,如上述示例那样),用户可以在随后的请求中逐次提炼最终目的地,并且后处理可以连续基于当前位置、当前路线、或其他因素选择另外的地址。例如,继续上述示例,随后的输入“带我到Pike大街”会导致后处理分析当前路线以确定Pike大街的适当地址,并根据需要有可能重新计算路线。从而,当前路线会使得用户驶往Interstate-5的北边界,使得可以在Pike大街上选择与Interstate-5的北边界道路同侧的地址(例如,保留当前路线信息)。结合后处理,继续逐次提炼最终目的地会。从而,只知道目的地沿着Pike大街的500街区向下的用户可以指定“Pike大街501”,并且即使这样的地址不存在,后处理也会找到有意义的最近似的地址,从而指引用户到Pike大街的500街区。
另外,除其他以外,导航应用可以提供动态的、数据驱动的到目的地的指示,或动态地提供路线信息。此外,响应产生应用可以与导航应用和/或一个或多个其他应用一起工作,以产生用户的个性化系统响应。例如,导航应用可以访问与不同用户指定的以及环境数据源相关的数据,以提供沿着路线的个性化的数据驱动指示,可以基于来自数据源的信息对路线进行重新计算或修改。从而,在一个示例中,响应产生应用可以如下产生个性化的数据驱动的指示:
Figure BPA00001196912500251
在如上示出的示例中,通过根据一个用户的联系人(即,Bob)形成指示来使得响应个性化,同时使用可用的交通数据源来提供数据驱动的指示。在另一个示例中,能够识别并使用会影响路线的数据来重新计算或识别可替换的路线(例如,会使用天气信息来避免积雪的道路,或使用事件数据来避免会发生抗议的路线)。从而,可以动态地获得数据来识别可替换的路线、重新计算路线、或者提供最佳的路线服务。在各种实现中,数据源可以基于永久的模式、动态地接收的数据(例如,在高峰时段或体育事件期间,给定的高速公路会有规律地具有高流量)、或其他信息。可以自动地重新计算路线(例如,用户偏好会表明要避免交通拥堵,或当用户具有某体育事件的票时不应当避免该体育事件),或者用户可以通过另外的话语请求重新计算(例如,“我不想被堵着,能走别的路吗?”)。此外,对于给定话语可能的答复或响应会根据当前路线进行过滤(例如,可以根据给定的路附近中的那些加油站对话语“帮我找个加油站”所提供的可能的结果进行过滤)。此外,继续上述提供的示例,用户稍后会返回到起点,并且个性化的响应会包括返回指示,诸如“回到你上14大街时的道路”。从而,个性化的响应也可以为指示建立自然的感觉,并且可以基于随时间建立的上下文。
导航架构200可以与能够接收基于语音输入并且提供导航有关信息的电子设备结合使用。例如,架构200可以在手持设备中实现(例如,个人导航设备、移动电话等)、远程通信处理设备(例如,车辆导航系统)、或各种其他合适的设备中。此外,架构200的各种功能方面可以存在于客户设备处、服务器处、或它们的各种组合。例如,可以通过客户设备(例如,个人导航设备)接收基于语音的输入,该客户设备可以与服务器进行通信以检索信息、执行任务、处理出入、或用于其他原因。服务器随后将信息返回到客户设备以对请求进行响应。然而在各种实现中,可以在系统中处理基于语音的输入(例如,通过将与服务器的通信最小化来减少处理延迟)。可以使用其他合适的布置是显而易见的,而且除其他以外,关于信息如何被处理、检索、或返回到用户的具体布置在很大程度上取决于上下文或特定的实现(例如,什么信息能够被本地、远程获得、或用户定制了什么服务等)。
根据本发明的各个方面,图3示出了用于在会话式的、自然语言语音用户界面中动态产生和/或加载识别语法的示例性方法300的流程图。例如,语法生成器应用(例如,如图2所示)可以动态地产生和/或加载识别语法为导航代理、自动语音识别器、上下文堆栈、或语音用户界面中结合识别语法的其他部件使用。虽然语法产生方法300可以被用于自然语言语音用户界面中的各种部件,但该方法300对于减少处理开销和减少混乱或混淆特别有用。例如,通过基于各种因素有效地产生、更新、加载、扩展、或构建动态语法(将在此详细说明),能够避免瓶颈、减少冲突、以及能够优化使用语法对话语进行解释的其他方面。
例如,在各种实现中,语法生成对于包括语音用户界面的系统中的可用资源量来说是很重要的。因此,在操作310处,可以计算系统可用资源量,并且随后的操作320可以基于所计算的资源限制动态语法的尺寸。例如,在嵌入式设备或具有较少动态存储器容量的其他设备中,受限的语法尺寸可以保证只占用必要的资源。因此,大列表(large-list)过分占用处理器能力不会降低小存储器设备中的吞吐量。在另一个示例中,可以通过消除上下文堆栈、共有知识,或其他本地资源中可用的冗余关键字、标准或其他信息,来减少动态语法的尺寸。然而显而易见的是,可以使用各种其他技术来限制语法尺寸,以及有效考虑可用系统资源可以提供各种环境中的处理改进。
在其中用户位置随时改变的导航上下文中,可以使用地理组块技术进一步优化语法产生。例如,可以在给定的时刻确定用户的位置(例如,通过导航传感器、全球定位系统等),并且操作330可以利用所确定的位置来确定与该位置相关的一个或多个地理近似。随后,在操作340处,所确定的地理近似可以被用于识别适合于该确定的近似的一个或多个拓扑域。
因此,可以以各种方式对在操作330中确定的近似进行加权或分析,以确定如何在产生动态语法中使用在操作340中识别的拓扑域。例如,这些拓扑域可以反映物理上的近似(例如,距离当前位置的距离,诸如五英里半径内的所有物体)、民间组织上的近似(例如,区、州、城市、附近地区、分支、地区等)、时间上的近似(例如,从当前位置起的行进时间量,其中公路等级或其他信息可被用于估计最快/最安全的路线,诸如高速公路和洲际公路会比城市或表面公路更快)、方向上的近似(例如,基于方向行进向量,其中基于行进的方向、掉头的时间量等可以认为前方十英里的地点比后方一英里的地点“更近”)、或它们的各种组合。从而,通过将用户的地理近似映射为一个或多个拓扑域,可以对动态语法进行剪除、扩展、或换入或换出存储器、或者产生和/或加载,以基于位置、时间、行进或其他因素提供优化的识别(例如,当用户从一个区域驾驶到另一个区域时,可以将信息换入以及换出语法,沿着驾驶优化信息,以保证系统资源利用与给定位置当前相关的信息)。
此外,可以将这些拓扑域细分为多个瓦区,这些瓦区还可以被细分为多个子瓦区。例如,民间组织拓扑域可以包括表示州的语法信息的瓦区,且该瓦区可以包括该州之内的各郡的一个或多个子瓦区。此外,郡子瓦区可以包括各个城市、附近地区、或者在各个郡之内的其他组织边界的子瓦区。因此,用于构建动态语法的地理近似和拓扑域可以基于各种因素,并且可以以各种方式进行细分或加权,以确定应当在语法中包括什么信息。此外,可以将基于物理上的、民间组织上的、时间上的、方向上的或其他的近似的地理组块扩展到能够设置拓扑分类的各其他域中。从而,地理组块技术在导航或其他依赖位置的语音识别系统中特别具有实用性,而且该技术能够被适当地应用在各种上下文或其中地理或位置相关的域中。
由于各种实现动态地产生识别语法(例如)以保留系统资源,因此可以远程地存储(例如,在服务器上)可用于扩展、更新、或更新语法的信息。因此,各种实现可以包括具有网络连接、数据服务、或用于建立到远程源的链路的另一通信机制的系统。基于对于给定位置所识别的近似和/或拓扑域,可以在操作350从远程资源下载上下文、话语、或一个或多个语法瓦区和/或子瓦区。此外,可以使远程资源适于存储、分析、或处理一定的信息,以提炼在其中存储的语法信息。例如,当给定设备在操作350处与远程源进行通信时,该远程源可以接收关于该设备用户的识别信息(例如,用户偏好、用户特征、请求特征等)、所请求的信息、或者其他信息。基于所接收的信息,该远程源可以动态地更新各种瓦区和/或子瓦区、建立相似性(例如,在用户、同等人、团体等之间)、或执行其他动作以提炼能够识别有关信息的处理(例如,该远程源可以确定共享了某些公共人口统计的各不同用户会对特定事件、位置等感兴趣)。
从而,在操作350下载的语法信息可以基于各种因素,除其他以外,这些因素包括当前基于语音的输入中的信息、用户当前的地理近似、与当前地理近似相关的拓扑域或地理组块、或各种相似性。基于这些和其他因素,可以从本地或远程数据源检索适当的信息(例如,本地存储库可以包含大量语法信息,动态语法会使用其中的一部分来解释话语)。然后,在操作360处,将所接收的信息会用于产生动态语法。从而,可以使动态语法适合于包括对于正确地解释给定话语有利的信息。此外,在操作370处,还可以通过使用一个或多个优化技术(诸如减少语法中的混乱)对所产生的语法进行后处理来进一步改进正确解释的有利性。例如,当在操作360处产生的语法包括两个或多个可能被混淆的元素(例如,具有相同名称的两条或多条街道)时,优化操作370会排除这些元素中的一个或多个以减少混淆(例如,选择与用户当前位置最近似的元素,或者其他标准)。在另一个示例中,当解释根本不正确时(例如,随后的话语是“不对,西北14大街,不是东北”),会剪除该动态语法以消除与该不正确的解释相关的信息(例如,可以去除关于东北的信息)。从而,除其他以外,优化操作370能够减少开销、保证不会重复错误、和/或改进解释的正确性。
尽管针对动态地扩展、剪除、加载、或产生识别语法已经进行了各种示例性说明,但显而易见的是,在操作中,自然语言语音用户界面可以使用各种形式的信息或技术来确定最优的语法。例如,除了基于可用系统资源、混淆的可能性、地理近似、或用户相似性以外,该语法还可以响应于会话的上下文、关于用户的共有知识、和/或自适应的代理行为来产生。从而,可以基于与话语最可能相关的信息,以最小不明确性来构造动态语法以识别查询、命令、或话语中的其他信息。此外,当使用语法中当前的信息不能解析话语时,各种信息源或技术可以以对识别有利的方式用于更新语法。因此,应当将语法产生方法300的上述方面和特征看作仅是示例性的,同时多种变化将不会背离所述发明构思。
根据本发明的各个方面,图4示出了用于使用会话式的、自然语言语音用户界面处理多模式语音输入的示例性方法400的流程图。根据上述图1所述,可以在具有用于接收语音输入的机构(例如,定向麦克风、麦克风阵列、或对语音进行编码的其他设备)的语音用户界面中执行方法400,其中语音输入至少包括语音部分(例如,话语)。使用自然的语言或其他自由形式的表达方式提供在操作410处接收的话语。
此外,为了允许对多模式语音输入进行处理,语音用户界面可以具有用于接收非语音部分的一个或多个输入机构(例如,经由小键盘、触摸屏、尖笔/书写板组合、鼠标、键盘、或其他输入模式提供的输入)。从而,在操作410中,所接收的语音输入可以包括除话语以外的非语音输入部分,从而通过实用多模式输入可以使输入信息量最大化。例如,用户可以使用其他输入方式来澄清话语的含意、提供关于话语的附加信息、减少进行给定请求所需的设备交互数量、或者将就给定话语所提供的信息量最大化。例如,多模式语音输入可以用于与在导航设备上显示的地图进行有效地交互(例如,话语“我只需要看这个区域”可以与圈定地图的给定区域的尖笔输入相耦接,并且输入的组合可以导致显示所圈定的地图部分)。
从而,对于给定的语音输入,判定操作420可以确定语音输入中的话语是否伴随有非语音部分。例如,在各实现中,与语音用户界面相关联的各输入机构可以耦接至交变语音和数据(AVD)系统。因此,输入数据可以在语音和数据之间交变,或者输入数据可以在单个流中复合在一起,以分配在给定时刻所需的处理资源。
当判定操作420确定接收到非语音输入部分时,可以在操作430中将语音和非语音部分进行关联。例如,可以使用精确语音识别技术来处理语音部分,并且如上所详述的那样,除其他以外,可以依据上下文、共有知识、和可用数据源对语音部分进行进一步解析和解释。从而,关联操作430可以产生可以通知上下文、共有知识、或用于处理该语音输入的其他信息的附加信息。例如,如上所述,短期共有知识可以包括会受非语音部分影响的各种用户界面状态的认识。因此,例如通过将话语中的信息关联到非语音输入中的信息(或反之亦然),关联操作430可以辅助语音用户界面开发话语的一个或多个初步解释。例如,多模式输入可以包括用户将尖笔触摸到在触摸屏界面上显示的多个餐馆列表中的一个,同时还提供关于所触摸的列表的话语(例如,“给这个打电话。”)。在此示例中,关联操作430可以将“这个”解释为指的是所触摸的电话列表,提供用于处理该语音输入的附加信息。
但显而易见的是,语音输入不一定要包括非语音部分。从而,当语音输入只包括话语、语言表达、或其他说出来的部分时,判定操作420会将方法400直接前进至操作440。例如,如通过在本说明书的其他部分提供的进一步说明将变得显而易见的那样,自然语言语音用户界面可以有效地解析只包括语音的多种请求。从而,所接收的语音输入能够包括独立的话语,使得能够使用语音在一个步骤中控制导航设备、车辆系统、移动电话、或其他设备。例如,使用现有的导航系统或其他导航界面,即使对于相对简单的任务,用户也必须经常采取多个步骤来配置所显示的地图(例如,需要多个按钮和/或尖笔输入来显示所期望的地图部分)。与之相反,使用自然语言语音用户界面,用户可以使用一步式的语音控制来简化对设备的控制(例如,可以使用话语“向上移动地图”、“向东北方向移动地图”、“向我显示西雅图市区”、或者提供以一步式方式对设备进行控制所必需的全部信息的其他话语来控制地图),这可以显著减少控制设备所需的设备交互量。
在各种示例中,(例如,在操作410中接收的输入是否包括语音、非语音部分、或其各种组合),可以在操作440中识别包含在语音输入中的一个或多个查询和/或命令。一旦产生了多模式输入的一个或多个初步解释,就可以使用适当的上下文信息、共有知识、外部知识源、或其他信息来识别包含在话语中的查询和/或命令。所依赖的信息源可以与各种设备、系统、或集成语音用户界面环境中的其他部件相关联。因此,可以分发与导航设备相关联的信息(例如,地图、感兴趣的位置等),以便和环境中的其他设备共享(例如,能够呈现地图的个人数字助理可以显示与导航设备关联的地图,或者移动电话可以拨打与导航设备关联的感兴趣的位置的电话号码等)。此外,可以以双向方式来共享信息,从而可以与集成环境中的其他设备共享与各种设备有关的信息源。
信息可以永久相关(例如,在通过在服务器、在线数据备份系统、或其他数据存储库上存储所有信息),或者可以将其动态地创建为处理多模式语音输入的功能。例如,用户可以利用商业服务提供商(例如,GMail、Yahoo Mail、或其他能够存储地址簿的服务提供商)来维护联系人的地址簿、电子邮件地址、街道地址、电话号码、或其他信息。当用户(例如,经由语音输入、非语音输入、或多模式输入)进行请求时,其中服务提供商管理用于解析该请求所需的信息,该信息可以被提取并与将用于解析该请求的设备共享。例如,移动电话可以与导航语音用户界面集成(例如,具有GPS接收器的移动电话),并且该移动电话最初(例如,第一次使用)可以没有本地的联系人、地址、电话号码、或其他信息。因此,用户话语“我到Jane家参加宴会有些晚了,给她打电话告诉她我在路上了”会导致向服务提供商的明确表达请求,以为移动电话检索与Jane家相关的地址和电话号码以进行相应的处理。此外,可以处理关于“有些晚了”的信息,以产生避免交通拥堵、使用高速公路、或缩短交通时间的路线。
可以使用多种认知模型、上下文模型、用户指定的模型、或其他模型来在操作440中识别查询和/或命令。例如,给定输入可以包括与一个或多个上下文域有关的信息,这些上下文域中的一个或多个可被调用来解释和/或推理某些关键词、概念、或包含在输入中的其他信息。此外,可以在涉及导航请求和/或命令的混合识别模型中使用关于用户的行为和偏好的短期和长期共有知识。可以使用混合识别模型(使用语义分析和上下文推理的组合)来产生话语的大概或很可能的解释。例如,可以基于给定的上下文历史,将某些音节、词汇、短语、请求、查询、命令、或话语的其他可识别方面识别为更可能出现的情况。上下文历史可以基于关于用户的短期或长期共有知识、当前会话中的以前的话语、给定环境中的共同请求(例如,导航设备大多经常会被用于显示地图、计算路线、和识别位置),或其他信息。因此,除了依赖上下文历史来解析话语意味着什么的各种处理以外,用于操作440的混合识别模型还可以包括用于分析语义方式来解析话语中所说的内容的各种处理。
另外,混合识别模型可以与对等识别模型联合使用或单独使用。例如,除了基于使用或行为的方式提供推理关于用户的信息的基础以外,上下文历史还可以包括各种偏好或用户特征。从而,识别模式可以包括关于全球使用方式、偏好、或者基于全球的对等用户的其他特征的附加认识。例如,在上下文中的所有用户都可以共同地采用某些关键词、概念、查询、命令、或上下文架构的其他方面。在另一示例中,某些人口统计的用户可以共享公共的专用语、俚语、或其他语义语音方式。从而,操作440可以利用在各个方面考虑上下文和语义的各种识别模型来识别查询或命令。例如,除了在给定的环境或上下文中通常可用的信息以外,可以基于特定用户、全球用户、对等用户、或其他有含义的用户抽象的短期或长期行为或偏好,使用上下文和语义来识别语音输入。
因此,一旦识别了包含在话语中的适当的查询和/或命令,则会在操作450中产生适当的响应或执行任务。通过已经提供的说明显而易见的是,所产生的响应和/或所执行的任务会高度上依赖于包含在给定语音输入中的上下文和信息。从而,当某些语音输入不清晰、不明确、或不清楚时,所产生的响应会提示用户进行另外的输入,并且该响应会以有利于识别的方式构成(例如,用户在纽约城时提供话语“Joe’s Pizza在哪里”会返回许多有意义的结果,从而为这些结果加权并显示给用户来选择结果中正确的一个)。
此外,可以使用语音输入来执行复合请求,而使用单一的手动输入是不可能来执行这种复合请求的。例如,单一的基于语音的输入可以包括复合地图控制请求,诸如“向我显示西雅图市区”。从而,操作450会执行检索西雅图地图的任务,并且自动地在西雅图地图的市区部分上放大。此外,可以产生一个或多个响应或其他输出,除其他以外,诸如推荐去往经常目的地的路线、识别用户可能感兴趣的位置、或搜索交通或事件通知。很多其他变体是显而易见的,除其他以外,包括所接收的输入的特征(例如,话语、非语音输入等)、所请求的查询或命令、所产生的响应、以及所执行的任务。从而,显而易见的是,在此示出的方法400可以允许用户以口头、非口头、或其各种组合的方式请求多个不同的与导航相关的任务,从而用户可以请求环境(例如,关于各种设备、信息源等)中可用的各种类型的信息或任务。因此,方法400可以在其中自然语言语音用户界面已经与提供导航服务的一个或多个设备相关联的环境中进行操作。
根据本发明的各个方面,图5示出了用于从被提供到具有会话式的、自然语言语音用户界面的导航设备的语音目的地条目来计算导航路线的示例性方法的流程图。如前所述,语音用户界面可以计算路线、提供去往目的地的动态数据驱动指示、提供去往目的地的动态路线、对全部或部分目的地条目执行后处理、或提供各种语音导航服务。因此,如图5所示,用于计算路线的方法可以支持语音目的地条目的逐次提炼,其中除其他以外,上下文、代理自适应、和共有知识可以使用语音命令、多模式命令、或其各种组合来帮助用户缩小最终目的地。然而,尽管图5具体示出了针对语音目的地条目进行逐次提炼的示例性实现,但显而易见的是,在此说明的技术可以用来执行各种任务,其中能够通过连续的语音或多模式命令在各种域、上下文、应用、设备或采用在此说明的技术的其他部件中缩小用户所要寻找的信息来适当地提炼所概括的近似。从而,可以在各种域中实现逐次提炼,这些域允许用户通过指定关于所要寻找的信息越来越具体的标准来“向下钻入(drill down)”到特定的信息片或数据。
例如,如图5所示,最终目的地的逐次提炼可以包括其中用户以单一的话语、通过多个话语(例如,连续缩小目的地的近似)指定目的地的实例,以及其中系统(例如,通过使用上下文、或共有知识等产生推理)识别目的地的实例。例如,最终目的地的给定近似可以与有限数量的可能目的地相关联,并且该系统能够通过产生推理,通过依赖上下文、共有知识、和其他信息,或者通过其他方式从有限可能的目的地中明确地识别最终目的地将是显而易见的。此外,在另一示例中,逐次提炼目的地可以模仿出租车中的乘客间的人类交互方式,或者其中可以通过一连串交互缩小或提炼路线或目的地的其他类似情况。例如,出租车中的乘客有时会指定一个目的地的大概近似(例如,在弗吉尼亚阿灵顿搭载的乘客会说“我要去华盛顿特区的雾谷(美国国务院的谑称)”),这会导致出租车司机开始沿着优选的路线开车到近似的目的地(例如,司机可能会知道当从阿灵顿开车到雾谷时,要朝着Rock Creek Parkway方向前进)。在去往近似目的地的途中时,乘客和/或司机可以通过一个或多个随后的交互合作来提炼最终目的地(例如,出租车司机会问“你要去雾谷的什么地方?”,乘客会指明“McFadden’s”,这会为司机提供足够的信息来确定到目的地的路线)。
但显而易见的是,两个交互的顺序不必须是相似的。例如,乘客可以提供关于最终目的地的附加信息而无需司机提醒,或者司机直到确认了最终目的地之后才开始开车(例如,当有多条路线可选并且最终目的地对将要选择的路线有影响时)。从而,合作的、会话式的交互可以具有计算到达最终目的地的路线的一般目的,但交互可以以许多不同的方式进行,其中除许多其他因素以外,给定的交互很可能在很大程度上依赖于上下文、共有知识、代理自适应、起点和/或当前位置、用户偏好、动态数据(例如,关于交通、事件、外部系统等)。
因此,如在此的进一步说明,图5所示的方法可以允许语音目的地条目通过使用前述因素(除其他以外)的逐次提炼来通知基于全部或部分目的地输入的路线计算。例如,在与上述出租车司机的示例类似的方式中,语音用户界面(例如,出租车司机)可以具有关于从当前位置到某一目的地的某些优选路线的知识(例如,从阿灵顿经由Rock Creek Parkway到雾谷)。此外,如在图6中将要详细说明的,可以根据当前路线、上下文、或其他知识限制与随后的交互相关联的搜索空间(例如,可以排除位于雾谷的一定近似之外的叫做“McFadden’s”的位置)。
因此,在操作510中,用户可以使用自由形式的自然语言提供全部或部分目的地输入,例如,包括语音命令和/或多模式命令(例如,输入可以包括话语“我要去这里”并伴随有在显示器上的触摸点)。可以以各种方式(包括通过具体地址、地点的名称、人的姓名、商业的名称、附近地区、城市、区域)、或各种其他方式(例如,可以以探索的方式来提供语音目的地条目,诸如当用户希望参观博物馆但还没有决定要参观哪一个时)来指定全部或部分目的地。此外,因为逐次提炼能够容忍不完整的或部分地址,所以可以以使用与逐次提炼相反的方式来提供语音目的地输入,例如,通过缩小地指定所期望的目的地以计算去往所期望目的地的更宽邻近地区的路线(例如,可以通过话语“费城中的Pat’s Steaks”来识别到费城南部的路线,即使Pat’s Steaks有可能不是用户实际的目的地)。
可以使用一个或多个动态自适应识别语法来解析或分析语音目的地输入,例如,如参照图3所说明的那样。例如,可以基于各种因素加载、产生、扩展、剪除或改变识别语法将是显而易见的,各种因素包括到用户当前位置的近似(例如,当用户从一个区域移动到另一个区域时,可以基于当前位置、行进的方向、时间约束等来优化识别语法)、上下文历史(例如,当用户与语音用户界面交互时,可以基于字典、关键词、概念、或与其他上下文、域、设备、应用等有关的其他信息改变语法)、或其他因素。从而,操作520可以包括产生语音目的地输入的一个或多个解释,可以使用各种数据源对其进行分析,以产生可能的目的地的N最佳列表(例如,导航代理可以查询通信录、语音搜索引擎、或其他部件来识别与包含在语音目的地输入中的标准至少部分地匹配的一个或多个目的地)。
可以在操作530中对所产生的可能目的地的列表进行后处理,以为N最佳列表中的条目分配权重或排序。后处理可以包括根据各种因素分析在操作520中产生的目的地列表,以从全部或部分语音目的地输入中确定最可能想要的目的地。例如,后处理操作530可以根据关于用户的共有知识、域指定的知识、对话历史、或其他因素对可能的目的地进行排序或加权。此外,后处理操作530可以分析全部或部分目的地输入,以通过解析关于输入目的地的“有意义”的最近似的地址来识别能够计算至其路线的地址。例如,用户可以指定识别了广阔并且近似的区域(例如,“带我到马萨诸塞州”)的部分目的地,并且根据用户当前的位置、行进的方向、偏好、或其他信息,后处理操作530可以选择对于计算路线有意义的地址(例如,对于有住在德科角的亲戚的用户可以选择德科角中的地址,而对于要旅行到各个流行观光区的用户可以选择波士顿中的地址等)。
因此,可以在操作540中对加权的N最佳目的地列表进行评估,来确定该列表中存在的适当地可识别的目的地。例如,全部或部分语音目的地条目可能是不明确的、或者语音目的地条目中的某一标准或关键词是不能识别的,从而加权列表中的最高排序的目的地没有超过识别目的地所需的最小置信水平。例如,位于俄克拉荷马州的用户可以说出部分目的地,如“我要去华盛顿”,而当语音用户界面不能在华盛顿州、华盛顿特区、圣路易的华盛顿大学、和位于俄克拉荷马城稍微偏南的华盛顿镇之间消除歧义时,判定操作540会返回否定的指示。在另一示例中,从圣路易出发的用户可以提供语音目的地条目“带我到斯普林菲尔德”,即使多个目的地可能都满足最小置信水平,这也会导致不能识别的目的地。在此示例中,因为伊利诺伊州的斯普林菲尔德与密苏里州的斯普林菲尔德都位于到圣路易的合理的距离之内,但是到这两个目的地的行进方向是完全相反的(例如,到伊利诺伊州的斯普林菲尔德的路线包括在Interstate-55上向北行进,而到密苏里州的斯普林菲尔德的路线包括在Interstate-44上向西南行进),所以不能将“斯普林菲尔德”识别为目的地。因此,为了避免将用户指引到与所期望目的地相反的方向上,处理会替代地分支到操作550来产生用于解析该目的地的提示。
例如,该提示会向用户询问问题或要求用户提供能够澄清所接收的语音目的地输入的期望含意的信息。例如,在上面给出的述华盛顿的示例中,多模式用户提示可以在显示设备上显示四个可能的目的地(即,华盛顿州、华盛顿特区、华盛顿大学、和俄克拉荷马州华盛顿)。多模式提示还可以包括系统产生的语音,例如,声明“我找到了多个可能的华盛顿,你是指其中的一个还是别的?”从而,处理然后会进行返回到操作510,其中用户能够通过另外的输入来消除所期望目的地中的歧义(例如,当显示设备包括触摸屏时通过触摸所显示的目的地中的一个,或者说出目的地中的一个、或者通过提供指明所显示的目的地中没有所期望的目的地的另外信息)。在此之后,随后的N最佳列表更有可能得出可识别的目的地,这是因为能够在考虑对话历史的情况下来解释原始的语音目的地输入。
可替换地,当至少一个可能的目的地被明确地识别,同时满足最小置信水平时,肯定的指示会导致处理进入另一个判定操作560,该判定操作控制如何计算去往所识别的目的地(例如,目的地的加权N最佳列表中的最高排序的条目)的路线。判定操作560可以确定所识别的目的地是否提供全部或完整的目的地。例如,通过逐次提炼,部分语音目的地条目会导致可识别但不完整的目的地。从而,操作570可以计算去往所识别的部分目的地的初步路线。在此之后,随后的处理返回到操作510,在这里语音用户界面会等候对部分目的地进行提炼的其他语音目的地输入。此外,在各种实现中,可以产生一个或多个系统提示来请求其他语音目的地输入(例如,当用户近似该部分目的地并且需要其他信息来提供进一步路线时,或者当用户近似初步路线中的地点,在该地点处走不同的路线会到部分目的地之内的不同的拓扑子瓦区或地点时,等)。
因此,处理操作510-570可以迭代地进行重复,直到能够通过使用一个或多个多模式语音目的地条目进行逐次提炼来识别最终目的地。从而,当已经识别了合适的最终目的地时,在操作560后执行操作580,来完成到最终目的地的路线。例如,可以通过将去往部分目的地的路线推理成去往最终目的地的完整路线来完成路线。此外,显而易见的是,可以在途中(例如,当用户沿着初步路线行进时逐次提炼最终目的地)、预先(例如,用户可以选择在识别出去往最终目的地的完整路线时开车)、或以其他方式将语音目的地条目逐次提炼成最终目的地。
此外,如在此进行的详细说明那样,可以基于随后的输入、产生的推理、动态数据、或各种其他信息源来动态地调整或重新引导已经计算的路线(例如,可以响应于关于交通状况、绕路、事件、天气状况、或用户偏好、或者其他因素的动态数据产生会导致动态路线的推理)。因此,图6示出了根据本发明的各个方面的用于基于当前导航路线提供语音服务的示例性方法的流程图。语音用户界面可以使用如图6所示的方法,以动态的、数据驱动的方式提供语音服务,其中可以基于上下文、关于用户的共有知识、或其他信息源来以定制的方式提供该语音服务。
因此,基于当前路线提供语音导航服务包括在操作610中识别当前导航路线。可以从初步路线或完整路线中识别该路线,如根据上述参照图5进行说明的技术所计算的那样。因此,当前路线信息可用于各种系统部件,以处理事件或语音输入、产生响应、明确说明查询、解析命令、或执行在语音导航服务环境中可用的其他处理服务。从而,除其他以外,当前路线信息可以提供关于解释语音输入、朝着解析输入采取行动、或响应于事件的进一步上下文。因此,尽管没有在图6中示出,但是也可以根据当前路线利用各种其他上下文信息源来提供语音导航服务。例如,除其他以外,用户的偏好会限制车辆能够行进到的位置,或者车辆能够行进的长度(例如,用于保证运输或乘客在规定路线上前进,或用于对年轻司机设置父母控制等)。在另一示例中,语音用户界面可以具有一个或多个外部系统或设备的认识、动态数据源、或其他信息,可以利用这些来确定如何最好地提供语音导航服务。
因此,一旦在操作610中识别出了当前路线,连同其他关于上下文、共有知识、或另外适当的信息一起,判定操作620可以确定所识别的信息是否导致会产生和/或检测的事件。当没有事件能够被产生和/或检测到时,处理进入到判定操作630,其确定是否已从用户接收到了语音输入。从而,在此示出的方法会在判定操作620和630中循环,直到检测到一个或多个事件和/或接收到语音输入。
能够在判定操作620中被检测到和/或产生的一种类型事件涉及导航系统的位置依赖的广告(例如,由本地或远程广告引擎、或经由数据信道、或者以其他方式所产生的)。例如,在各种实现中,可以使用如于2007年2月6日提交的题为“System and Method for Selecting and Presenting Advertisements Based on Natural Language Processing of Voice-Based Input”的同时待审的美国专利申请11/671,526中所说明的技术来产生和/或检测广告事件,通过引用将上述专利申请的全部内容并入本文。例如,显而易见的是,导航系统将必要地包括用于确定导航系统当前位置的一个或多个系统或机构(例如,全球定位系统、射频识别系统、基于到可识别的天线塔或接入点的距离确定位置的系统等)。此外,自然语言语音用户界面可以以附加至或独立于位置检测系统的多种其他方式来确定位置(例如,显而易见的是,在位置检测系统故障时,自适应的提示肯定会从用户请求位置信息,或者可以使用利用共有知识或上下文的其他技术)。
因此,在一个示例中,操作620可以包括检测和/或产生关于位置依赖的广告的事件。商人或其他设法到达目标听众的实体可以沿着道路两旁、或者系统可以检测射频标识符(RFID)的其他位置简单地散布射频识别器(RFID)。然后,商人或其他实体可以经由与该RFID相关联的数据信道广播一个或多个广告,从而当导航系统位于RFID合适的邻近之中时触发事件。因此,处理将进行到操作650,其中可以根据当前路线信息或其他上下文参数对与事件相关的信息进行过滤。如应用到此示例的那样,过滤操作650可以包括监视数据信道以分析与检测到的RFID相关的信息,从而在该数据信道上接收广播的广告。因此,例如,可以以如何分析用户语言的类似方式对包括语音的广告进行分析(例如,保持涉及广告的语音的认识)。
因此,可以考虑到当前路线、个人信息(例如,以前的查询、偏好、历史等)、或其他因素对广告事件数据进行过滤,来确定在操作660中应当采取什么动作。例如,广告可以与设法到达个人导航设备的本地餐馆相关,该个人导航设备不必需具有完整的商业数据库。因此,在一个示例中,当共有知识表明用户愿意尽早到达目的地而不做没有必要的停留时,过滤操作650会丢弃广告。在此情况中,操作660可以有效地为空操作,或可以仅包括显示与广告相关的图片,以允许用户对是否要停一下进行独立的选择。然而,在不同的示例中,用户可能已经提供了之前的语音输入,表示希望停止驾驶并在沿途的某个地方吃午餐。因此,在此示例中,操作660可以包括讲出来的输出,引起用户对于该餐馆的关注,有可能询问用户是否要临时转移路线以便在该餐馆停车吃午餐。
然而,应该理解,上述基于RFID的广告仅提供了可以在操作620中检测到的可能广告事件的一个示例。例如,可以由一个或多个广告合作商将广告上载到服务器,其中上载的广告可以关联有元数据或识别目标听众的其他描述信息、位置依赖的信息、或其他标准。在另一示例中,可以在语音用户界面处本地存储多个广告,并且推理引擎可以确定应当产生事件的适当的环境,来向用户传送一个或多个广告。从而,显而易见的是,可以以多种方式产生广告事件,并且可以本地地、远程地、通过检测RFID或以其他方式产生和/或检测广告事件。
此外,当向用户传送广告时(例如,在操作660中),可以跟着用户与所传送的广告的随后交互。以此方式,可以产生基于模型的相似性,例如,以保证向可能的目标听众传送宣传或广告。从而,当关于用户的行为、偏好或其他特征的共有知识与关于与广告的对等相似性相关的一个或多个标准匹配时,在操作620中可以产生和/或检测与给定广告相关的事件。例如,商人可以为特定的人口统计的听众提供奖励优惠券,并且可以使用对等相似性来保证只向有可能成为有意向的听众提供这些优惠券(例如,避免向包括没有可能的顾客的整个市场提供这些优惠券)。因此,当用户落入特定的人口统计听众时,会由广告引擎在服务器上本地产生、或以其他方式产生一个或多个事件,来向用户传送一个或多个奖励优惠券。
在其他示例中,广告模型可以包括移动每次使用付费系统(例如,基于每次使用付费通过无线接入点提供的网络接入)、对等本地指南或推荐(例如,可以表明各种对等用户分类的相似性,这些对等用户会对相似的感兴趣的位置、事件、本地餐馆、商店、活动、游览胜地、或本地区域的其他方面感兴趣)。另外,如上参照图3详细说明的那样,可以根据应用于各种拓扑域的映射产生广告模型的各个方面(诸如本地指南或推荐)。例如,本地指南或推荐可以依赖于拓扑特征(例如,对于各个城市、社区、位置等的不同指南)。从而,本地指南、推荐、或广告模型的其他方面可以与基于地理组块的拓扑分类相关联。从而,可以根据物理上的近似、时间上的近似、方向上的近似、民间组织上的近似、或它们的各种组合来产生和/或检测各种广告事件(例如,对等推荐可以依赖于用户的位置、行进的方向、时间约束等进行改变)。
除了在操作620中可以产生和/或检测与广告相关的事件以外,自然语言语音用户界面还可以通过上下文的认识、关于用户的共有知识、外部系统和设备、或其他信息来产生另外的事件。例如,如上参照图2说明的那样,语音用户界面可以在基于代理的架构中实现,其中多个代理中的一个或多个代理可以包括推理引擎。但显而易见的是,该推理引擎可以以各种其他方式被布置在语音用户界面之中。例如,语音用户界面可以在会话语言处理器之中包括推理引擎,在这种实现中,该推理引擎可以产生、检测、并向语音用户界面的各个部件分发事件。在另一示例中,在与各代理相关联的推理引擎之中,管理推理引擎可以协调事件产生和/或检测。从而,显而易见的是,语音用户界面可以包括一个或多个推理引擎的适当的布置,从而使得当事件和推理产生时,他们可以被检测、产生、并分发给各个系统部件。
因此,除其他以外,该一个或多个推理引擎可以利用上下文的认识、关于用户的共有知识、动态数据源、与外部系统或设备有关的数据和服务,来产生和/或检测在操作620中识别的事件或其他推理。当存在当前导航路径的时候发生事件或其他推理时,在操作660中产生响应和/或执行任务之前,会在操作650中对这些事件或其他推理进行过滤。
例如,推理引擎可以利用个人信息(诸如在用户的地址簿中的用户经常拜访的特定人)来产生建议对当前路线进行改变的事件。因此,在此示例中,在当前路线或当前位置信息反映处到与地址簿中的人所关联的地址的某一近似时,推理引擎可以产生事件(其可在操作620中被检测到)。然后,操作650可以通过确定可能的响应或一系列动作对该事件进行过滤,用于以和当前路线一致的方式处理该事件。例如,与当前路线相关联的信息可以表明用户已经完成使命并在回家途中。此外,用户地址簿中的日历可以表明该用户在当天晚些时候有个约会,但在接下来的几小时中没有日历项。因此,操作660中产生的示例性响应可以包括基于话语的输出“你离Jane家很近,你想要顺便拜访一下吗?”
尽管上述示例示出了使用个人信息产生的事件,但显而易见的是,可以利用各种可用信息源来产生和/或检测事件。例如,事件可以基于关于社区、交通、天气、和/或许多其他数据源的暂时的或动态的数据(例如,所产生的事件会导致输出“今晚的足球比赛在你家附近的体育场进行,你想去吗?”,其中足球比赛可以是本地社区事件)。
在又一个示例中,各种类型的外部系统认识会触发事件并从语音用户界面产生语音响应。例如,可以将语音用户界面耦接到各种车辆或远程通讯业务系统,提供基于这些系统的状态的认识。因此,当车辆系统表明车辆将很快缺油时,可以产生事件,导致提示用户停车加油的语音响应。此外,可以根据当前路线信息对外部系统认识进行过滤(例如,结合推理引擎),其中会进行计算,表明汽油量足以沿该路线到达下一个加油站,但不足以到沿该路线的再下一个加油站。从而,基于路线的过滤操作650会导致在操作660中产生的响应,该响应提供用户必须在下一个加油站停车加油的语音警告。
回到操作630,还可以考虑到当前路线信息对用户提供的语音输入进行处理。如前所述,在语音输入中说了什么的解释(例如,话语的内容)可以基于各种语音模型、字典、上下文历史、对话历史、以及能够形成识别语法的其他信息。此外,除其他以外,上下文、共有知识、以及可用数据和服务可以被用于解释语音输入的含意(例如,话语的意图)。从而,使用在此进行说明的各种技术以及并入的同时待审的美国专利申请中的技术,可以在操作640中识别包含在话语中的查询、命令、或其他请求。当存在当前路线时,可以根据当前路线对可能的任务域、命令、查询结果、响应、和/或其他系统动作进行过滤。例如,可以考虑到当前路线对语音输入“最近的卫生间在哪里”进行分析。然后可以考虑当前路线利用各种近似(例如,行进的方向、物理的距离、时间的距离等)来确定哪个卫生间是合适的。因此,当使得用户行进更长距离的路线,例如,在前面二十英里休息区的卫生间会比高速公路下十英里处的餐馆的卫生间更合适(例如,以避免用户离开当前路线)。
此外,在许多示例中,代理或其他处理部件会需要明确地表述到各个不同数据源的多个查询,以对请求进行解析。从而,用于执行任务的操作660会确定需要什么推理、元数据、或其他信息来向数据源明确地表述查询,以对请求进行解析。从而,关于导航的语音请求可以包括不必被连接到导航,或者不必在导航信息的数据库或其他数据源中的信息。虽然如此,但是通过与各种可用信息源相耦接,负杂或复合的查询会被明确地表述以从各种数据源检索信息,以解析给定的请求。此外,给定的话语可以包括多个请求、查询、或命令,从而响应于该话语所执行的给定的响应或任务可以包括与各种不同的系统部件进行的交互。因此,在示出的示例中,话语“找到离林地公园动物园最近的7-11便利店”会包括:第一个查询,识别林地公园动物园的位置;第二个查询,找到在林地公园动物园一定的半径以内的一个或多个7-11便利店;第三个查询,确定用户当前的位置;以及第四个查询,调用推理引擎来基于各种用户近似以确定哪个7-11便利店是“最近的”。因此,假定存在两个7-11便利店到林地公园动物园的距离相等,一个在动物园的东边一个在动物园西边,则可以利用用户的当前位置来确定选择哪个7-11便利店;与之相反,单纯基于到动物园的物理的近似会导致不明确的结果。
尽管上述提供的说明使得自然语言语音用户界面如何提供语音导航服务的具体示例和举例说明更加显著,但应当理解,如上提供的说明、示例、和操作模式仅仅应当被看作是示例性的。自然语言语音用户界面可以高度容忍人类口头交互中的变化,并且可以利用上下文、共有知识、和可用数据和系统,与任何给定的用户以改进相互目的的会话方式有效地进行交互。从而,用户与语音用户界面之间的交互可以被看作唯一发生的事情,这是因为用户在给定的交互中可以以自由的形式说出关于各种可用数据源、应用、或设备的请求。因此,语音用户界面可以动态地自适应、学习、以及提炼可操作的架构,以在语音导航服务环境中提供最佳的服务。
本发明可以实现在硬件、固件、软件、或其各种组合中。本发明还可以被实现为在机器可读介质上存储的可以被一个或多个处理器读出并执行的指令。机器可读介质可包括以机器(例如,计算设备)可读形式存储或传递信息的机构。例如,机器可读存储介质可以包括只读存储器、随机存取存储器、磁盘存储介质、光存储介质、闪存设备等,以及机器可读传递介质可以包括传播信号的各种形式,诸如载波、红外信号、数字信号等。此外,根据本发明的具体示例和实现在上述公开中说明了固件、软件、程序、或指令,并且这些固件、软件、程序、或指令执行一定的动作。但是,本领域技术人员应当认识到,这种说明仅仅是出于方便的目的,实际上这些动作由计算设备、处理器、控制器、或者执行固件、软件、程序、或指令的其他设备产生。
将各个方面和实现说明为包括特定的特征、结构、或特性,但每个方面或实现并不必须包括所述特定的特征、结构、或特性。此外,当结合方面或实现对特定的特征、结构、或特性进行说明时,应当理解,本领域技术人员能够结合其他方面或实现来实现这些特征、结构、或特性,而无论是否进行了明确地说明。因此,在不背离本发明的范围或精神的条件下,可以对所提供的说明进行各种改变和修改。从而,应当将说明书和附图看作仅是示例性的,而本发明的范围只由所附权利要求书进行限定。

Claims (58)

1.一种计算机实现的用于为导航设备提供自然语言语音用户界面的方法,该方法包括:
在与所述导航设备相关联的输入机构处接收导航相关的基于语音的输入,该基于语音的输入至少包括由用户提供的自然语言话语;
使用与语音识别引擎相关联的动态识别语法来产生所述自然语言话语的一个或多个初步解释;
使用会话语言处理器对所述初步解释进行分析,该会话语言处理器使用共有知识和与导航上下文相关联的信息,在该导航上下文中确定所述自然语言话语的可能解释;以及
将所述自然语言话语的可能解释传递到与所述导航上下文相关联的导航代理,所述导航代理可操作用于:
基于所述自然语言话语的可能解释来识别包含在所述基于语音的输入中的一个或多个导航相关的请求;并且
使用与多个信息源中的一个或多个信息源相关联的信息来解析所述请求,所述多个信息源至少包括导航指定信息源。
2.如权利要求1所述的方法,所述导航代理还可以操作用于确定所述请求中的至少一个请求包括所请求信息的近似,其中所述会话语言处理器管理与用户的对话来解析所述近似信息,被管理的对话包括逐次提炼所述近似信息的与用户进行的一次或多次交互。
3.如权利要求2所述的方法,每次交互都包括一次或多次提示用户提炼所述近似信息或者从用户接收对所述近似信息进行提炼的随后输入。
4.如权利要求1所述的方法,所述导航相关的请求包括对去往全部或部分地址的路线的请求,所述导航代理可以操作用于通过以下步骤解析对所述路线的请求:
为所述路线选择目的地,所选择的目的地具有最对应所述全部或部分地址的地址;
计算从用户的当前位置到所选择的目的地的路线;并且
产生指示以指引用户沿着所计算的路线到达所选择的目的地,所产生的指示由来自多个信息源的数据动态地驱动。
5.如权利要求4所述的方法,所述动态数据驱动的指示包括关于目的地、感兴趣的位置、交通、停车、天气、事件、或与所计算的路线相关的其他信息的信息。
6.如权利要求4所述的方法,还包括:
在与所述导航设备相关联的输入机构处接收随后的基于语音的输入,所述随后的基于语音的输入至少包括由用户提供的一个请求;以及
调用多个域代理中的至少一个域代理来解析包括在所述随后的基于语音的输入中的请求,所述至少一个域代理可以操作用于根据所计算的路线对所述请求的结果进行过滤。
7.如权利要求1所述的方法,所述动态识别语法包括与一个或多个拓扑域相关联的信息。
8.如权利要求7所述的方法,所述拓扑域包括相对于用户的当前位置的物理上的近似、时间上的近似、方向上的近似、和民间组织上的近似。
9.如权利要求1所述的方法,所述会话语言处理器耦接到可以操作用来产生一个或多个推理的推理引擎,其中所述会话语言处理器使用所产生的推理来确定所述自然语言话语的可能解释。
10.如权利要求9所述的方法,其中所述会话语言处理器还使用所产生的推理向用户建议在所述导航上下文中可用的一个或多个服务。
11.如权利要求1所述的方法,所述导航有关的请求包括控制地图显示的多模式请求,所述导航代理可以操作用于通过以下步骤来解析控制地图显示的请求:
将所述基于语音的输入的非语音部分与该话语的可能解释相关联,所述非语音部分识别了地图显示的一部分;并且
发出根据该话语的可能解释对识别出的地图显示部分进行控制的命令。
12.如权利要求1所述的方法,其中所述多个信息源包括导航指定信息源、共有知识、与所述导航上下文相关联的信息、以及关于地图、目的地、方向、感兴趣的位置、交通、停车、天气、事件、用户地址簿、用户设备和系统、搜索引擎、和多个域代理的一个或多个信息源。
13.如权利要求12所述的方法,所述共有知识包括对话历史信息、请求历史信息、用户界面状态信息、短期用户简档信息、长期用户简档信息、对等用户简档信息、以及用户位置信息。
14.一种用于为导航设备提供自然语言语音用户界面的系统,该系统包括:
输入机构,其接收导航相关的基于语音的输入,该基于语音的输入至少包括由用户提供的自然语言话语;
语音识别引擎,其具有与其相关联的动态识别语法,所述语音识别引擎可以操作用于使用所述动态识别语法来产生所述自然语言话语的一个或多个初步解释;
多个域代理,其与各自上下文关联,所述多个域代理至少包括与导航上下文相关联的导航代理;以及
会话语言处理器,其可操作用于:
使用共有知识和与所述导航上下文相关联的信息对所述初步解释进行分析,以确定所述自然语言话语在所述导航上下文中的可能解释;以及
将所述自然语言话语的可能解释传递到与所述导航上下文相关联的导航代理,该导航代理可以操作用于基于所述自然语言话语的可能解释来识别包含在所述基于语音的输入中的一个或多个导航相关的请求,以及使用与多个信息源中的一个或多个信息源相关联的信息来解析所述请求,所述多个信息源至少包括导航指定信息源。
15.如权利要求14所述的系统,所述导航代理还可以操作用于确定所述请求中的至少一个请求包括所请求信息的近似;并且
所述会话语言处理器还可以操作用于管理与用户的对话来解析所述近似信息,被管理的对话包括逐次提炼所述近似信息的与用户进行的一次或多次交互。
16.如权利要求15所述的系统,每次交互都包括一次或多次提示用户提炼所述近似信息或者从用户接收对所述近似信息进行提炼的随后的输入。
17.如权利要求14所述的系统,所述导航相关的请求包括对去往全部或部分地址的路线的请求,所述导航代理可以操作用于通过以下步骤解析对所述路线的请求:
为所述路线选择目的地,所选择的目的地具有最对应所述全部或部分地址的地址;
计算从用户的当前位置到所选择的目的地的路线;并且
产生指示以指引用户沿着所计算的路线到达所选择的目的地,所产生的指示由来自多个信息源的数据动态地驱动。
18.如权利要求17所述的系统,所述动态数据驱动的指示包括关于目的地、感兴趣的位置、交通、停车、天气、事件、或与所计算的路线相关的其他信息的信息。
19.如权利要求17所述的系统,所述一个或多个输入机构还接收随后的基于语音的输入,所述随后的基于语音的输入至少包括由用户提供的一个请求,并且所述会话语言处理器还可以操作用于:
调用多个域代理中的至少一个域代理来解析包括在所述随后的基于语音的输入中的请求,所述至少一个域代理可以操作用于根据所计算的路线对所述请求的结果进行过滤。
20.如权利要求14所述的系统,所述动态识别语法包括与一个或多个拓扑域相关联的信息。
21.如权利要求20所述的系统,所述拓扑域包括相对于用户的当前位置的物理上的近似、时间上的近似、方向上的近似、和民间组织上的近似。
22.如权利要求14所述的系统,还包括耦接到所述会话语言处理器的推理引擎,其产生一个或多个推理,其中所述会话语言处理器使用所产生的推理来确定所述自然语言话语的可能解释。
23.如权利要求22所述的系统,还包括耦接到所述会话语言处理器的推理引擎,其中所述会话语言处理器还使用所产生的推理向用户建议在所述导航上下文中可用的一个或多个服务。
24.如权利要求14所述的系统,所述导航有关的请求包括控制地图显示的多模式请求,所述导航代理可以操作用于通过以下步骤来解析控制地图显示的请求:
将所述基于语音的输入的非语音部分与该话语的可能解释相关联,所述非语音部分识别了地图显示的一部分;并且
发出根据该话语的预期含意对识别出的地图显示部分进行控制的命令。
25.如权利要求14所述的系统,其中所述多个信息源包括导航指定信息源、共有知识、与所述导航上下文关联的信息、以及关于地图、目的地、方向、感兴趣的位置、交通、停车、天气、事件、用户地址簿、用户设备和系统、搜索引擎、和多个域代理的一个或多个信息源。
26.如权利要求25所述的系统,所述共有知识包括对话历史信息、请求历史信息、用户界面状态信息、短期用户简档信息、长期用户简档信息、对等用户简档信息、以及用户位置信息。
27.一种用于在语音导航服务环境中提供自然语言语音用户界面的方法,该方法包括:
接收由用户提供的基于语音的目的地输入,该基于语音的目的地输入至少包括自然语言话语;
使用与语音识别引擎相关联的动态识别语法来产生所述自然语言话语的一个或多个初步解释;
使用会话语言处理器对所述初步解释进行分析,该会话语言处理器使用共有知识和与导航上下文相关联的信息来确定在所述自然语言话语中提供的预期目的地,该预期目的地包括目的地的近似;以及
将所述预期目的地传递到导航代理,该导航代理可以操作用于通过以下步骤提供到所述预期目的地的路线:
为所述路线选择初步目的地,所选择的初步目的地具有最对应近似目的地的地址;
计算从用户的当前位置到所选择的初步目的地的路线;并且
参与和用户的对话以为所计算的路线解析最终目的地,该对话包括与用户的一次或多次交互,所述交互对所述近似目的地进行逐次提炼,直到解析出所述最终目的地。
28.如权利要求27所述的方法,每次交互都包括一次或多次提示用户提炼所述近似目的地或者从用户接收对所述近似信息进行提炼的随后输入。
29.如权利要求27所述的方法,所述导航代理还可以操作用于响应于对所述近似目的地的逐次提炼来动态地重新计算路线。
30.如权利要求27所述的方法,在相对于初始路线计算之后的时间中,可对所述最终目的地进行充分地解析。
31.如权利要求27所述的方法,所述导航代理可以操作用于通过识别可能对应于所述近似目的地的一个或多个地址、并将所识别的地址中排序最高的一个地址选择为所述初步目的地来选择所述初步目的地。
32.如权利要求27所述的方法,根据与用户的当前位置或者所述近似目的地的近似程度对所识别的地址进行排序。
33.如权利要求32所述的方法,所述近似基于一个或多个拓扑域,所述拓扑域包括相对于用户的当前位置或者所述近似目的地的物理上的近似、时间上的近似、方向上的近似、和民间组织上的近似中的一个或多个。
34.如权利要求27所述的方法,所述导航代理还可以操作用于产生指示以沿着所计算的路线指引用户,所产生的指示由来自多个信息源的数据动态地驱动。
35.如权利要求34所述的方法,所述多个信息源包括关于目的地、感兴趣的位置、交通、停车、天气、事件、或与所计算的路线相关的其他信息的信息。
36.如权利要求27所述的方法,所述共有知识包括对话历史信息、请求历史信息、用户界面状态信息、短期用户简档信息、长期用户简档信息、对等用户简档信息、以及用户位置信息。
37.一种用于在语音导航服务环境中提供自然语言语音用户界面的方法,该方法包括:
接收由用户提供的导航有关的基于语音的输入,该基于语音的输入至少包括自然语言话语;
使用位置检测系统识别用户的当前位置;
确定与用户的当前位置相关联的一个或多个拓扑域;
产生动态识别语法,其包括与所确定的拓扑域相关联的语法信息;以及
使用所述动态识别语法产生所述自然语言话语的一个或多个解释。
38.如权利要求37所述的方法,所述动态识别语法根据与所述拓扑域相关联的地理组块对所述语法信息进行组织。
39.如权利要求38所述的方法,所述地理组块包括利用距离用户当前位置的距离所定义的物理上的近似。
40.如权利要求38所述的方法,所述地理组块包括利用从用户的当前位置起的行进时间所定义的时间上的近似。
41.如权利要求38所述的方法,所述地理组块包括利用用户行进的方向向量所定义的方向上的近似。
42.如权利要求38所述的方法,所述地理组块包括利用大陆、国家、区域、州、城市、位置、附近地区、和社区所定义的民间组织上的近似。
43.如权利要求38所述的方法,还包括将一个或多个地理组块细分为多个瓦区,所述动态识别语法还根据所述多个瓦区对所述语法信息进行组织。
44.如权利要求43所述的方法,还包括将所述多个瓦区中的一个或多个瓦区细分为多个子瓦区,所述动态识别语法还根据所述多个子瓦区对所述语法信息进行组织。
45.如权利要求37所述的方法,所述动态识别语法具有根据所述语音导航服务环境中存储器或资源可用性所限制的尺寸。
46.如权利要求37所述的方法,还包括响应于与用户的当前位置相关联的拓扑域中的改变,对包括在所述动态识别语法中的所述语法信息进行修改。
47.如权利要求37所述的方法,还包括确定用户与用户的一个或多个对等物之间的相似性,所述动态识别语法还根据所确定的相似性对所述语法信息进行组织。
48.一种用于在语音导航服务环境中提供广告的方法,该方法包括:
使用位置检测系统识别用户的当前位置;
提取共有知识和与导航上下文相关联的信息,所提取的信息用于确定在所述语音导航服务环境中接收的自然语言话语的可能解释;
识别一个或多个广告以向用户提供,基于对用户的当前位置、共有知识、或与所述导航上下文相关联的信息中的一个或多个的相似性来识别所述一个或多个广告;以及
产生多模式输出来向用户提供一个或多个所识别的广告。
49.如权利要求48所述的方法,所述多模式输出包括系统产生的语音话语。
50.如权利要求48所述的方法,所述位置检测系统在数据信道上接收关于所述一个或多个广告的信息。
51.如权利要求50所述的方法,通过所述位置检测系统检测与射频标识符相关联的数据信道。
52.如权利要求48所述的方法,所述共有知识包括对话历史信息、请求历史信息、用户界面状态信息、短期用户简档信息、长期用户简档信息、对等用户简档信息、以及用户位置信息。
53.如权利要求48所述的方法,还包括:
接收至少包括自然语言话语的基于语音的输入;
使用所述共有知识和与所述导航上下文相关联的信息来确定所所接收的自然语言的话语的可能解释,广告是基于所述自然语言话语的可能解释进行识别的。
54.如权利要求48所述的方法,所述广告包括用户当前位置的本地社区的指南。
55.如权利要求54所述的方法,所述本地社区指南包括对于感兴趣的地点、事件、餐馆、商店、活动、或游览胜地中的一个或多个的推荐。
56.如权利要求54所述的方法,所述本地社区指南包括与地图、目的地、方向、交通、停车、或天气中的一个或多个相关联的信息。
57.如权利要求54所述的方法,所述本地社区指南基于用户与用户的当前位置、用户的一个或多个对等物、或者与用户相关联的一个或多个社区中的一个或多个之间的相似性。
58.如权利要求48所述的方法,所述广告包括图像、标语、音频消息、视频消息、奖励提供、优惠券、以及数据流中的一个或多个。
CN200880126525.2A 2007-12-11 2008-07-09 在集成语言导航服务环境中提供自然语言语音用户界面 Active CN101939740B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810956617.9A CN109147781A (zh) 2007-12-11 2008-07-09 通过自然语言语音用户界面提供车载服务的方法和系统

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/954,064 2007-12-11
US11/954,064 US8140335B2 (en) 2007-12-11 2007-12-11 System and method for providing a natural language voice user interface in an integrated voice navigation services environment
PCT/US2008/069508 WO2009075912A1 (en) 2007-12-11 2008-07-09 Providing a natural language voice user interface in an integrated voice navigation services environment

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201810956617.9A Division CN109147781A (zh) 2007-12-11 2008-07-09 通过自然语言语音用户界面提供车载服务的方法和系统

Publications (2)

Publication Number Publication Date
CN101939740A true CN101939740A (zh) 2011-01-05
CN101939740B CN101939740B (zh) 2018-09-21

Family

ID=40722539

Family Applications (2)

Application Number Title Priority Date Filing Date
CN200880126525.2A Active CN101939740B (zh) 2007-12-11 2008-07-09 在集成语言导航服务环境中提供自然语言语音用户界面
CN201810956617.9A Pending CN109147781A (zh) 2007-12-11 2008-07-09 通过自然语言语音用户界面提供车载服务的方法和系统

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201810956617.9A Pending CN109147781A (zh) 2007-12-11 2008-07-09 通过自然语言语音用户界面提供车载服务的方法和系统

Country Status (4)

Country Link
US (10) US8140335B2 (zh)
EP (2) EP2232388A4 (zh)
CN (2) CN101939740B (zh)
WO (1) WO2009075912A1 (zh)

Cited By (248)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102255952A (zh) * 2011-06-13 2011-11-23 苏州萃智新技术开发有限公司 基于位置的服务中间件
CN102520789A (zh) * 2011-11-18 2012-06-27 上海聚力传媒技术有限公司 一种用于实现语音控制受控设备的方法与设备
CN103226949A (zh) * 2011-09-30 2013-07-31 苹果公司 在虚拟助理中使用情境信息来促进命令的处理
CN103582896A (zh) * 2011-06-03 2014-02-12 苹果公司 生成和处理代表待执行任务的任务项目
CN103618838A (zh) * 2013-12-12 2014-03-05 惠州Tcl移动通信有限公司 一种利用移动终端辅助驾驶的方法及系统
CN104050967A (zh) * 2013-03-14 2014-09-17 本田技研工业株式会社 语音接口系统和方法
CN104572947A (zh) * 2014-12-31 2015-04-29 国家电网公司 电力自助缴费终端中的多语种集成调用引擎及其使用方法
CN104871240A (zh) * 2012-12-28 2015-08-26 索尼公司 信息处理设备、信息处理方法、以及程序
CN105122353A (zh) * 2013-05-20 2015-12-02 英特尔公司 用于虚拟个人助理系统的自然人-计算机交互
CN105183850A (zh) * 2015-09-07 2015-12-23 百度在线网络技术(北京)有限公司 基于人工智能的信息查询方法及装置
CN105190489A (zh) * 2013-03-14 2015-12-23 微软技术许可有限责任公司 用于文本预测的语言模型词典
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
CN105355202A (zh) * 2014-08-22 2016-02-24 现代自动车株式会社 语音识别装置、具有语音识别装置的车辆及其控制方法
CN105453080A (zh) * 2013-08-30 2016-03-30 英特尔公司 用于虚拟个人助理的可扩展上下文感知的自然语言交互
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
CN105719647A (zh) * 2011-09-27 2016-06-29 感官公司 使用说话者检验的背景语音辨识助理
US9466295B2 (en) 2012-12-31 2016-10-11 Via Technologies, Inc. Method for correcting a speech response and natural language dialogue system
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
CN106157651A (zh) * 2016-07-26 2016-11-23 中国科学院自动化研究所 一种基于语音语义理解的交通电台路况信息播报系统
US9535906B2 (en) 2008-07-31 2017-01-03 Apple Inc. Mobile device having human language translation capability with positional feedback
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
CN106503156A (zh) * 2016-10-24 2017-03-15 北京百度网讯科技有限公司 基于人工智能的人机交互方法及装置
US9620104B2 (en) 2013-06-07 2017-04-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9626955B2 (en) 2008-04-05 2017-04-18 Apple Inc. Intelligent text-to-speech conversion
US9633674B2 (en) 2013-06-07 2017-04-25 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9633660B2 (en) 2010-02-25 2017-04-25 Apple Inc. User profiling for voice input processing
US9646614B2 (en) 2000-03-16 2017-05-09 Apple Inc. Fast, language-independent method for user authentication by voice
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
CN106682090A (zh) * 2016-11-29 2017-05-17 上海智臻智能网络科技股份有限公司 主动交互实现装置、方法及智能语音交互设备
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
CN106796606A (zh) * 2014-10-10 2017-05-31 歌乐株式会社 检索系统
CN106796787A (zh) * 2014-05-20 2017-05-31 亚马逊技术有限公司 在自然语言处理中使用先前对话行为进行的语境解释
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
CN107004209A (zh) * 2014-09-16 2017-08-01 声钰科技 营销提示的系统和方法
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
CN107112013A (zh) * 2014-09-14 2017-08-29 谷歌公司 用于创建可定制对话系统引擎的平台
CN107112015A (zh) * 2014-12-30 2017-08-29 微软技术许可有限责任公司 发现第三方启用语音的资源的能力
CN107146610A (zh) * 2017-04-10 2017-09-08 北京猎户星空科技有限公司 一种用户意图的确定方法及装置
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9798393B2 (en) 2011-08-29 2017-10-24 Apple Inc. Text correction processing
CN107305483A (zh) * 2016-04-25 2017-10-31 北京搜狗科技发展有限公司 一种基于语义识别的语音交互方法及装置
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
CN107430489A (zh) * 2015-03-08 2017-12-01 苹果公司 共享用户可配置的图形构造
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
CN107507614A (zh) * 2017-07-28 2017-12-22 北京小蓦机器人技术有限公司 结合ui执行自然语言命令的方法、设备、系统与存储介质
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
CN107608586A (zh) * 2012-06-05 2018-01-19 苹果公司 导航期间的语音指令
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
CN107680591A (zh) * 2017-09-21 2018-02-09 百度在线网络技术(北京)有限公司 基于车载终端的语音交互方法、装置及其设备
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
CN107851437A (zh) * 2015-08-10 2018-03-27 歌乐株式会社 语音操作系统、服务器装置、车载设备和语音操作方法
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9953088B2 (en) 2012-05-14 2018-04-24 Apple Inc. Crowd sourcing information to fulfill user requests
US9966068B2 (en) 2013-06-08 2018-05-08 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US9971774B2 (en) 2012-09-19 2018-05-15 Apple Inc. Voice-based media searching
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
CN108242237A (zh) * 2016-12-26 2018-07-03 现代自动车株式会社 语音处理设备、具有该设备的车辆以及语音处理方法
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10079014B2 (en) 2012-06-08 2018-09-18 Apple Inc. Name recognition system
CN108563631A (zh) * 2018-03-23 2018-09-21 江苏速度信息科技股份有限公司 一种自然语言地址描述的自动识别方法
US10083690B2 (en) 2014-05-30 2018-09-25 Apple Inc. Better resolution when referencing to concepts
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10089072B2 (en) 2016-06-11 2018-10-02 Apple Inc. Intelligent device arbitration and control
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
CN108694944A (zh) * 2017-04-05 2018-10-23 三星电子株式会社 通过使用框架生成自然语言表达的方法和设备
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
CN108871370A (zh) * 2018-07-03 2018-11-23 北京百度网讯科技有限公司 导航方法、装置、设备和介质
CN109101475A (zh) * 2017-06-20 2018-12-28 北京嘀嘀无限科技发展有限公司 出行语音识别方法、系统和计算机设备
US10169329B2 (en) 2014-05-30 2019-01-01 Apple Inc. Exemplar-based natural language processing
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
CN109240640A (zh) * 2018-08-30 2019-01-18 百度在线网络技术(北京)有限公司 广告语音交互方法、装置及存储介质
US10185542B2 (en) 2013-06-09 2019-01-22 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
CN109540160A (zh) * 2018-10-18 2019-03-29 深圳壹账通智能科技有限公司 一种基于语音交互的最佳路径分析方法及相关设备
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
CN109598112A (zh) * 2014-07-18 2019-04-09 谷歌有限责任公司 利用协同定位信息的发言人验证
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10269345B2 (en) 2016-06-11 2019-04-23 Apple Inc. Intelligent task discovery
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10283110B2 (en) 2009-07-02 2019-05-07 Apple Inc. Methods and apparatuses for automatic speech recognition
US10297253B2 (en) 2016-06-11 2019-05-21 Apple Inc. Application integration with a digital assistant
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10318871B2 (en) 2005-09-08 2019-06-11 Apple Inc. Method and apparatus for building an intelligent automated assistant
CN109920407A (zh) * 2017-12-12 2019-06-21 上海博泰悦臻网络技术服务有限公司 智能终端及其饮食搜寻方法、及无人驾驶车辆
US10332518B2 (en) 2017-05-09 2019-06-25 Apple Inc. User interface for correcting recognition errors
CN110019699A (zh) * 2017-09-05 2019-07-16 声音猎手公司 域间通过语法槽的分类
US10356243B2 (en) 2015-06-05 2019-07-16 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10354011B2 (en) 2016-06-09 2019-07-16 Apple Inc. Intelligent automated assistant in a home environment
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
CN110070861A (zh) * 2018-01-22 2019-07-30 丰田自动车株式会社 信息处理装置和信息处理方法
CN110096712A (zh) * 2013-03-15 2019-08-06 苹果公司 通过智能数字助理的用户培训
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10403283B1 (en) 2018-06-01 2019-09-03 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10410637B2 (en) 2017-05-12 2019-09-10 Apple Inc. User-specific acoustic models
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
CN110301004A (zh) * 2017-02-23 2019-10-01 语义设备公司 可扩展对话系统
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10482874B2 (en) 2017-05-15 2019-11-19 Apple Inc. Hierarchical belief states for digital assistants
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10521466B2 (en) 2016-06-11 2019-12-31 Apple Inc. Data driven natural language event detection and classification
CN110637284A (zh) * 2017-05-16 2019-12-31 谷歌有限责任公司 解析基于图像和/或其它传感器数据的自动化助理请求
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US10568032B2 (en) 2007-04-03 2020-02-18 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
CN110850829A (zh) * 2019-11-19 2020-02-28 苏州思必驰信息科技有限公司 一种基于天气的车载设备智能控制方法及系统
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10607141B2 (en) 2010-01-25 2020-03-31 Newvaluexchange Ltd. Apparatuses, methods and systems for a digital conversation management platform
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
CN111108476A (zh) * 2017-12-08 2020-05-05 谷歌有限责任公司 通过语音驱动的计算基础设施进行的图形用户界面渲染管理
US10643611B2 (en) 2008-10-02 2020-05-05 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
CN111201566A (zh) * 2017-08-10 2020-05-26 费赛特实验室有限责任公司 用于处理数据和输出用户反馈的口语通信设备和计算体系架构以及相关方法
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10684703B2 (en) 2018-06-01 2020-06-16 Apple Inc. Attention aware virtual assistant dismissal
CN111301312A (zh) * 2018-12-12 2020-06-19 现代自动车株式会社 语音识别系统的会话引导方法
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10699717B2 (en) 2014-05-30 2020-06-30 Apple Inc. Intelligent assistant for home automation
CN111368155A (zh) * 2013-06-21 2020-07-03 微软技术许可有限责任公司 环境感知对话策略和响应生成
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
TWI698756B (zh) * 2018-11-08 2020-07-11 中華電信股份有限公司 查詢服務之系統與方法
US10714117B2 (en) 2013-02-07 2020-07-14 Apple Inc. Voice trigger for a digital assistant
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733993B2 (en) 2016-06-10 2020-08-04 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10748546B2 (en) 2017-05-16 2020-08-18 Apple Inc. Digital assistant services based on device capabilities
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10755703B2 (en) 2017-05-11 2020-08-25 Apple Inc. Offline personal assistant
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10791176B2 (en) 2017-05-12 2020-09-29 Apple Inc. Synchronization and task delegation of a digital assistant
US10789945B2 (en) 2017-05-12 2020-09-29 Apple Inc. Low-latency intelligent automated assistant
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10810274B2 (en) 2017-05-15 2020-10-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
CN112015873A (zh) * 2019-05-31 2020-12-01 苹果公司 通过设备内置目标定位和个性化实现语音助理可发现性
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
CN112272635A (zh) * 2018-06-08 2021-01-26 罗伯特·博世有限公司 用于优化停车建议的方法和车辆系统
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
CN112330353A (zh) * 2020-09-22 2021-02-05 杭州浙启品牌管理有限公司 一种基于地图导航app广告的方法
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
CN112455442A (zh) * 2019-09-09 2021-03-09 通用汽车环球科技运作有限责任公司 用于辅助驾驶车辆中的语音控制操纵的方法和装置
CN112581958A (zh) * 2020-12-07 2021-03-30 中国南方电网有限责任公司 一种应用于电力领域的简短语音智能导航方法
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US11010127B2 (en) 2015-06-29 2021-05-18 Apple Inc. Virtual assistant for media playback
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US11023513B2 (en) 2007-12-20 2021-06-01 Apple Inc. Method and apparatus for searching using an active ontology
US11055912B2 (en) 2012-06-05 2021-07-06 Apple Inc. Problem reporting in maps
US11070949B2 (en) 2015-05-27 2021-07-20 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on an electronic device with a touch-sensitive display
US11069336B2 (en) 2012-03-02 2021-07-20 Apple Inc. Systems and methods for name pronunciation
US11131967B2 (en) 2019-05-06 2021-09-28 Apple Inc. Clock faces for an electronic device
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11148007B2 (en) 2016-06-11 2021-10-19 Apple Inc. Activity and workout updates
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US11217251B2 (en) 2019-05-06 2022-01-04 Apple Inc. Spoken notifications
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US11231904B2 (en) 2015-03-06 2022-01-25 Apple Inc. Reducing response latency of intelligent automated assistants
US11237797B2 (en) 2019-05-31 2022-02-01 Apple Inc. User activity shortcut suggestions
US11269678B2 (en) 2012-05-15 2022-03-08 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US11274932B2 (en) * 2017-06-14 2022-03-15 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Navigation method, navigation device, and storage medium
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11301130B2 (en) 2019-05-06 2022-04-12 Apple Inc. Restricted operation of an electronic device
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11314370B2 (en) 2013-12-06 2022-04-26 Apple Inc. Method for extracting salient dialog usage from live data
US11327650B2 (en) 2018-05-07 2022-05-10 Apple Inc. User interfaces having a collection of complications
US11327634B2 (en) 2017-05-12 2022-05-10 Apple Inc. Context-specific user interfaces
US11336961B2 (en) 2016-06-12 2022-05-17 Apple Inc. Recording and broadcasting application visual output
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11372659B2 (en) 2020-05-11 2022-06-28 Apple Inc. User interfaces for managing user interface sharing
US11388291B2 (en) 2013-03-14 2022-07-12 Apple Inc. System and method for processing voicemail
US11388280B2 (en) 2015-02-02 2022-07-12 Apple Inc. Device, method, and graphical user interface for battery management
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11385860B2 (en) 2015-06-07 2022-07-12 Apple Inc. Browser with docked tabs
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11430571B2 (en) 2014-05-30 2022-08-30 Apple Inc. Wellness aggregator
US11442414B2 (en) 2020-05-11 2022-09-13 Apple Inc. User interfaces related to time
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11468282B2 (en) 2015-05-15 2022-10-11 Apple Inc. Virtual assistant in a communication session
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11495218B2 (en) 2018-06-01 2022-11-08 Apple Inc. Virtual assistant operation in multi-device environments
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11526256B2 (en) 2020-05-11 2022-12-13 Apple Inc. User interfaces for managing user interface sharing
US11532306B2 (en) 2017-05-16 2022-12-20 Apple Inc. Detecting a trigger of a digital assistant
US11539831B2 (en) 2013-03-15 2022-12-27 Apple Inc. Providing remote interactions with host device using a wireless device
US11550465B2 (en) 2014-08-15 2023-01-10 Apple Inc. Weather user interface
US11580867B2 (en) 2015-08-20 2023-02-14 Apple Inc. Exercised-based watch face and complications
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11657813B2 (en) 2019-05-31 2023-05-23 Apple Inc. Voice identification in digital assistant systems
US11657215B2 (en) 2017-08-28 2023-05-23 Microsoft Technology Licensing, Llc Robust expandable dialogue system
US11676608B2 (en) 2021-04-02 2023-06-13 Google Llc Speaker verification using co-location information
US11694590B2 (en) 2020-12-21 2023-07-04 Apple Inc. Dynamic user interface with time indicator
US11720239B2 (en) 2021-01-07 2023-08-08 Apple Inc. Techniques for user interfaces related to an event
US11740776B2 (en) 2012-05-09 2023-08-29 Apple Inc. Context-specific user interfaces
US11765209B2 (en) 2020-05-11 2023-09-19 Apple Inc. Digital assistant hardware abstraction
US11782575B2 (en) 2018-05-07 2023-10-10 Apple Inc. User interfaces for sharing contextually relevant media content
US11798547B2 (en) 2013-03-15 2023-10-24 Apple Inc. Voice activated device for use with a voice-based digital assistant
US11809483B2 (en) 2015-09-08 2023-11-07 Apple Inc. Intelligent automated assistant for media search and playback
US11831799B2 (en) 2019-08-09 2023-11-28 Apple Inc. Propagating context information in a privacy preserving manner
US11842724B2 (en) 2017-02-23 2023-12-12 Microsoft Technology Licensing, Llc Expandable dialogue system
US11853536B2 (en) 2015-09-08 2023-12-26 Apple Inc. Intelligent automated assistant in a media environment
US11886805B2 (en) 2015-11-09 2024-01-30 Apple Inc. Unconventional virtual assistant interactions
US11921992B2 (en) 2021-05-14 2024-03-05 Apple Inc. User interfaces related to time
US11931625B2 (en) 2021-05-15 2024-03-19 Apple Inc. User interfaces for group workouts
US11942095B2 (en) 2014-07-18 2024-03-26 Google Llc Speaker verification using co-location information
US11956609B2 (en) 2021-01-28 2024-04-09 Apple Inc. Context-aware voice guidance

Families Citing this family (408)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU6630800A (en) 1999-08-13 2001-03-13 Pixo, Inc. Methods and apparatuses for display and traversing of links in page character array
WO2002023389A1 (en) * 2000-09-15 2002-03-21 Robert Fish Systems and methods for translating an item of information using a distal computer
US7072328B2 (en) * 2001-01-12 2006-07-04 Voicegenie Technologies Inc. Computer-implemented voice markup language-based server
ITFI20010199A1 (it) 2001-10-22 2003-04-22 Riccardo Vieri Sistema e metodo per trasformare in voce comunicazioni testuali ed inviarle con una connessione internet a qualsiasi apparato telefonico
US7398209B2 (en) 2002-06-03 2008-07-08 Voicebox Technologies, Inc. Systems and methods for responding to natural language speech utterance
US7693720B2 (en) 2002-07-15 2010-04-06 Voicebox Technologies, Inc. Mobile systems and methods for responding to natural language speech utterance
US7669134B1 (en) 2003-05-02 2010-02-23 Apple Inc. Method and apparatus for displaying information during an instant messaging session
US7440842B1 (en) * 2003-05-09 2008-10-21 Dimitri Vorona System for transmitting, processing, receiving, and displaying traffic information
US8825356B2 (en) 2003-05-09 2014-09-02 Dimitri Vorona System for transmitting, processing, receiving, and displaying traffic information
US11468128B1 (en) * 2006-10-20 2022-10-11 Richard Paiz Search engine optimizer
US20060271520A1 (en) * 2005-05-27 2006-11-30 Ragan Gene Z Content-based implicit search query
US7640160B2 (en) 2005-08-05 2009-12-29 Voicebox Technologies, Inc. Systems and methods for responding to natural language speech utterance
US7620549B2 (en) 2005-08-10 2009-11-17 Voicebox Technologies, Inc. System and method of supporting adaptive misrecognition in conversational speech
US7949529B2 (en) 2005-08-29 2011-05-24 Voicebox Technologies, Inc. Mobile systems and methods of supporting natural language human-machine interactions
WO2007027989A2 (en) 2005-08-31 2007-03-08 Voicebox Technologies, Inc. Dynamic speech sharpening
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US8510109B2 (en) 2007-08-22 2013-08-13 Canyon Ip Holdings Llc Continuous speech transcription performance indication
US8073681B2 (en) 2006-10-16 2011-12-06 Voicebox Technologies, Inc. System and method for a cooperative conversational voice user interface
US7818176B2 (en) 2007-02-06 2010-10-19 Voicebox Technologies, Inc. System and method for selecting and presenting advertisements based on natural language processing of voice-based input
US7912828B2 (en) * 2007-02-23 2011-03-22 Apple Inc. Pattern searching methods and apparatuses
US9973450B2 (en) 2007-09-17 2018-05-15 Amazon Technologies, Inc. Methods and systems for dynamically updating web service profile information by parsing transcribed message strings
ITFI20070177A1 (it) 2007-07-26 2009-01-27 Riccardo Vieri Sistema per la creazione e impostazione di una campagna pubblicitaria derivante dall'inserimento di messaggi pubblicitari all'interno di uno scambio di messaggi e metodo per il suo funzionamento.
US9053089B2 (en) 2007-10-02 2015-06-09 Apple Inc. Part-of-speech tagging using latent analogy
US8165886B1 (en) 2007-10-04 2012-04-24 Great Northern Research LLC Speech interface system and method for control and interaction with applications on a computing system
US8595642B1 (en) 2007-10-04 2013-11-26 Great Northern Research, LLC Multiple shell multi faceted graphical user interface
US8364694B2 (en) 2007-10-26 2013-01-29 Apple Inc. Search assistant for digital media assets
DE102008051757A1 (de) * 2007-11-12 2009-05-14 Volkswagen Ag Multimodale Benutzerschnittstelle eines Fahrerassistenzsystems zur Eingabe und Präsentation von Informationen
US8620662B2 (en) * 2007-11-20 2013-12-31 Apple Inc. Context-aware unit selection
US8140335B2 (en) 2007-12-11 2012-03-20 Voicebox Technologies, Inc. System and method for providing a natural language voice user interface in an integrated voice navigation services environment
US8327272B2 (en) 2008-01-06 2012-12-04 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US8401780B2 (en) * 2008-01-17 2013-03-19 Navteq B.V. Method of prioritizing similar names of locations for use by a navigation system
US8065143B2 (en) 2008-02-22 2011-11-22 Apple Inc. Providing text input using speech data and non-speech data
US8289283B2 (en) 2008-03-04 2012-10-16 Apple Inc. Language input interface on a device
US8255224B2 (en) 2008-03-07 2012-08-28 Google Inc. Voice recognition grammar selection based on context
US8676577B2 (en) * 2008-03-31 2014-03-18 Canyon IP Holdings, LLC Use of metadata to post process speech recognition output
US9305548B2 (en) 2008-05-27 2016-04-05 Voicebox Technologies Corporation System and method for an integrated, multi-modal, multi-device natural language voice services environment
US8589161B2 (en) 2008-05-27 2013-11-19 Voicebox Technologies, Inc. System and method for an integrated, multi-modal, multi-device natural language voice services environment
US8464150B2 (en) 2008-06-07 2013-06-11 Apple Inc. Automatic language identification for dynamic text processing
US11048765B1 (en) 2008-06-25 2021-06-29 Richard Paiz Search engine optimizer
US8768702B2 (en) 2008-09-05 2014-07-01 Apple Inc. Multi-tiered voice feedback in an electronic device
US8898568B2 (en) 2008-09-09 2014-11-25 Apple Inc. Audio user interface
US8352272B2 (en) 2008-09-29 2013-01-08 Apple Inc. Systems and methods for text to speech synthesis
US8396714B2 (en) 2008-09-29 2013-03-12 Apple Inc. Systems and methods for concatenation of words in text to speech synthesis
US8352268B2 (en) 2008-09-29 2013-01-08 Apple Inc. Systems and methods for selective rate of speech and speech preferences for text to speech synthesis
US8583418B2 (en) * 2008-09-29 2013-11-12 Apple Inc. Systems and methods of detecting language and natural language strings for text to speech synthesis
US8712776B2 (en) 2008-09-29 2014-04-29 Apple Inc. Systems and methods for selective text to speech synthesis
US20100082330A1 (en) * 2008-09-29 2010-04-01 Yahoo! Inc. Multi-lingual maps
US8355919B2 (en) 2008-09-29 2013-01-15 Apple Inc. Systems and methods for text normalization for text to speech synthesis
US9978365B2 (en) * 2008-10-31 2018-05-22 Nokia Technologies Oy Method and system for providing a voice interface
US9009053B2 (en) 2008-11-10 2015-04-14 Google Inc. Multisensory speech detection
US20100149036A1 (en) * 2008-11-24 2010-06-17 Craig Rosenberg System and Methods for Using Current and Past Positional Data to Provide Advanced Spatial and Temporal Information and Unique Location Based Services
US9959870B2 (en) 2008-12-11 2018-05-01 Apple Inc. Speech recognition involving a mobile device
US7839801B2 (en) * 2008-12-12 2010-11-23 Verizon Patent And Licensing Inc. Distributing customer location access links across network provider nodes during network planning
US9323854B2 (en) * 2008-12-19 2016-04-26 Intel Corporation Method, apparatus and system for location assisted translation
US9741340B2 (en) * 2014-11-07 2017-08-22 Nuance Communications, Inc. System and method for enhancing speech recognition accuracy using weighted grammars based on user profile including demographic, account, time and date information
KR101502013B1 (ko) * 2008-12-24 2015-03-12 엘지전자 주식회사 이동 단말기 및 이동 단말기의 위치기반서비스 제공방법
US8862252B2 (en) 2009-01-30 2014-10-14 Apple Inc. Audio user interface for displayless electronic device
US8326637B2 (en) 2009-02-20 2012-12-04 Voicebox Technologies, Inc. System and method for processing multi-modal device interactions in a natural language voice services environment
US8380507B2 (en) 2009-03-09 2013-02-19 Apple Inc. Systems and methods for determining the language to use for speech generated by a text to speech engine
US10540976B2 (en) 2009-06-05 2020-01-21 Apple Inc. Contextual voice commands
US9002713B2 (en) * 2009-06-09 2015-04-07 At&T Intellectual Property I, L.P. System and method for speech personalization by need
US9055151B2 (en) * 2009-06-22 2015-06-09 Avaya Inc. Method to set the flag as replied or forwarded to all replied or forwarded voice messages
US8442189B2 (en) * 2009-06-22 2013-05-14 Avaya Inc. Unified communications appliance
US20110010179A1 (en) * 2009-07-13 2011-01-13 Naik Devang K Voice synthesis and processing
US8280619B2 (en) * 2009-09-04 2012-10-02 Mitac International Corp. Portable navigation apparatus with refueling prompt function and method thereof
US8255217B2 (en) * 2009-10-16 2012-08-28 At&T Intellectual Property I, Lp Systems and methods for creating and using geo-centric language models
US8615360B2 (en) * 2009-10-30 2013-12-24 Telenav, Inc. Navigation system with single selection mileage single capture mechanism and method of operation thereof
US9171541B2 (en) 2009-11-10 2015-10-27 Voicebox Technologies Corporation System and method for hybrid processing in a natural language voice services environment
US9502025B2 (en) 2009-11-10 2016-11-22 Voicebox Technologies Corporation System and method for providing a natural language content dedication service
US20110110534A1 (en) * 2009-11-12 2011-05-12 Apple Inc. Adjustable voice output based on device status
US8682649B2 (en) 2009-11-12 2014-03-25 Apple Inc. Sentiment prediction from textual data
US20110125733A1 (en) * 2009-11-25 2011-05-26 Fish Nathan J Quick access utility
US8600743B2 (en) 2010-01-06 2013-12-03 Apple Inc. Noise profile determination for voice-related feature
US8311838B2 (en) 2010-01-13 2012-11-13 Apple Inc. Devices and methods for identifying a prompt corresponding to a voice input in a sequence of prompts
US8381107B2 (en) 2010-01-13 2013-02-19 Apple Inc. Adaptive audio feedback system and method
US20110184945A1 (en) * 2010-01-22 2011-07-28 Qualcomm Incorporated Location aware recommendation engine
US8626511B2 (en) * 2010-01-22 2014-01-07 Google Inc. Multi-dimensional disambiguation of voice commands
US8676581B2 (en) * 2010-01-22 2014-03-18 Microsoft Corporation Speech recognition analysis via identification information
US20110202338A1 (en) * 2010-02-18 2011-08-18 Philip Inghelbrecht System and method for recognition of alphanumeric patterns including license plate numbers
US8954374B2 (en) 2010-02-23 2015-02-10 International Business Machines Corporation Community-driven map creation and access
US11379473B1 (en) 2010-04-21 2022-07-05 Richard Paiz Site rank codex search patterns
US10936687B1 (en) 2010-04-21 2021-03-02 Richard Paiz Codex search patterns virtual maestro
US11423018B1 (en) 2010-04-21 2022-08-23 Richard Paiz Multivariate analysis replica intelligent ambience evolving system
US8756571B2 (en) * 2010-05-07 2014-06-17 Hewlett-Packard Development Company, L.P. Natural language text instructions
US20110289015A1 (en) * 2010-05-21 2011-11-24 Microsoft Corporation Mobile device recommendations
US8639516B2 (en) 2010-06-04 2014-01-28 Apple Inc. User-specific noise suppression for voice quality improvements
US8713021B2 (en) 2010-07-07 2014-04-29 Apple Inc. Unsupervised document clustering using latent semantic density analysis
US20120010996A1 (en) * 2010-07-07 2012-01-12 Microsoft Corporation Recommendations and targeted advertising based upon directions requests activity and data
US9104670B2 (en) 2010-07-21 2015-08-11 Apple Inc. Customized search or acquisition of digital media assets
US8635227B2 (en) 2010-07-31 2014-01-21 Viralheat, Inc. Discerning human intent based on user-generated metadata
US8473289B2 (en) * 2010-08-06 2013-06-25 Google Inc. Disambiguating input based on context
US8719006B2 (en) 2010-08-27 2014-05-06 Apple Inc. Combined statistical and rule-based part-of-speech tagging for text-to-speech synthesis
DE102010045974A1 (de) * 2010-09-18 2012-03-22 Volkswagen Ag Anzeige- und Bedienvorrichtung in einem Kraftfahrzeug
US8719014B2 (en) 2010-09-27 2014-05-06 Apple Inc. Electronic device with text error correction based on voice recognition data
US8594997B2 (en) * 2010-09-27 2013-11-26 Sap Ag Context-aware conversational user interface
US8498991B2 (en) * 2010-10-06 2013-07-30 GM Global Technology Operations LLC Neighborhood guide for semantic search system and method to support local POI discovery
WO2012048416A2 (en) * 2010-10-15 2012-04-19 Intelligent Mechatronic Systems Inc. Implicit association and polymorphism driven human machine interaction
US8631122B2 (en) * 2010-11-29 2014-01-14 Viralheat, Inc. Determining demographics based on user interaction
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US10515147B2 (en) 2010-12-22 2019-12-24 Apple Inc. Using statistical language models for contextual lookup
US20130332170A1 (en) * 2010-12-30 2013-12-12 Gal Melamed Method and system for processing content
EP2659231B1 (en) * 2010-12-31 2019-04-24 TomTom Navigation B.V. Navigation apparatus and method of providing weather condition information
US8562434B2 (en) * 2011-01-16 2013-10-22 Google Inc. Method and system for sharing speech recognition program profiles for an application
US8781836B2 (en) 2011-02-22 2014-07-15 Apple Inc. Hearing assistance system for providing consistent human speech
US8688453B1 (en) * 2011-02-28 2014-04-01 Nuance Communications, Inc. Intent mining via analysis of utterances
US8630860B1 (en) * 2011-03-03 2014-01-14 Nuance Communications, Inc. Speaker and call characteristic sensitive open voice search
KR20140088836A (ko) * 2011-03-28 2014-07-11 암비엔즈 음향 문맥을 활용하여 탐색하는 방법들 및 시스템들
US9679561B2 (en) 2011-03-28 2017-06-13 Nuance Communications, Inc. System and method for rapid customization of speech recognition models
US8326338B1 (en) * 2011-03-29 2012-12-04 OnAir3G Holdings Ltd. Synthetic radio channel utilizing mobile telephone networks and VOIP
US20180143989A1 (en) * 2016-11-18 2018-05-24 Jagadeshwar Nomula System to assist users of a software application
US9368107B2 (en) * 2011-04-20 2016-06-14 Nuance Communications, Inc. Permitting automated speech command discovery via manual event to command mapping
US9493130B2 (en) * 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
US20120310642A1 (en) 2011-06-03 2012-12-06 Apple Inc. Automatically creating a mapping between text data and audio data
US9639825B1 (en) * 2011-06-14 2017-05-02 Amazon Technologies, Inc. Securing multifactor authentication
US9628875B1 (en) 2011-06-14 2017-04-18 Amazon Technologies, Inc. Provisioning a device to be an authentication device
US8812294B2 (en) 2011-06-21 2014-08-19 Apple Inc. Translating phrases from one language into another using an order-based set of declarative rules
US8706472B2 (en) 2011-08-11 2014-04-22 Apple Inc. Method for disambiguating multiple readings in language conversion
US8762156B2 (en) 2011-09-28 2014-06-24 Apple Inc. Speech recognition repair using contextual information
CN108337380B (zh) * 2011-09-30 2022-08-19 苹果公司 自动调整用户界面以用于免提交互
AU2015203483A1 (en) * 2011-09-30 2015-07-16 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US9256396B2 (en) * 2011-10-10 2016-02-09 Microsoft Technology Licensing, Llc Speech recognition for context switching
WO2013101045A1 (en) * 2011-12-29 2013-07-04 Intel Corporation Navigation systems and associated methods
US9487167B2 (en) * 2011-12-29 2016-11-08 Intel Corporation Vehicular speech recognition grammar selection based upon captured or proximity information
US9909878B2 (en) * 2012-03-05 2018-03-06 Here Global B.V. Method and apparatus for triggering conveyance of guidance information
US20130238332A1 (en) * 2012-03-06 2013-09-12 Apple Inc. Automatic input signal recognition using location based language modeling
JP5698864B2 (ja) * 2012-03-07 2015-04-08 パイオニア株式会社 ナビゲーション装置、サーバ、ナビゲーション方法及びプログラム
US8744771B2 (en) * 2012-03-26 2014-06-03 Navteq B.V. Reverse natural guidance
US8346563B1 (en) 2012-04-10 2013-01-01 Artificial Solutions Ltd. System and methods for delivering advanced natural language interaction applications
US10489433B2 (en) 2012-08-02 2019-11-26 Artificial Solutions Iberia SL Natural language data analytics platform
US9093076B2 (en) 2012-04-30 2015-07-28 2236008 Ontario Inc. Multipass ASR controlling multiple applications
US9431012B2 (en) * 2012-04-30 2016-08-30 2236008 Ontario Inc. Post processing of natural language automatic speech recognition
US9127950B2 (en) * 2012-05-03 2015-09-08 Honda Motor Co., Ltd. Landmark-based location belief tracking for voice-controlled navigation system
KR101977072B1 (ko) * 2012-05-07 2019-05-10 엘지전자 주식회사 음성 파일과 관련된 텍스트의 표시 방법 및 이를 구현한 전자기기
US8775442B2 (en) 2012-05-15 2014-07-08 Apple Inc. Semantic search using a single-source semantic model
JP2013242763A (ja) * 2012-05-22 2013-12-05 Clarion Co Ltd 対話装置、対話システム、および対話制御方法
US20130325482A1 (en) * 2012-05-29 2013-12-05 GM Global Technology Operations LLC Estimating congnitive-load in human-machine interaction
US10019994B2 (en) 2012-06-08 2018-07-10 Apple Inc. Systems and methods for recognizing textual identifiers within a plurality of words
US20130332168A1 (en) * 2012-06-08 2013-12-12 Samsung Electronics Co., Ltd. Voice activated search and control for applications
US10354650B2 (en) * 2012-06-26 2019-07-16 Google Llc Recognizing speech with mixed speech recognition models to generate transcriptions
US9064492B2 (en) 2012-07-09 2015-06-23 Nuance Communications, Inc. Detecting potential significant errors in speech recognition results
CN103020098A (zh) * 2012-07-11 2013-04-03 腾讯科技(深圳)有限公司 提供具有语音识别功能的导航业务的搜索方法
US20140019126A1 (en) * 2012-07-13 2014-01-16 International Business Machines Corporation Speech-to-text recognition of non-dictionary words using location data
US20140032466A1 (en) * 2012-07-30 2014-01-30 Boris Kaplan Computer system of artificial intelligence of a cyborg or an android, wherein a received signal-reaction of the computer system of artificial intelligence of the cyborg or the android, an association of the computer system of artificial intelligence of the cyborg or the android, a thought of the computer system of artificial intelligence of the cyborg or the android are substantiated, and a working method of this computer system of artificial intelligence of a cyborg or an android
US20140039893A1 (en) * 2012-07-31 2014-02-06 Sri International Personalized Voice-Driven User Interfaces for Remote Multi-User Services
US8831957B2 (en) * 2012-08-01 2014-09-09 Google Inc. Speech recognition models based on location indicia
US9946699B1 (en) * 2012-08-29 2018-04-17 Intuit Inc. Location-based speech recognition for preparation of electronic tax return
US8874553B2 (en) * 2012-08-30 2014-10-28 Wal-Mart Stores, Inc. Establishing “is a” relationships for a taxonomy
US10026394B1 (en) * 2012-08-31 2018-07-17 Amazon Technologies, Inc. Managing dialogs on a speech recognition platform
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US8935167B2 (en) 2012-09-25 2015-01-13 Apple Inc. Exemplar-based latent perceptual modeling for automatic speech recognition
WO2014055181A1 (en) * 2012-10-01 2014-04-10 Nuance Communications, Inc. Systems and methods for providing a voice agent user interface
US20140095167A1 (en) * 2012-10-01 2014-04-03 Nuance Communication, Inc. Systems and methods for providing a voice agent user interface
US10276157B2 (en) * 2012-10-01 2019-04-30 Nuance Communications, Inc. Systems and methods for providing a voice agent user interface
US9230560B2 (en) * 2012-10-08 2016-01-05 Nant Holdings Ip, Llc Smart home automation systems and methods
US20140114646A1 (en) * 2012-10-24 2014-04-24 Sap Ag Conversation analysis system for solution scoping and positioning
US20140122084A1 (en) * 2012-10-25 2014-05-01 Nuance Communications, Inc. Data Search Service
US9558275B2 (en) * 2012-12-13 2017-01-31 Microsoft Technology Licensing, Llc Action broker
US9097548B2 (en) 2013-01-07 2015-08-04 Televav, Inc. Content delivery system with natural language mechanism and method of operation thereof
KR20140093303A (ko) * 2013-01-07 2014-07-28 삼성전자주식회사 디스플레이 장치 및 그의 제어 방법
US9922639B1 (en) * 2013-01-11 2018-03-20 Amazon Technologies, Inc. User feedback for speech interactions
US9721587B2 (en) 2013-01-24 2017-08-01 Microsoft Technology Licensing, Llc Visual feedback for speech recognition system
US10102845B1 (en) * 2013-02-25 2018-10-16 Amazon Technologies, Inc. Interpreting nonstandard terms in language processing using text-based communications
US11741090B1 (en) 2013-02-26 2023-08-29 Richard Paiz Site rank codex search patterns
US11809506B1 (en) 2013-02-26 2023-11-07 Richard Paiz Multivariant analyzing replicating intelligent ambience evolving system
US9245008B2 (en) 2013-03-12 2016-01-26 International Business Machines Corporation Detecting and executing data re-ingestion to improve accuracy in a NLP system
US10394863B2 (en) 2013-03-12 2019-08-27 International Business Machines Corporation Identifying a stale data source to improve NLP accuracy
US10572476B2 (en) 2013-03-14 2020-02-25 Apple Inc. Refining a search based on schedule items
US9733821B2 (en) 2013-03-14 2017-08-15 Apple Inc. Voice control to diagnose inadvertent activation of accessibility features
US9977779B2 (en) 2013-03-14 2018-05-22 Apple Inc. Automatic supplementation of word correction dictionaries
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
US10642574B2 (en) 2013-03-14 2020-05-05 Apple Inc. Device, method, and graphical user interface for outputting captions
AU2014233517B2 (en) 2013-03-15 2017-05-25 Apple Inc. Training an at least partial voice command system
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
US9201865B2 (en) * 2013-03-15 2015-12-01 Bao Tran Automated assistance for user request that determines semantics by domain, task, and parameter
US11314746B2 (en) 2013-03-15 2022-04-26 Cision Us Inc. Processing unstructured data streams using continuous queries
US10078487B2 (en) 2013-03-15 2018-09-18 Apple Inc. Context-sensitive handling of interruptions
US10811004B2 (en) * 2013-03-28 2020-10-20 Nuance Communications, Inc. Auto-generation of parsing grammars from a concept ontology
US9805718B2 (en) * 2013-04-19 2017-10-31 Sri Internaitonal Clarifying natural language input using targeted questions
US8768687B1 (en) * 2013-04-29 2014-07-01 Google Inc. Machine translation of indirect speech
US9208142B2 (en) 2013-05-20 2015-12-08 International Business Machines Corporation Analyzing documents corresponding to demographics
US10579835B1 (en) * 2013-05-22 2020-03-03 Sri International Semantic pre-processing of natural language input in a virtual personal assistant
US9431008B2 (en) 2013-05-29 2016-08-30 Nuance Communications, Inc. Multiple parallel dialogs in smart phone applications
US10380105B2 (en) * 2013-06-06 2019-08-13 International Business Machines Corporation QA based on context aware, real-time information from mobile devices
KR20140144104A (ko) * 2013-06-10 2014-12-18 삼성전자주식회사 전자기기 및 이의 서비스 제공 방법
AU2014278595B2 (en) 2013-06-13 2017-04-06 Apple Inc. System and method for emergency calls initiated by voice command
US9159317B2 (en) * 2013-06-14 2015-10-13 Mitsubishi Electric Research Laboratories, Inc. System and method for recognizing speech
USRE49014E1 (en) 2013-06-19 2022-04-05 Panasonic Intellectual Property Corporation Of America Voice interaction method, and device
US20140379753A1 (en) * 2013-06-25 2014-12-25 Hewlett-Packard Development Company, L.P. Ambiguous queries in configuration management databases
KR102053820B1 (ko) * 2013-07-02 2019-12-09 삼성전자주식회사 서버 및 그 제어방법과, 영상처리장치 및 그 제어방법
KR102086784B1 (ko) * 2013-07-15 2020-03-09 삼성전자주식회사 음성 명령 인식을 위한 장치 및 방법
KR101749009B1 (ko) 2013-08-06 2017-06-19 애플 인크. 원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화
US9767489B1 (en) * 2013-08-30 2017-09-19 Google Inc. Content item impression effect decay
US9886950B2 (en) * 2013-09-08 2018-02-06 Intel Corporation Automatic generation of domain models for virtual personal assistants
MX2016003061A (es) * 2013-09-13 2016-10-28 Fishberg Keith Sistema de reservacion para la busqueda y compra de comodidades, servicios especiales y comidas/bebidas.
US20150095114A1 (en) * 2013-09-30 2015-04-02 Elwha Llc Employment related information center associated with communication and control system and method for wireless electric vehicle electrical energy transfer
US10229450B2 (en) * 2013-10-02 2019-03-12 Paypal, Inc. Generating sale transactions from voice data input by a user
US20150100240A1 (en) * 2013-10-08 2015-04-09 Toyota Jidosha Kabushiki Kaisha Generating Dynamic Vocabulary for Personalized Speech Recognition
US9484025B2 (en) * 2013-10-15 2016-11-01 Toyota Jidosha Kabushiki Kaisha Configuring dynamic custom vocabulary for personalized speech recognition
US9263032B2 (en) * 2013-10-24 2016-02-16 Honeywell International Inc. Voice-responsive building management system
US9530416B2 (en) 2013-10-28 2016-12-27 At&T Intellectual Property I, L.P. System and method for managing models for embedded speech and language processing
US9666188B2 (en) 2013-10-29 2017-05-30 Nuance Communications, Inc. System and method of performing automatic speech recognition using local private data
US10430024B2 (en) * 2013-11-13 2019-10-01 Microsoft Technology Licensing, Llc Media item selection using user-specific grammar
US10175938B2 (en) * 2013-11-19 2019-01-08 Microsoft Technology Licensing, Llc Website navigation via a voice user interface
US9507849B2 (en) * 2013-11-28 2016-11-29 Soundhound, Inc. Method for combining a query and a communication command in a natural language computer system
US20150169285A1 (en) * 2013-12-18 2015-06-18 Microsoft Corporation Intent-based user experience
EP3084714A4 (en) * 2013-12-20 2017-08-02 Robert Bosch GmbH System and method for dialog-enabled context-dependent and user-centric content presentation
CN103761462B (zh) * 2013-12-25 2016-10-12 科大讯飞股份有限公司 一种通过声纹识别进行汽车驾驶个性化设置的方法
US20150278737A1 (en) * 2013-12-30 2015-10-01 Google Inc. Automatic Calendar Event Generation with Structured Data from Free-Form Speech
KR101551037B1 (ko) * 2013-12-31 2015-09-07 현대자동차주식회사 차량에서의 정보 제공을 위한 시스템
US9514748B2 (en) 2014-01-15 2016-12-06 Microsoft Technology Licensing, Llc Digital personal assistant interaction with impersonations and rich multimedia in responses
US9722859B2 (en) 2014-01-23 2017-08-01 International Business Machines Corporation Evaluation of field replaceable unit dependencies and connections
US11386886B2 (en) * 2014-01-28 2022-07-12 Lenovo (Singapore) Pte. Ltd. Adjusting speech recognition using contextual information
CN108469937B (zh) * 2014-03-26 2020-11-20 联想(北京)有限公司 一种信息处理方法及电子设备
RU2580431C2 (ru) 2014-03-27 2016-04-10 Общество С Ограниченной Ответственностью "Яндекс" Способ и сервер для обработки поискового запроса и машиночитаемый носитель
US9462230B1 (en) * 2014-03-31 2016-10-04 Amazon Technologies Catch-up video buffering
US20150302355A1 (en) * 2014-04-17 2015-10-22 The Boeing Company Systems and methods for managing job candidate information and proposals
US10331095B2 (en) 2014-04-29 2019-06-25 Cox Communications Systems and methods for development of an automation control service
US20150317973A1 (en) * 2014-04-30 2015-11-05 GM Global Technology Operations LLC Systems and methods for coordinating speech recognition
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US9261371B2 (en) * 2014-05-16 2016-02-16 Honeywell International Inc. System and method of voice based personalized interactive evacuation guidance
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US11314826B2 (en) 2014-05-23 2022-04-26 Samsung Electronics Co., Ltd. Method for searching and device thereof
US9990433B2 (en) 2014-05-23 2018-06-05 Samsung Electronics Co., Ltd. Method for searching and device thereof
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US10432742B2 (en) * 2014-06-06 2019-10-01 Google Llc Proactive environment-based chat information system
US9462112B2 (en) * 2014-06-19 2016-10-04 Microsoft Technology Licensing, Llc Use of a digital assistant in communications
US10102195B2 (en) 2014-06-25 2018-10-16 Amazon Technologies, Inc. Attribute fill using text extraction
US9418663B2 (en) 2014-07-31 2016-08-16 Google Inc. Conversational agent with a particular spoken style of speech
US20160034603A1 (en) * 2014-08-01 2016-02-04 Edward Brian Depenbrock Data processing system
US9548066B2 (en) * 2014-08-11 2017-01-17 Amazon Technologies, Inc. Voice application architecture
US9786276B2 (en) * 2014-08-25 2017-10-10 Honeywell International Inc. Speech enabled management system
US20160076902A1 (en) * 2014-09-12 2016-03-17 Microsoft Corporation Colloquial or user-favored route based navigation instructions
KR102348084B1 (ko) * 2014-09-16 2022-01-10 삼성전자주식회사 영상표시장치, 영상표시장치의 구동방법 및 컴퓨터 판독가능 기록매체
US9626703B2 (en) 2014-09-16 2017-04-18 Voicebox Technologies Corporation Voice commerce
US9898459B2 (en) 2014-09-16 2018-02-20 Voicebox Technologies Corporation Integration of domain information into state transitions of a finite state transducer for natural language processing
US20160092160A1 (en) * 2014-09-26 2016-03-31 Intel Corporation User adaptive interfaces
US9606986B2 (en) 2014-09-29 2017-03-28 Apple Inc. Integrated word N-gram and class M-gram language models
US10817672B2 (en) * 2014-10-01 2020-10-27 Nuance Communications, Inc. Natural language understanding (NLU) processing based on user-specified interests
US9406294B2 (en) * 2014-10-01 2016-08-02 Shout to Me, LLC Information-sharing system
US10068256B2 (en) 2014-10-08 2018-09-04 Microsoft Technology Licensing, Llc User directed information collections
EP3207467A4 (en) 2014-10-15 2018-05-23 VoiceBox Technologies Corporation System and method for providing follow-up responses to prior natural language inputs of a user
US11288328B2 (en) * 2014-10-22 2022-03-29 Narrative Science Inc. Interactive and conversational data exploration
CN104360897B (zh) 2014-10-29 2017-09-22 百度在线网络技术(北京)有限公司 对话处理方法和对话管理系统
US20160127294A1 (en) * 2014-10-31 2016-05-05 Ford Global Technologies, Llc Method and Apparatus for Location Related Social Reminder Provision
US10431214B2 (en) * 2014-11-26 2019-10-01 Voicebox Technologies Corporation System and method of determining a domain and/or an action related to a natural language input
US10614799B2 (en) 2014-11-26 2020-04-07 Voicebox Technologies Corporation System and method of providing intent predictions for an utterance prior to a system detection of an end of the utterance
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
EP3040682B1 (en) * 2015-01-05 2020-02-26 Harman International Industries, Incorporated Learning and predictive navigation system
US11162806B2 (en) 2015-01-05 2021-11-02 Harman International Industries, Incorporated Learning and predictive navigation system
US9633019B2 (en) 2015-01-05 2017-04-25 International Business Machines Corporation Augmenting an information request
US9628415B2 (en) * 2015-01-07 2017-04-18 International Business Machines Corporation Destination-configured topic information updates
US10028116B2 (en) * 2015-02-10 2018-07-17 Microsoft Technology Licensing, Llc De-siloing applications for personalization and task completion services
US10176219B2 (en) 2015-03-13 2019-01-08 Microsoft Technology Licensing, Llc Interactive reformulation of speech queries
US10418032B1 (en) * 2015-04-10 2019-09-17 Soundhound, Inc. System and methods for a virtual assistant to manage and use context in a natural language dialog
US20160307562A1 (en) * 2015-04-14 2016-10-20 GM Global Technology Operations LLC Controlling speech recognition systems based on radio station availability
CN106155298B (zh) * 2015-04-21 2019-11-08 阿里巴巴集团控股有限公司 人机识别方法及装置、行为特征数据的采集方法及装置
US20160320198A1 (en) * 2015-04-29 2016-11-03 Ford Global Technologies, Llc Ride-sharing routing using contextual constraints
US10796248B2 (en) 2015-04-29 2020-10-06 Ford Global Technologies, Llc Ride-sharing joint rental groups
US9953648B2 (en) 2015-05-11 2018-04-24 Samsung Electronics Co., Ltd. Electronic device and method for controlling the same
US10133999B2 (en) 2015-06-01 2018-11-20 AffectLayer, Inc. Analyzing conversations to automatically identify deals at risk
US10324979B2 (en) 2015-06-01 2019-06-18 AffectLayer, Inc. Automatic generation of playlists from conversations
US10360911B2 (en) 2015-06-01 2019-07-23 AffectLayer, Inc. Analyzing conversations to automatically identify product features that resonate with customers
US10367940B2 (en) 2015-06-01 2019-07-30 AffectLayer, Inc. Analyzing conversations to automatically identify product feature requests
US10110743B2 (en) 2015-06-01 2018-10-23 AffectLayer, Inc. Automatic pattern recognition in conversations
US10387573B2 (en) 2015-06-01 2019-08-20 AffectLayer, Inc. Analyzing conversations to automatically identify customer pain points
US10679013B2 (en) 2015-06-01 2020-06-09 AffectLayer, Inc. IoT-based call assistant device
US10181326B2 (en) 2015-06-01 2019-01-15 AffectLayer, Inc. Analyzing conversations to automatically identify action items
CN104967789B (zh) * 2015-06-16 2016-06-01 福建省泉州市气象局 城市窗口天气配音的自动处理方法及其系统
DE102015211101A1 (de) 2015-06-17 2016-12-22 Volkswagen Aktiengesellschaft Spracherkennungssystem sowie Verfahren zum Betreiben eines Spracherkennungssystems mit einer mobilen Einheit und einem externen Server
US9530426B1 (en) * 2015-06-24 2016-12-27 Microsoft Technology Licensing, Llc Filtering sounds for conferencing applications
US20180190272A1 (en) * 2015-06-30 2018-07-05 Nuance Communications, Inc. Method and apparatus for processing user input
DE102015213722B4 (de) * 2015-07-21 2020-01-23 Volkswagen Aktiengesellschaft Verfahren zum Betreiben eines Spracherkennungssystems in einem Fahrzeug und Spracherkennungssystem
WO2017019929A1 (en) 2015-07-29 2017-02-02 Simplifeye, Inc. System and method for facilitating access to a database
US10255921B2 (en) * 2015-07-31 2019-04-09 Google Llc Managing dialog data providers
US10178218B1 (en) 2015-09-04 2019-01-08 Vishal Vadodaria Intelligent agent / personal virtual assistant with animated 3D persona, facial expressions, human gestures, body movements and mental states
EP3142029A1 (en) 2015-09-11 2017-03-15 Google, Inc. Disambiguating join paths for natural language queries
US11335080B2 (en) * 2015-09-21 2022-05-17 International Business Machines Corporation System for suggesting search terms
US10650317B2 (en) * 2015-09-21 2020-05-12 Google Llc Detecting and correcting potential errors in user behavior
CN108701454B (zh) 2015-10-21 2023-05-30 谷歌有限责任公司 对话系统中的参数收集和自动对话生成
DE102015014206B4 (de) * 2015-11-04 2020-06-25 Audi Ag Verfahren und Vorrichtung zum Auswählen eines Navigationsziels aus einer von mehreren Sprachregionen mittels Spracheingabe
EP3384475B1 (en) * 2015-12-06 2021-12-22 Cerence Operating Company System and method of conversational adjustment based on user's cognitive state
KR102535044B1 (ko) * 2015-12-08 2023-05-23 삼성전자주식회사 단말장치, 서버 및 이벤트 제안방법
US9940929B2 (en) * 2015-12-09 2018-04-10 Lenovo (Singapore) Pte. Ltd. Extending the period of voice recognition
US10796693B2 (en) * 2015-12-09 2020-10-06 Lenovo (Singapore) Pte. Ltd. Modifying input based on determined characteristics
US10268756B2 (en) 2015-12-18 2019-04-23 Here Global B.V. Method and apparatus for providing natural language input in a cartographic system
US10388280B2 (en) * 2016-01-27 2019-08-20 Motorola Mobility Llc Method and apparatus for managing multiple voice operation trigger phrases
WO2017138777A1 (en) * 2016-02-12 2017-08-17 Samsung Electronics Co., Ltd. Method and electronic device for performing voice based actions
JP2017156511A (ja) * 2016-03-01 2017-09-07 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US20170294187A1 (en) * 2016-04-06 2017-10-12 Honeywell International Inc. Systems and method for performing speech recognition
EP4030295A1 (en) * 2016-04-18 2022-07-20 Google LLC Automated assistant invocation of appropriate agent
JP6804865B2 (ja) * 2016-04-21 2020-12-23 クラリオン株式会社 情報提供システム、情報提供装置および情報提供方法
US10139243B2 (en) * 2016-04-30 2018-11-27 Toyota Motor Engineering & Manufacturing North America, Inc. High level instruction for navigational routing systems
US10248452B2 (en) * 2016-05-20 2019-04-02 Microsoft Technology Licensing, Llc Interaction framework for executing user instructions with online services
US10282218B2 (en) * 2016-06-07 2019-05-07 Google Llc Nondeterministic task initiation by a personal assistant module
US10339934B2 (en) * 2016-06-27 2019-07-02 Google Llc Asynchronous processing of user requests
US10451430B2 (en) * 2016-07-26 2019-10-22 International Business Machines Corporation Navigation alerting using conversation analysis
US10331784B2 (en) 2016-07-29 2019-06-25 Voicebox Technologies Corporation System and method of disambiguating natural language processing requests
US10250582B2 (en) 2016-08-08 2019-04-02 Microsoft Technology Licensing, Llc Secure private location based services
US10438264B1 (en) 2016-08-31 2019-10-08 Amazon Technologies, Inc. Artificial intelligence feature extraction service for products
US11068918B2 (en) * 2016-09-22 2021-07-20 Magna Electronics Inc. Vehicle communication system
JP2018072560A (ja) * 2016-10-28 2018-05-10 富士通株式会社 情報処理システム、情報処理装置及び情報処理方法
US10276155B2 (en) * 2016-12-22 2019-04-30 Fujitsu Limited Media capture and process system
US10831366B2 (en) 2016-12-29 2020-11-10 Google Llc Modality learning on mobile devices
US10373515B2 (en) 2017-01-04 2019-08-06 International Business Machines Corporation System and method for cognitive intervention on human interactions
US10235990B2 (en) 2017-01-04 2019-03-19 International Business Machines Corporation System and method for cognitive intervention on human interactions
EP3566226A4 (en) * 2017-01-05 2020-06-10 Nuance Communications, Inc. SELECTION SYSTEM AND METHOD
US10249298B2 (en) 2017-01-11 2019-04-02 Here Global B.V. Method and apparatus for providing global voice-based entry of geographic information in a device
US10318639B2 (en) 2017-02-03 2019-06-11 International Business Machines Corporation Intelligent action recommendation
US11100384B2 (en) 2017-02-14 2021-08-24 Microsoft Technology Licensing, Llc Intelligent device user interactions
US10467510B2 (en) 2017-02-14 2019-11-05 Microsoft Technology Licensing, Llc Intelligent assistant
US11010601B2 (en) 2017-02-14 2021-05-18 Microsoft Technology Licensing, Llc Intelligent assistant device communicating non-verbal cues
US10755317B2 (en) 2017-03-11 2020-08-25 International Business Machines Corporation Managing a set of offers using a dialogue
US20180270343A1 (en) * 2017-03-20 2018-09-20 Motorola Mobility Llc Enabling event-driven voice trigger phrase on an electronic device
US10621980B2 (en) * 2017-03-21 2020-04-14 Harman International Industries, Inc. Execution of voice commands in a multi-device system
US10636418B2 (en) 2017-03-22 2020-04-28 Google Llc Proactive incorporation of unsolicited content into human-to-computer dialogs
WO2018190099A1 (ja) * 2017-04-10 2018-10-18 ヤマハ株式会社 音声提供装置、音声提供方法及びプログラム
US10605609B2 (en) 2017-05-03 2020-03-31 Microsoft Technology Licensing, Llc Coupled interactive devices
US9865260B1 (en) * 2017-05-03 2018-01-09 Google Llc Proactive incorporation of unsolicited content into human-to-computer dialogs
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
US10677599B2 (en) * 2017-05-22 2020-06-09 At&T Intellectual Property I, L.P. Systems and methods for providing improved navigation through interactive suggestion of improved solutions along a path of waypoints
US10983753B2 (en) 2017-06-09 2021-04-20 International Business Machines Corporation Cognitive and interactive sensor based smart home solution
CN110770819B (zh) 2017-06-15 2023-05-12 北京嘀嘀无限科技发展有限公司 语音识别系统和方法
WO2018237247A1 (en) * 2017-06-23 2018-12-27 Ascension Health Alliance SYSTEMS AND METHODS OF USING ARTIFICIAL INTELLIGENCE CONTROL UNIT BASED ON VOICE
US10446147B1 (en) * 2017-06-27 2019-10-15 Amazon Technologies, Inc. Contextual voice user interface
US10742435B2 (en) 2017-06-29 2020-08-11 Google Llc Proactive provision of new content to group chat participants
US10670415B2 (en) 2017-07-06 2020-06-02 Here Global B.V. Method and apparatus for providing mobility-based language model adaptation for navigational speech interfaces
DE102017212215B4 (de) * 2017-07-17 2022-01-20 Audi Ag Bedienverfahren für ein Gerät eines Kraftfahrzeugs, Bedienvorrichtung und Kraftfahrzeug
US10552680B2 (en) 2017-08-08 2020-02-04 Here Global B.V. Method, apparatus and computer program product for disambiguation of points of-interest in a field of view
US10817578B2 (en) * 2017-08-16 2020-10-27 Wipro Limited Method and system for providing context based adaptive response to user interactions
DE102017216513A1 (de) * 2017-09-19 2018-09-27 Audi Ag Verfahren zum Verarbeiten einer Spracheingabe, über welche ein Benutzer eine Ortsangabe an einem Bedienterminal vorgibt, sowie Bedienvorrichtung und Kraftfahrzeug
US10431219B2 (en) * 2017-10-03 2019-10-01 Google Llc User-programmable automated assistant
CN110741347B (zh) * 2017-10-03 2023-08-01 谷歌有限责任公司 车辆环境中的多个数字助理协调
US10552410B2 (en) 2017-11-14 2020-02-04 Mindbridge Analytics Inc. Method and system for presenting a user selectable interface in response to a natural language request
US11068788B2 (en) * 2017-12-03 2021-07-20 Lyft, Inc. Automatic generation of human-understandable geospatial descriptors
US10713007B2 (en) 2017-12-12 2020-07-14 Amazon Technologies, Inc. Architecture for a hub configured to control a second device while a connection to a remote system is unavailable
WO2019117735A1 (en) 2017-12-13 2019-06-20 Motorola Solutions, Inc System, device, and method for responding to location-variable group electronic digital assistant inquiries
US11082463B2 (en) * 2017-12-22 2021-08-03 Hillel Felman Systems and methods for sharing personal information
RU2711104C2 (ru) 2017-12-27 2020-01-15 Общество С Ограниченной Ответственностью "Яндекс" Способ и компьютерное устройство для определения намерения, связанного с запросом для создания зависящего от намерения ответа
RU2707149C2 (ru) 2017-12-27 2019-11-22 Общество С Ограниченной Ответственностью "Яндекс" Устройство и способ модифицирования вывода аудиосигнала устройства
USD882547S1 (en) 2017-12-27 2020-04-28 Yandex Europe Ag Speaker device
RU2693332C1 (ru) 2017-12-29 2019-07-02 Общество С Ограниченной Ответственностью "Яндекс" Способ и компьютерное устройство для выбора текущего зависящего от контекста ответа для текущего пользовательского запроса
US20190215646A1 (en) 2018-01-05 2019-07-11 Nuance Communications, Inc. Geospecific information system and method
US11354521B2 (en) 2018-03-07 2022-06-07 Google Llc Facilitating communications with automated assistants in multiple languages
AU2018412575B2 (en) 2018-03-07 2021-03-18 Google Llc Facilitating end-to-end communications with automated assistants in multiple languages
US10528669B2 (en) * 2018-03-20 2020-01-07 Wipro Limited Method and device for extracting causal from natural language sentences for intelligent systems
US11438654B2 (en) 2018-03-30 2022-09-06 Rhapsody International Inc. Geographically tailored content management systems and methods
EP3775781A4 (en) * 2018-04-06 2021-12-29 D&M Holdings, Inc. Shared context manager for cohabitating agents
US11821743B2 (en) * 2018-04-18 2023-11-21 Ford Global Technologies, Llc Dynamic promotions based on vehicle positioning and route determinations
US11195102B2 (en) * 2018-04-23 2021-12-07 International Business Machines Corporation Navigation and cognitive dialog assistance
EP3753016A4 (en) 2018-05-02 2021-05-05 Samsung Electronics Co., Ltd. CONTEXTUAL RECOMMENDATION
CN108731699A (zh) * 2018-05-09 2018-11-02 上海博泰悦臻网络技术服务有限公司 智能终端及其基于语音的导航路线重新规划方法、及车辆
US11487501B2 (en) * 2018-05-16 2022-11-01 Snap Inc. Device control using audio data
KR20190131741A (ko) * 2018-05-17 2019-11-27 현대자동차주식회사 대화 시스템 및 대화 처리 방법
CN110097883B (zh) * 2018-06-01 2020-04-28 苹果公司 用于在主设备处访问配套设备的呼叫功能的语音交互
CN108881466B (zh) * 2018-07-04 2020-06-26 百度在线网络技术(北京)有限公司 交互方法和装置
WO2020040775A1 (en) * 2018-08-23 2020-02-27 Google Llc Regulating assistant responsiveness according to characteristics of a multi-assistant environment
CN110874202A (zh) * 2018-08-29 2020-03-10 阿里巴巴集团控股有限公司 交互方法、设备、介质和操作系统
WO2020051239A1 (en) * 2018-09-04 2020-03-12 Uber Technologies, Inc. Network computer system to generate voice response communications
US10909374B2 (en) * 2018-09-07 2021-02-02 Intel Corporation Technologies for identifying unrecognizable objects in autonomous systems
US11526670B2 (en) 2018-09-28 2022-12-13 The Mitre Corporation Machine learning of colloquial place names
US11195524B2 (en) * 2018-10-31 2021-12-07 Walmart Apollo, Llc System and method for contextual search query revision
US11404058B2 (en) 2018-10-31 2022-08-02 Walmart Apollo, Llc System and method for handling multi-turn conversations and context management for voice enabled ecommerce transactions
US11232799B1 (en) * 2018-10-31 2022-01-25 Amazon Technologies, Inc. Speech recognition routing in a provider network
US11238850B2 (en) 2018-10-31 2022-02-01 Walmart Apollo, Llc Systems and methods for e-commerce API orchestration using natural language interfaces
US11183176B2 (en) 2018-10-31 2021-11-23 Walmart Apollo, Llc Systems and methods for server-less voice applications
US10963494B2 (en) 2018-11-29 2021-03-30 International Business Machines Corporation Interface for initiating an integration task
US10872206B2 (en) 2018-12-03 2020-12-22 Bank Of America Corporation System and framework for dynamic regulatory change management
US11430435B1 (en) 2018-12-13 2022-08-30 Amazon Technologies, Inc. Prompts for user feedback
US11315590B2 (en) 2018-12-21 2022-04-26 S&P Global Inc. Voice and graphical user interface
WO2020136733A1 (ja) * 2018-12-25 2020-07-02 富士通株式会社 対話装置、対話方法及び対話プログラム
US11455982B2 (en) * 2019-01-07 2022-09-27 Cerence Operating Company Contextual utterance resolution in multimodal systems
WO2020153028A1 (ja) * 2019-01-22 2020-07-30 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
EP4339940A2 (en) * 2019-02-12 2024-03-20 Google LLC. Directing a vehicle client device to use on-device functionality
CN110442438B (zh) * 2019-02-26 2022-06-07 杭州蓦然认知科技有限公司 一种多设备之间的任务协作方法、设备及系统
US11003419B2 (en) 2019-03-19 2021-05-11 Spotify Ab Refinement of voice query interpretation
CN110136705B (zh) * 2019-04-10 2022-06-14 华为技术有限公司 一种人机交互的方法和电子设备
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11346683B2 (en) * 2019-06-03 2022-05-31 Here Global B.V. Method and apparatus for providing argumentative navigation routing
EP3770904A1 (en) * 2019-07-22 2021-01-27 Bayerische Motoren Werke Aktiengesellschaft Multi-domain trainable dialogue agent
US11651163B2 (en) 2019-07-22 2023-05-16 Capital One Services, Llc Multi-turn dialogue response generation with persona modeling
US20210065089A1 (en) * 2019-08-29 2021-03-04 Cerence Operating Company Errand plotter system and method
USD947152S1 (en) 2019-09-10 2022-03-29 Yandex Europe Ag Speaker device
KR20190113693A (ko) * 2019-09-18 2019-10-08 엘지전자 주식회사 단어 사용 빈도를 고려하여 사용자의 음성을 인식하는 인공 지능 장치 및 그 방법
US11037571B2 (en) * 2019-10-04 2021-06-15 Motorola Solutions, Inc. Speech-based two-way radio assistant
US11567788B1 (en) 2019-10-18 2023-01-31 Meta Platforms, Inc. Generating proactive reminders for assistant systems
US11308284B2 (en) 2019-10-18 2022-04-19 Facebook Technologies, Llc. Smart cameras enabled by assistant systems
CN110738982B (zh) * 2019-10-22 2022-01-28 珠海格力电器股份有限公司 一种请求处理方法、装置及电子设备
CN110992948B (zh) * 2019-11-18 2023-07-25 博泰车联网科技(上海)股份有限公司 基于多轮语音交互的餐厅预订方法及终端
US11514893B2 (en) * 2020-01-29 2022-11-29 Microsoft Technology Licensing, Llc Voice context-aware content manipulation
US11290834B2 (en) 2020-03-04 2022-03-29 Apple Inc. Determining head pose based on room reverberation
US11810578B2 (en) 2020-05-11 2023-11-07 Apple Inc. Device arbitration for digital assistant-based intercom systems
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
JP7354935B2 (ja) * 2020-06-08 2023-10-03 トヨタ自動車株式会社 制御装置、システム、及び判定方法
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
EP4182919A1 (en) 2020-08-12 2023-05-24 Google LLC Interactive voice navigation
US11829720B2 (en) 2020-09-01 2023-11-28 Apple Inc. Analysis and validation of language models
US11206330B1 (en) 2020-09-01 2021-12-21 T-Mobile Usa, Inc. Interactive voice response using intent prediction and a 5G capable device
KR102311218B1 (ko) * 2020-09-07 2021-10-12 고려대학교 산학협력단 영상에 관한 대화 처리 장치, 방법 및 시스템
US11568870B2 (en) 2020-12-02 2023-01-31 Google Llc Automated assistant for facilitating communications through dissimilar messaging features of different applications
US11630644B2 (en) 2021-05-27 2023-04-18 Bank Of America Corporation Service for configuring custom software
US11830489B2 (en) 2021-06-30 2023-11-28 Bank Of America Corporation System and method for speech processing based on response content
WO2023214959A1 (en) * 2022-05-02 2023-11-09 Google Llc Determining places and routes through natural conversation
CN114964300B (zh) * 2022-06-22 2023-03-28 深圳市智远联科技有限公司 一种语音识别方法及导航装置
WO2024019710A1 (en) * 2022-07-20 2024-01-25 Google Llc Ad-hoc navigation instructions

Family Cites Families (710)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4430669A (en) * 1981-05-29 1984-02-07 Payview Limited Transmitting and receiving apparatus for permitting the transmission and reception of multi-tier subscription programs
US4829423A (en) 1983-01-28 1989-05-09 Texas Instruments Incorporated Menu-based natural language understanding system
US5208748A (en) 1985-11-18 1993-05-04 Action Technologies, Inc. Method and apparatus for structuring and managing human communications by explicitly defining the types of communications permitted between participants
US4887212A (en) 1986-10-29 1989-12-12 International Business Machines Corporation Parser for natural language text
US4910784A (en) 1987-07-30 1990-03-20 Texas Instruments Incorporated Low cost speech recognition system and method
CA1268228A (en) 1987-09-14 1990-04-24 Gary Lennartz Voice interactive security system
US5027406A (en) * 1988-12-06 1991-06-25 Dragon Systems, Inc. Method for interactive speech recognition and training
JPH02224100A (ja) * 1989-02-27 1990-09-06 Oki Electric Ind Co Ltd 車載ナビゲーション装置
SE466029B (sv) 1989-03-06 1991-12-02 Ibm Svenska Ab Anordning och foerfarande foer analys av naturligt spraak i ett datorbaserat informationsbehandlingssystem
JPH03129469A (ja) 1989-10-14 1991-06-03 Canon Inc 自然言語処理装置
JP3266246B2 (ja) * 1990-06-15 2002-03-18 インターナシヨナル・ビジネス・マシーンズ・コーポレーシヨン 自然言語解析装置及び方法並びに自然言語解析用知識ベース構築方法
US5164904A (en) 1990-07-26 1992-11-17 Farradyne Systems, Inc. In-vehicle traffic congestion information system
JP2764343B2 (ja) 1990-09-07 1998-06-11 富士通株式会社 節/句境界抽出方式
US5722084A (en) 1990-09-28 1998-02-24 At&T Corp. Cellular/PCS handset NAM download capability using a wide-area paging system
WO1992010037A1 (en) 1990-11-27 1992-06-11 Jacobs Gordon M Digital data converter
US5274560A (en) 1990-12-03 1993-12-28 Audio Navigation Systems, Inc. Sensor free vehicle navigation system utilizing a voice input/output interface for routing a driver from his source point to his destination point
JPH05272983A (ja) * 1991-03-22 1993-10-22 Oki Electric Ind Co Ltd 車載ナビゲーション装置
US5265065A (en) 1991-10-08 1993-11-23 West Publishing Company Method and apparatus for information retrieval from a database by replacing domain specific stemmed phases in a natural language to create a search query
DE69232407T2 (de) 1991-11-18 2002-09-12 Toshiba Kawasaki Kk Sprach-Dialog-System zur Erleichterung von Rechner-Mensch-Wechselwirkung
WO1994020952A1 (en) 1993-03-12 1994-09-15 Sri International Method and apparatus for voice-interactive language instruction
US5608635A (en) * 1992-04-14 1997-03-04 Zexel Corporation Navigation system for a vehicle with route recalculation between multiple locations
US5369575A (en) 1992-05-15 1994-11-29 International Business Machines Corporation Constrained natural language interface for a computer system
US5331554A (en) 1992-12-10 1994-07-19 Ricoh Corporation Method and apparatus for semantic pattern matching for text retrieval
CA2102077C (en) * 1992-12-21 1997-09-16 Steven Lloyd Greenspan Call billing and measurement methods for redirected calls
US5465289A (en) 1993-03-05 1995-11-07 E-Systems, Inc. Cellular based traffic sensor system
US5471318A (en) 1993-04-22 1995-11-28 At&T Corp. Multimedia communications network
US5377350A (en) 1993-04-30 1994-12-27 International Business Machines Corporation System for cooperative communication between local object managers to provide verification for the performance of remote calls by object messages
US5537436A (en) * 1993-06-14 1996-07-16 At&T Corp. Simultaneous analog and digital communication applications
US5983161A (en) * 1993-08-11 1999-11-09 Lemelson; Jerome H. GPS vehicle collision avoidance warning and control system and method
EP0645757B1 (en) * 1993-09-23 2000-04-05 Xerox Corporation Semantic co-occurrence filtering for speech recognition and signal transcription applications
US5475733A (en) 1993-11-04 1995-12-12 At&T Corp. Language accommodated message relaying for hearing impaired callers
CA2118278C (en) 1993-12-21 1999-09-07 J. David Garland Multimedia system
US5748841A (en) 1994-02-25 1998-05-05 Morin; Philippe Supervised contextual language acquisition system
US5533108A (en) 1994-03-18 1996-07-02 At&T Corp. Method and system for routing phone calls based on voice and data transport capability
US5488652A (en) * 1994-04-14 1996-01-30 Northern Telecom Limited Method and apparatus for training speech recognition algorithms for directory assistance applications
US5652570A (en) 1994-05-19 1997-07-29 Lepkofker; Robert Individual location system
US5752052A (en) 1994-06-24 1998-05-12 Microsoft Corporation Method and system for bootstrapping statistical processing into a rule-based natural language parser
JP2674521B2 (ja) * 1994-09-21 1997-11-12 日本電気株式会社 移動体誘導装置
US5539744A (en) * 1994-10-17 1996-07-23 At&T Corp. Hand-off management for cellular telephony
US5696965A (en) 1994-11-03 1997-12-09 Intel Corporation Electronic information appraisal agent
JP2855409B2 (ja) 1994-11-17 1999-02-10 日本アイ・ビー・エム株式会社 自然言語処理方法及びシステム
US6571279B1 (en) 1997-12-05 2003-05-27 Pinpoint Incorporated Location enhanced information delivery system
US5499289A (en) * 1994-12-06 1996-03-12 At&T Corp. Systems, methods and articles of manufacture for performing distributed telecommunications
US5748974A (en) * 1994-12-13 1998-05-05 International Business Machines Corporation Multimodal natural language interface for cross-application tasks
US5774859A (en) 1995-01-03 1998-06-30 Scientific-Atlanta, Inc. Information system having a speech interface
US5794050A (en) * 1995-01-04 1998-08-11 Intelligent Text Processing, Inc. Natural language understanding system
US5892900A (en) 1996-08-30 1999-04-06 Intertrust Technologies Corp. Systems and methods for secure transaction management and electronic rights protection
US6948070B1 (en) 1995-02-13 2005-09-20 Intertrust Technologies Corporation Systems and methods for secure transaction management and electronic rights protection
US5918222A (en) 1995-03-17 1999-06-29 Kabushiki Kaisha Toshiba Information disclosing apparatus and multi-modal information input/output system
JP3363283B2 (ja) 1995-03-23 2003-01-08 株式会社日立製作所 入力装置、入力方法、情報処理システムおよび入力情報の管理方法
US6965864B1 (en) 1995-04-10 2005-11-15 Texas Instruments Incorporated Voice activated hypermedia systems using grammatical metadata
WO1996037881A2 (en) 1995-05-26 1996-11-28 Applied Language Technologies Method and apparatus for dynamic adaptation of a large vocabulary speech recognition system and for use of constraints from a database in a large vocabulary speech recognition system
US5708422A (en) * 1995-05-31 1998-01-13 At&T Transaction authorization and alert system
JP3716870B2 (ja) 1995-05-31 2005-11-16 ソニー株式会社 音声認識装置および音声認識方法
US20070061735A1 (en) 1995-06-06 2007-03-15 Hoffberg Steven M Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
US5721938A (en) * 1995-06-07 1998-02-24 Stuckey; Barbara K. Method and device for parsing and analyzing natural language sentences and text
US5617407A (en) 1995-06-21 1997-04-01 Bareis; Monica M. Optical disk having speech recognition templates for information access
US5794196A (en) * 1995-06-30 1998-08-11 Kurzweil Applied Intelligence, Inc. Speech recognition system distinguishing dictation from commands by arbitration between continuous speech and isolated word modules
US6292767B1 (en) 1995-07-18 2001-09-18 Nuance Communications Method and system for building and running natural language understanding systems
US5963940A (en) 1995-08-16 1999-10-05 Syracuse University Natural language information retrieval system and method
US5536393A (en) * 1995-08-22 1996-07-16 Weeks; Rebecca C. Coffee filter retaining insert
US5675629A (en) 1995-09-08 1997-10-07 At&T Cordless cellular system base station
US5855000A (en) 1995-09-08 1998-12-29 Carnegie Mellon University Method and apparatus for correcting and repairing machine-transcribed input using independent or cross-modal secondary input
US5911120A (en) 1995-09-08 1999-06-08 At&T Wireless Services Wireless communication system having mobile stations establish a communication link through the base station without using a landline or regional cellular network and without a call in progress
US6192110B1 (en) 1995-09-15 2001-02-20 At&T Corp. Method and apparatus for generating sematically consistent inputs to a dialog manager
US5774841A (en) 1995-09-20 1998-06-30 The United States Of America As Represented By The Adminstrator Of The National Aeronautics And Space Administration Real-time reconfigurable adaptive speech recognition command and control apparatus and method
US5799276A (en) * 1995-11-07 1998-08-25 Accent Incorporated Knowledge-based speech recognition system and methods having frame length computed based upon estimated pitch period of vocalic intervals
US5960447A (en) 1995-11-13 1999-09-28 Holt; Douglas Word tagging and editing system for speech recognition
EP0809900B1 (en) * 1995-12-15 2004-03-24 Koninklijke Philips Electronics N.V. An adaptive noise cancelling arrangement, a noise reduction system and a transceiver
US6567778B1 (en) 1995-12-21 2003-05-20 Nuance Communications Natural language speech recognition using slot semantic confidence scores related to their word recognition confidence scores
US5633922A (en) 1995-12-29 1997-05-27 At&T Process and apparatus for restarting call routing in a telephone network
US5802510A (en) 1995-12-29 1998-09-01 At&T Corp Universal directory service
US5832221A (en) 1995-12-29 1998-11-03 At&T Corp Universal message storage system
US5742763A (en) 1995-12-29 1998-04-21 At&T Corp. Universal message delivery system for handles identifying network presences
US6286002B1 (en) 1996-01-17 2001-09-04 @Yourcommand System and method for storing and searching buy and sell information of a marketplace
US6119101A (en) 1996-01-17 2000-09-12 Personal Agents, Inc. Intelligent agents for electronic commerce
US5987404A (en) 1996-01-29 1999-11-16 International Business Machines Corporation Statistical natural language understanding using hidden clumpings
US5995943A (en) 1996-04-01 1999-11-30 Sabre Inc. Information aggregation and synthesization system
US6314420B1 (en) 1996-04-04 2001-11-06 Lycos, Inc. Collaborative/adaptive search engine
US5848396A (en) 1996-04-26 1998-12-08 Freedom Of Information, Inc. Method and apparatus for determining behavioral profile of a computer user
US5878386A (en) 1996-06-28 1999-03-02 Microsoft Corporation Natural language parser with dictionary-based part-of-speech probabilities
US5953393A (en) 1996-07-15 1999-09-14 At&T Corp. Personal telephone agent
US5867817A (en) 1996-08-19 1999-02-02 Virtual Vision, Inc. Speech recognition manager
US6009382A (en) 1996-08-19 1999-12-28 International Business Machines Corporation Word storage table for natural language determination
US6385646B1 (en) 1996-08-23 2002-05-07 At&T Corp. Method and system for establishing voice communications in an internet environment
US6470315B1 (en) 1996-09-11 2002-10-22 Texas Instruments Incorporated Enrollment and modeling method and apparatus for robust speaker dependent speech models
US5878385A (en) * 1996-09-16 1999-03-02 Ergo Linguistic Technologies Method and apparatus for universal parsing of language
US6085186A (en) * 1996-09-20 2000-07-04 Netbot, Inc. Method and system using information written in a wrapper description language to execute query on a network
US6961700B2 (en) 1996-09-24 2005-11-01 Allvoice Computing Plc Method and apparatus for processing the output of a speech recognition engine
JP3212618B2 (ja) * 1996-09-26 2001-09-25 三菱電機株式会社 対話処理装置
US5892813A (en) 1996-09-30 1999-04-06 Matsushita Electric Industrial Co., Ltd. Multimodal voice dialing digital key telephone with dialog manager
US5995928A (en) 1996-10-02 1999-11-30 Speechworks International, Inc. Method and apparatus for continuous spelling speech recognition with early identification
US5829000A (en) * 1996-10-31 1998-10-27 Microsoft Corporation Method and system for correcting misrecognized spoken words or phrases
US5902347A (en) 1996-11-19 1999-05-11 American Navigation Systems, Inc. Hand-held GPS-mapping device
US5839107A (en) 1996-11-29 1998-11-17 Northern Telecom Limited Method and apparatus for automatically generating a speech recognition vocabulary from a white pages listing
US6154526A (en) 1996-12-04 2000-11-28 Intellivoice Communications, Inc. Data acquisition and error correcting speech recognition system
US5960399A (en) 1996-12-24 1999-09-28 Gte Internetworking Incorporated Client/server speech processor/recognizer
US6456974B1 (en) 1997-01-06 2002-09-24 Texas Instruments Incorporated System and method for adding speech recognition capabilities to java
CA2226233C (en) 1997-01-21 2006-05-09 At&T Corp. Systems and methods for determinizing and minimizing a finite state transducer for speech recognition
US6285987B1 (en) 1997-01-22 2001-09-04 Engage, Inc. Internet advertising system
US6009355A (en) 1997-01-28 1999-12-28 American Calcar Inc. Multimedia information and control system for automobiles
US6122613A (en) 1997-01-30 2000-09-19 Dragon Systems, Inc. Speech recognition using multiple recognizers (selectively) applied to the same input sample
JPH10254486A (ja) * 1997-03-13 1998-09-25 Canon Inc 音声認識装置および方法
GB2323693B (en) * 1997-03-27 2001-09-26 Forum Technology Ltd Speech to text conversion
US6167377A (en) 1997-03-28 2000-12-26 Dragon Systems, Inc. Speech recognition language models
FR2761837B1 (fr) 1997-04-08 1999-06-11 Sophie Sommelet Dispositif d'aide a la navigation ayant une architecture distribuee basee sur internet
US6014559A (en) 1997-04-10 2000-01-11 At&T Wireless Services, Inc. Method and system for delivering a voice mail notification to a private base station using cellular phone network
US6078886A (en) 1997-04-14 2000-06-20 At&T Corporation System and method for providing remote automatic speech recognition services via a packet network
US6058187A (en) 1997-04-17 2000-05-02 At&T Corp. Secure telecommunications data transmission
US5895464A (en) 1997-04-30 1999-04-20 Eastman Kodak Company Computer program product and a method for using natural language for the description, search and retrieval of multi-media objects
US6173266B1 (en) * 1997-05-06 2001-01-09 Speechworks International, Inc. System and method for developing interactive speech applications
US6128369A (en) 1997-05-14 2000-10-03 A.T.&T. Corp. Employing customer premises equipment in communications network maintenance
US5983190A (en) 1997-05-19 1999-11-09 Microsoft Corporation Client server animation system for managing interactive user interface characters
US5960397A (en) 1997-05-27 1999-09-28 At&T Corp System and method of recognizing an acoustic environment to adapt a set of based recognition models to the current acoustic environment for subsequent speech recognition
US5995119A (en) 1997-06-06 1999-11-30 At&T Corp. Method for generating photo-realistic animated characters
FI972723A0 (fi) 1997-06-24 1997-06-24 Nokia Mobile Phones Ltd Mobila kommunikationsanordningar
US6199043B1 (en) 1997-06-24 2001-03-06 International Business Machines Corporation Conversation management in speech recognition interfaces
US6816830B1 (en) 1997-07-04 2004-11-09 Xerox Corporation Finite state data structures with paths representing paired strings of tags and tag combinations
US6101241A (en) 1997-07-16 2000-08-08 At&T Corp. Telephone-based speech recognition for data collection
US5926784A (en) 1997-07-17 1999-07-20 Microsoft Corporation Method and system for natural language parsing using podding
US5933822A (en) 1997-07-22 1999-08-03 Microsoft Corporation Apparatus and methods for an information retrieval system that employs natural language processing of search results to improve overall precision
US6275231B1 (en) 1997-08-01 2001-08-14 American Calcar Inc. Centralized control and management system for automobiles
US6044347A (en) 1997-08-05 2000-03-28 Lucent Technologies Inc. Methods and apparatus object-oriented rule-based dialogue management
US6144667A (en) 1997-08-07 2000-11-07 At&T Corp. Network-based method and apparatus for initiating and completing a telephone call via the internet
US6192338B1 (en) 1997-08-12 2001-02-20 At&T Corp. Natural language knowledge servers as network resources
US6360234B2 (en) 1997-08-14 2002-03-19 Virage, Inc. Video cataloger system with synchronized encoders
US5895466A (en) 1997-08-19 1999-04-20 At&T Corp Automated natural language understanding customer service system
US6707421B1 (en) 1997-08-19 2004-03-16 Siemens Vdo Automotive Corporation Driver information system
US6081774A (en) 1997-08-22 2000-06-27 Novell, Inc. Natural language information retrieval system and method
US6018708A (en) * 1997-08-26 2000-01-25 Nortel Networks Corporation Method and apparatus for performing speech recognition utilizing a supplementary lexicon of frequently used orthographies
US6076059A (en) 1997-08-29 2000-06-13 Digital Equipment Corporation Method for aligning text with audio signals
US5960384A (en) 1997-09-03 1999-09-28 Brash; Douglas E. Method and device for parsing natural language sentences and other sequential symbolic expressions
US6049602A (en) 1997-09-18 2000-04-11 At&T Corp Virtual call center
US6650747B1 (en) 1997-09-18 2003-11-18 At&T Corp. Control of merchant application by system monitor in virtual contact center
DE19742054A1 (de) 1997-09-24 1999-04-01 Philips Patentverwaltung Eingabesystem wenigstens für Orts- und/oder Straßennamen
US5897613A (en) * 1997-10-08 1999-04-27 Lucent Technologies Inc. Efficient transmission of voice silence intervals
US6134235A (en) 1997-10-08 2000-10-17 At&T Corp. Pots/packet bridge
US6272455B1 (en) 1997-10-22 2001-08-07 Lucent Technologies, Inc. Method and apparatus for understanding natural language
JPH11126090A (ja) * 1997-10-23 1999-05-11 Pioneer Electron Corp 音声認識方法及び音声認識装置並びに音声認識装置を動作させるためのプログラムが記録された記録媒体
US6021384A (en) 1997-10-29 2000-02-01 At&T Corp. Automatic generation of superwords
US6498797B1 (en) 1997-11-14 2002-12-24 At&T Corp. Method and apparatus for communication services on a network
US6073098A (en) 1997-11-21 2000-06-06 At&T Corporation Method and apparatus for generating deterministic approximate weighted finite-state automata
US6188982B1 (en) * 1997-12-01 2001-02-13 Industrial Technology Research Institute On-line background noise adaptation of parallel model combination HMM with discriminative learning using weighted HMM for noisy speech recognition
US6219346B1 (en) 1997-12-02 2001-04-17 At&T Corp. Packet switching architecture in cellular radio
US6614773B1 (en) 1997-12-02 2003-09-02 At&T Corp. Packet transmissions over cellular radio
US5970412A (en) 1997-12-02 1999-10-19 Maxemchuk; Nicholas Frank Overload control in a packet-switching cellular environment
US6195634B1 (en) 1997-12-24 2001-02-27 Nortel Networks Corporation Selection of decoys for non-vocabulary utterances rejection
US6301560B1 (en) 1998-01-05 2001-10-09 Microsoft Corporation Discrete speech recognition system with ballooning active grammar
US6278377B1 (en) 1999-08-25 2001-08-21 Donnelly Corporation Indicator for vehicle accessory
US5950167A (en) 1998-01-26 1999-09-07 Lucent Technologies Inc. Screen-less remote voice or tone-controlled computer program operations via telephone set
US6226612B1 (en) 1998-01-30 2001-05-01 Motorola, Inc. Method of evaluating an utterance in a speech recognition system
US6385596B1 (en) 1998-02-06 2002-05-07 Liquid Audio, Inc. Secure online music distribution system
JP3844874B2 (ja) 1998-02-27 2006-11-15 株式会社東芝 マルチモーダルインタフェース装置およびマルチモーダルインタフェース方法
US6160883A (en) 1998-03-04 2000-12-12 At&T Corporation Telecommunications network system and method
WO1999046763A1 (en) 1998-03-09 1999-09-16 Lernout & Hauspie Speech Products N.V. Apparatus and method for simultaneous multimode dictation
US6119087A (en) 1998-03-13 2000-09-12 Nuance Communications System architecture for and method of voice processing
US6233559B1 (en) 1998-04-01 2001-05-15 Motorola, Inc. Speech control of multiple applications using applets
US6420975B1 (en) 1999-08-25 2002-07-16 Donnelly Corporation Interior rearview mirror sound processing system
US6173279B1 (en) 1998-04-09 2001-01-09 At&T Corp. Method of using a natural language interface to retrieve information from one or more data resources
US6144938A (en) 1998-05-01 2000-11-07 Sun Microsystems, Inc. Voice user interface with personality
US6574597B1 (en) 1998-05-08 2003-06-03 At&T Corp. Fully expanded context-dependent networks for speech recognition
US6236968B1 (en) 1998-05-14 2001-05-22 International Business Machines Corporation Sleep prevention dialog based car system
US6424983B1 (en) 1998-05-26 2002-07-23 Global Information Research And Technologies, Llc Spelling and grammar checking system
US20070094223A1 (en) * 1998-05-28 2007-04-26 Lawrence Au Method and system for using contextual meaning in voice to text conversion
CN1311881A (zh) 1998-06-04 2001-09-05 松下电器产业株式会社 语言变换规则产生装置、语言变换装置及程序记录媒体
US6219643B1 (en) 1998-06-26 2001-04-17 Nuance Communications, Inc. Method of analyzing dialogs in a natural language speech recognition system
US6553372B1 (en) 1998-07-13 2003-04-22 Microsoft Corporation Natural language information retrieval system
US6393428B1 (en) 1998-07-13 2002-05-21 Microsoft Corporation Natural language information retrieval system
US6175858B1 (en) 1998-07-13 2001-01-16 At&T Corp. Intelligent network messaging agent and method
US6269336B1 (en) * 1998-07-24 2001-07-31 Motorola, Inc. Voice browser for interactive services and methods thereof
AU5581599A (en) 1998-08-24 2000-03-14 Virtual Research Associates, Inc. Natural language sentence parser
US6208964B1 (en) * 1998-08-31 2001-03-27 Nortel Networks Limited Method and apparatus for providing unsupervised adaptation of transcriptions
US6434524B1 (en) 1998-09-09 2002-08-13 One Voice Technologies, Inc. Object interactive user interface using speech recognition and natural language processing
US6499013B1 (en) 1998-09-09 2002-12-24 One Voice Technologies, Inc. Interactive user interface using speech recognition and natural language processing
US6049607A (en) * 1998-09-18 2000-04-11 Lamar Signal Processing Interference canceling method and apparatus
US6606598B1 (en) 1998-09-22 2003-08-12 Speechworks International, Inc. Statistical computing and reporting for interactive speech applications
US6405170B1 (en) * 1998-09-22 2002-06-11 Speechworks International, Inc. Method and system of reviewing the behavior of an interactive speech recognition application
EP1133734A4 (en) 1998-10-02 2005-12-14 Ibm INTERACTIVE NAVIGATOR AND INTERACTIVE SYSTEMS
US7003463B1 (en) * 1998-10-02 2006-02-21 International Business Machines Corporation System and method for providing network coordinated conversational services
EP1119845A1 (en) 1998-10-05 2001-08-01 Lernout & Hauspie Speech Products N.V. Speech controlled computer user interface
WO2000022549A1 (en) 1998-10-09 2000-04-20 Koninklijke Philips Electronics N.V. Automatic inquiry method and system
US6928614B1 (en) 1998-10-13 2005-08-09 Visteon Global Technologies, Inc. Mobile office with speech recognition
US6185535B1 (en) 1998-10-16 2001-02-06 Telefonaktiebolaget Lm Ericsson (Publ) Voice control of a user interface to service applications
AU1707600A (en) 1998-10-21 2000-05-08 American Calcar, Inc. Positional camera and gps data interchange device
US6453292B2 (en) 1998-10-28 2002-09-17 International Business Machines Corporation Command boundary identifier for conversational natural language
US6028514A (en) 1998-10-30 2000-02-22 Lemelson Jerome H. Personal emergency, safety warning system and method
US6477200B1 (en) * 1998-11-09 2002-11-05 Broadcom Corporation Multi-pair gigabit ethernet transceiver
US8121891B2 (en) * 1998-11-12 2012-02-21 Accenture Global Services Gmbh Personalized product report
US6208972B1 (en) 1998-12-23 2001-03-27 Richard Grant Method for integrating computer processes with an interface controlled by voice actuated grammars
US6195651B1 (en) 1998-11-19 2001-02-27 Andersen Consulting Properties Bv System, method and article of manufacture for a tuned user application experience
US6246981B1 (en) 1998-11-25 2001-06-12 International Business Machines Corporation Natural language task-oriented dialog manager and method
US7881936B2 (en) 1998-12-04 2011-02-01 Tegic Communications, Inc. Multimodal disambiguation of speech recognition
US6430285B1 (en) 1998-12-15 2002-08-06 At&T Corp. Method and apparatus for an automated caller interaction system
US6721001B1 (en) 1998-12-16 2004-04-13 International Business Machines Corporation Digital camera with voice recognition annotation
US6233556B1 (en) 1998-12-16 2001-05-15 Nuance Communications Voice processing and verification system
US6801223B1 (en) * 1998-12-18 2004-10-05 Tangis Corporation Managing interactions between computer users' context models
US6754485B1 (en) * 1998-12-23 2004-06-22 American Calcar Inc. Technique for effectively providing maintenance and information to vehicles
US6570555B1 (en) 1998-12-30 2003-05-27 Fuji Xerox Co., Ltd. Method and apparatus for embodied conversational characters with multimodal input/output in an interface device
US6757718B1 (en) 1999-01-05 2004-06-29 Sri International Mobile navigation of network-based electronic information using spoken input
US6523061B1 (en) 1999-01-05 2003-02-18 Sri International, Inc. System, method, and article of manufacture for agent-based navigation in a speech-based data navigation system
US7036128B1 (en) 1999-01-05 2006-04-25 Sri International Offices Using a community of distributed electronic agents to support a highly mobile, ambient computing environment
US6742021B1 (en) 1999-01-05 2004-05-25 Sri International, Inc. Navigating network-based electronic information using spoken input with multimodal error feedback
US6851115B1 (en) 1999-01-05 2005-02-01 Sri International Software-based architecture for communication and cooperation among distributed electronic agents
JP3822990B2 (ja) 1999-01-07 2006-09-20 株式会社日立製作所 翻訳装置、記録媒体
US6429813B2 (en) * 1999-01-14 2002-08-06 Navigation Technologies Corp. Method and system for providing end-user preferences with a navigation system
US6567797B1 (en) 1999-01-26 2003-05-20 Xerox Corporation System and method for providing recommendations based on multi-modal user clusters
WO2000045375A1 (en) * 1999-01-27 2000-08-03 Kent Ridge Digital Labs Method and apparatus for voice annotation and retrieval of multimedia data
US6556970B1 (en) 1999-01-28 2003-04-29 Denso Corporation Apparatus for determining appropriate series of words carrying information to be recognized
US6278968B1 (en) 1999-01-29 2001-08-21 Sony Corporation Method and apparatus for adaptive speech recognition hypothesis construction and selection in a spoken language translation system
US6873837B1 (en) 1999-02-03 2005-03-29 Matsushita Electric Industrial Co., Ltd. Emergency reporting system and terminal apparatus therein
US6430531B1 (en) 1999-02-04 2002-08-06 Soliloquy, Inc. Bilateral speech system
JP4176228B2 (ja) 1999-03-15 2008-11-05 株式会社東芝 自然言語対話装置及び自然言語対話方法
US6643620B1 (en) 1999-03-15 2003-11-04 Matsushita Electric Industrial Co., Ltd. Voice activated controller for recording and retrieving audio/video programs
US6631346B1 (en) 1999-04-07 2003-10-07 Matsushita Electric Industrial Co., Ltd. Method and apparatus for natural language parsing using multiple passes and tags
US6233561B1 (en) 1999-04-12 2001-05-15 Matsushita Electric Industrial Co., Ltd. Method for goal-oriented speech translation in hand-held devices using meaning extraction and dialogue
US6408272B1 (en) 1999-04-12 2002-06-18 General Magic, Inc. Distributed voice user interface
US6570964B1 (en) 1999-04-16 2003-05-27 Nuance Communications Technique for recognizing telephone numbers and other spoken information embedded in voice messages stored in a voice messaging system
US6314402B1 (en) 1999-04-23 2001-11-06 Nuance Communications Method and apparatus for creating modifiable and combinable speech objects for acquiring information from a speaker in an interactive voice response system
US6434523B1 (en) 1999-04-23 2002-08-13 Nuance Communications Creating and editing grammars for speech recognition graphically
US6356869B1 (en) 1999-04-30 2002-03-12 Nortel Networks Limited Method and apparatus for discourse management
US6804638B2 (en) 1999-04-30 2004-10-12 Recent Memory Incorporated Device and method for selective recall and preservation of events prior to decision to record the events
US6505155B1 (en) 1999-05-06 2003-01-07 International Business Machines Corporation Method and system for automatically adjusting prompt feedback based on predicted recognition accuracy
US6308151B1 (en) 1999-05-14 2001-10-23 International Business Machines Corp. Method and system using a speech recognition system to dictate a body of text in response to an available body of text
US6604075B1 (en) 1999-05-20 2003-08-05 Lucent Technologies Inc. Web-based voice dialog interface
US6584439B1 (en) 1999-05-21 2003-06-24 Winbond Electronics Corporation Method and apparatus for controlling voice controlled devices
GB9911971D0 (en) 1999-05-21 1999-07-21 Canon Kk A system, a server for a system and a machine for use in a system
US7787907B2 (en) 1999-05-26 2010-08-31 Johnson Controls Technology Company System and method for using speech recognition with a vehicle control system
US20020032564A1 (en) 2000-04-19 2002-03-14 Farzad Ehsani Phrase-based dialogue modeling with particular application to creating a recognition grammar for a voice-controlled user interface
US20020107694A1 (en) 1999-06-07 2002-08-08 Traptec Corporation Voice-recognition safety system for aircraft and method of using the same
US6389398B1 (en) 1999-06-23 2002-05-14 Lucent Technologies Inc. System and method for storing and executing network queries used in interactive voice response systems
US6374214B1 (en) 1999-06-24 2002-04-16 International Business Machines Corp. Method and apparatus for excluding text phrases during re-dictation in a speech recognition system
ATE320650T1 (de) 1999-06-30 2006-04-15 Ibm Verfahren zur erweiterung des wortschatzes eines spracherkennungssystems
US6321196B1 (en) 1999-07-02 2001-11-20 International Business Machines Corporation Phonetic spelling for speech recognition
US6871179B1 (en) 1999-07-07 2005-03-22 International Business Machines Corporation Method and apparatus for executing voice commands having dictation as a parameter
US7069220B2 (en) * 1999-08-13 2006-06-27 International Business Machines Corporation Method for determining and maintaining dialog focus in a conversational speech system
US6377913B1 (en) * 1999-08-13 2002-04-23 International Business Machines Corporation Method and system for multi-client access to a dialog system
US6901366B1 (en) 1999-08-26 2005-05-31 Matsushita Electric Industrial Co., Ltd. System and method for assessing TV-related information over the internet
US6513006B2 (en) 1999-08-26 2003-01-28 Matsushita Electronic Industrial Co., Ltd. Automatic control of household activity using speech recognition and natural language
US6415257B1 (en) 1999-08-26 2002-07-02 Matsushita Electric Industrial Co., Ltd. System for identifying and adapting a TV-user profile by means of speech technology
JP2001071289A (ja) 1999-09-03 2001-03-21 Sony Corp 情報処理装置および方法、並びにプログラム格納媒体
EP1083545A3 (en) 1999-09-09 2001-09-26 Xanavi Informatics Corporation Voice recognition of proper names in a navigation apparatus
US6658388B1 (en) 1999-09-10 2003-12-02 International Business Machines Corporation Personality generator for conversational systems
US7340040B1 (en) 1999-09-13 2008-03-04 Microstrategy, Incorporated System and method for real-time, personalized, dynamic, interactive voice services for corporate-analysis related information
US6850603B1 (en) 1999-09-13 2005-02-01 Microstrategy, Incorporated System and method for the creation and automatic deployment of personalized dynamic and interactive voice services
US6631351B1 (en) 1999-09-14 2003-10-07 Aidentity Matrix Smart toys
US6601026B2 (en) * 1999-09-17 2003-07-29 Discern Communications, Inc. Information retrieval by natural language querying
US20020049535A1 (en) 1999-09-20 2002-04-25 Ralf Rigo Wireless interactive voice-actuated mobile telematics system
JP2001100781A (ja) 1999-09-30 2001-04-13 Sony Corp 音声処理装置および音声処理方法、並びに記録媒体
US6587858B1 (en) * 1999-09-30 2003-07-01 Steven Paul Strazza Systems and methods for the control of dynamic data and request criteria in a data repository
US6963759B1 (en) 1999-10-05 2005-11-08 Fastmobile, Inc. Speech recognition technique based on local interrupt detection
US6937977B2 (en) 1999-10-05 2005-08-30 Fastmobile, Inc. Method and apparatus for processing an input speech signal during presentation of an output audio signal
US6868385B1 (en) 1999-10-05 2005-03-15 Yomobile, Inc. Method and apparatus for the provision of information signals based upon speech recognition
US6442522B1 (en) 1999-10-12 2002-08-27 International Business Machines Corporation Bi-directional natural language system for interfacing with multiple back-end applications
US6721697B1 (en) 1999-10-18 2004-04-13 Sony Corporation Method and system for reducing lexical ambiguity
AU8030300A (en) 1999-10-19 2001-04-30 Sony Electronics Inc. Natural language interface control system
CA2388260C (en) * 1999-10-19 2009-01-27 American Calcar Inc. Technique for effective navigation based on user preferences
US6581103B1 (en) 1999-10-22 2003-06-17 Dedicated Radio, Llc Method for internet radio broadcasting including listener requests of audio and/or video files with input dedications
US6594367B1 (en) * 1999-10-25 2003-07-15 Andrea Electronics Corporation Super directional beamforming design and implementation
US6882970B1 (en) 1999-10-28 2005-04-19 Canon Kabushiki Kaisha Language recognition using sequence frequency
AU1039301A (en) 1999-10-29 2001-05-08 British Telecommunications Public Limited Company Method and apparatus for processing queries
US6622119B1 (en) 1999-10-30 2003-09-16 International Business Machines Corporation Adaptive command predictor and method for a natural language dialog system
US6526139B1 (en) * 1999-11-03 2003-02-25 Tellabs Operations, Inc. Consolidated noise injection in a voice processing system
US6681206B1 (en) * 1999-11-05 2004-01-20 At&T Corporation Method for generating morphemes
US8482535B2 (en) 1999-11-08 2013-07-09 Apple Inc. Programmable tactile touch screen displays and man-machine interfaces for improved vehicle instrumentation and telematics
US6633846B1 (en) 1999-11-12 2003-10-14 Phoenix Solutions, Inc. Distributed realtime speech recognition system
US7392185B2 (en) 1999-11-12 2008-06-24 Phoenix Solutions, Inc. Speech based learning/training system using semantic decoding
US9076448B2 (en) 1999-11-12 2015-07-07 Nuance Communications, Inc. Distributed real time speech recognition system
US6615172B1 (en) 1999-11-12 2003-09-02 Phoenix Solutions, Inc. Intelligent query engine for processing voice based queries
US6418210B1 (en) 1999-11-29 2002-07-09 At&T Corp Method and apparatus for providing information between a calling network and a called network
US6751612B1 (en) * 1999-11-29 2004-06-15 Xerox Corporation User query generate search results that rank set of servers where ranking is based on comparing content on each server with user query, frequency at which content on each server is altered using web crawler in a search engine
GB9928420D0 (en) * 1999-12-02 2000-01-26 Ibm Interactive voice response system
US6219645B1 (en) 1999-12-02 2001-04-17 Lucent Technologies, Inc. Enhanced automatic speech recognition using multiple directional microphones
US6288319B1 (en) 1999-12-02 2001-09-11 Gary Catona Electronic greeting card with a custom audio mix
US6591239B1 (en) * 1999-12-09 2003-07-08 Steris Inc. Voice controlled surgical suite
US6598018B1 (en) 1999-12-15 2003-07-22 Matsushita Electric Industrial Co., Ltd. Method for natural dialog interface to car devices
US6976229B1 (en) 1999-12-16 2005-12-13 Ricoh Co., Ltd. Method and apparatus for storytelling with digital photographs
US6832230B1 (en) 1999-12-22 2004-12-14 Nokia Corporation Apparatus and associated method for downloading an application with a variable lifetime to a mobile terminal
US6920421B2 (en) * 1999-12-28 2005-07-19 Sony Corporation Model adaptive apparatus for performing adaptation of a model used in pattern recognition considering recentness of a received pattern data
US6678680B1 (en) 2000-01-06 2004-01-13 Mark Woo Music search engine
US6701294B1 (en) * 2000-01-19 2004-03-02 Lucent Technologies, Inc. User interface for translating natural language inquiries into database queries and data presentations
US6829603B1 (en) 2000-02-02 2004-12-07 International Business Machines Corp. System, method and program product for interactive natural dialog
US6560590B1 (en) 2000-02-14 2003-05-06 Kana Software, Inc. Method and apparatus for multiple tiered matching of natural language queries to positions in a text corpus
US6434529B1 (en) 2000-02-16 2002-08-13 Sun Microsystems, Inc. System and method for referencing object instances and invoking methods on those object instances from within a speech recognition grammar
EP3367268A1 (en) 2000-02-22 2018-08-29 Nokia Technologies Oy Spatially coding and displaying information
US7110951B1 (en) 2000-03-03 2006-09-19 Dorothy Lemelson, legal representative System and method for enhancing speech intelligibility for the hearing impaired
US6757362B1 (en) 2000-03-06 2004-06-29 Avaya Technology Corp. Personal virtual assistant
US6466654B1 (en) 2000-03-06 2002-10-15 Avaya Technology Corp. Personal virtual assistant with semantic tagging
US7974875B1 (en) 2000-03-21 2011-07-05 Aol Inc. System and method for using voice over a telephone to access, process, and carry out transactions over the internet
US6510417B1 (en) * 2000-03-21 2003-01-21 America Online, Inc. System and method for voice access to internet-based information
US7103563B1 (en) 2000-03-21 2006-09-05 America Online, Inc. System and method for advertising with an internet voice portal
EP1279165B1 (en) 2000-03-24 2011-01-05 Eliza Corporation Speech recognition
US6868380B2 (en) * 2000-03-24 2005-03-15 Eliza Corporation Speech recognition system and method for generating phonotic estimates
WO2001075676A2 (en) 2000-04-02 2001-10-11 Tangis Corporation Soliciting information based on a computer user's context
US6980092B2 (en) 2000-04-06 2005-12-27 Gentex Corporation Vehicle rearview mirror assembly incorporating a communication system
CA2408584A1 (en) 2000-04-06 2001-10-18 One Voice Technologies, Inc. Natural language and dialogue generation processing
US7177798B2 (en) 2000-04-07 2007-02-13 Rensselaer Polytechnic Institute Natural language interface using constrained intermediate dictionary of results
US7734287B2 (en) 2000-04-10 2010-06-08 I/O Controls Corporation System for providing remote access to diagnostic information over a wide area network
US6726636B2 (en) 2000-04-12 2004-04-27 Loran Technologies, Inc. Breathalyzer with voice recognition
US6578022B1 (en) 2000-04-18 2003-06-10 Icplanet Corporation Interactive intelligent searching with executable suggestions
US6556973B1 (en) 2000-04-19 2003-04-29 Voxi Ab Conversion between data representation formats
US20020007267A1 (en) 2000-04-21 2002-01-17 Leonid Batchilo Expanded search and display of SAO knowledge base information
US7502672B1 (en) 2000-04-24 2009-03-10 Usa Technologies, Inc. Wireless vehicle diagnostics with service and part determination capabilities
US6560576B1 (en) 2000-04-25 2003-05-06 Nuance Communications Method and apparatus for providing active help to a user of a voice-enabled application
WO2001082031A2 (en) 2000-04-26 2001-11-01 Portable Internet Inc. Portable internet services
JP3542026B2 (ja) * 2000-05-02 2004-07-14 インターナショナル・ビジネス・マシーンズ・コーポレーション 音声認識システム、音声認識方法およびコンピュータ可読な記録媒体
US6912498B2 (en) * 2000-05-02 2005-06-28 Scansoft, Inc. Error correction in speech recognition by correcting text around selected area
US6567805B1 (en) 2000-05-15 2003-05-20 International Business Machines Corporation Interactive automated response system
WO2001089183A1 (en) 2000-05-16 2001-11-22 John Taschereau Method and system for providing geographically targeted information and advertising
US20020010584A1 (en) 2000-05-24 2002-01-24 Schultz Mitchell Jay Interactive voice communication method and system for information and entertainment
US7028250B2 (en) 2000-05-25 2006-04-11 Kanisa, Inc. System and method for automatically classifying text
DE60129955D1 (de) * 2000-05-26 2007-09-27 Koninkl Philips Electronics Nv Verfahren und gerät zur akustischen echounterdrückung mit adaptiver strahlbildung
SE517005C2 (sv) 2000-05-31 2002-04-02 Hapax Information Systems Ab Segmentering av text
US6487495B1 (en) 2000-06-02 2002-11-26 Navigation Technologies Corporation Navigation applications using related location-referenced keywords
US7082469B2 (en) 2000-06-09 2006-07-25 Gold Mustache Publishing, Inc. Method and system for electronic song dedication
WO2001097558A2 (en) * 2000-06-13 2001-12-20 Gn Resound Corporation Fixed polar-pattern-based adaptive directionality systems
CN1300677C (zh) 2000-06-22 2007-02-14 微软公司 分布式计算服务平台
JP3567864B2 (ja) 2000-07-21 2004-09-22 株式会社デンソー 音声認識装置及び記録媒体
US7143039B1 (en) 2000-08-11 2006-11-28 Tellme Networks, Inc. Providing menu and other services for an information processing system using a telephone or other audio interface
US6636790B1 (en) 2000-07-25 2003-10-21 Reynolds And Reynolds Holdings, Inc. Wireless diagnostic system and method for monitoring vehicles
US6968311B2 (en) 2000-07-28 2005-11-22 Siemens Vdo Automotive Corporation User interface for telematics systems
DE10036851A1 (de) 2000-07-28 2002-02-28 Mannesmann Vdo Ag Verfahren zur Auswahl einer Ortsbezeichnung in einem Navigationssystem durch Spracheingabe
US7092928B1 (en) 2000-07-31 2006-08-15 Quantum Leap Research, Inc. Intelligent portal engine
US7027975B1 (en) 2000-08-08 2006-04-11 Object Services And Consulting, Inc. Guided natural language interface system and method
US7653748B2 (en) 2000-08-10 2010-01-26 Simplexity, Llc Systems, methods and computer program products for integrating advertising within web content
US6574624B1 (en) 2000-08-18 2003-06-03 International Business Machines Corporation Automatic topic identification and switch for natural language search of textual document collections
AU2001283579A1 (en) 2000-08-21 2002-03-04 Yahoo, Inc. Method and system of interpreting and presenting web content using a voice browser
US8200485B1 (en) * 2000-08-29 2012-06-12 A9.Com, Inc. Voice interface and methods for improving recognition accuracy of voice search queries
CN1226717C (zh) * 2000-08-30 2005-11-09 国际商业机器公司 自动新词提取方法和系统
US7062488B1 (en) 2000-08-30 2006-06-13 Richard Reisman Task/domain segmentation in applying feedback to command control
EP1184841A1 (de) 2000-08-31 2002-03-06 Siemens Aktiengesellschaft Sprachgesteuerte Anordnung und Verfahren zur Spracheingabe und -erkennung
US6813341B1 (en) 2000-08-31 2004-11-02 Ivoice, Inc. Voice activated/voice responsive item locator
JP2004508636A (ja) 2000-09-07 2004-03-18 テレフオンアクチーボラゲット エル エム エリクソン(パブル) 情報提供システム及びその制御方法
US20040205671A1 (en) 2000-09-13 2004-10-14 Tatsuya Sukehiro Natural-language processing system
US6982635B2 (en) * 2000-09-21 2006-01-03 American Calcar Inc. Technique for assisting a vehicle user to make a turn
US7085708B2 (en) 2000-09-23 2006-08-01 Ravenflow, Inc. Computer system with natural language to machine language translator
US6704576B1 (en) 2000-09-27 2004-03-09 At&T Corp. Method and system for communicating multimedia content in a unicast, multicast, simulcast or broadcast environment
US6362748B1 (en) * 2000-09-27 2002-03-26 Lite Vision Corporation System for communicating among vehicles and a communication system control center
US7216080B2 (en) 2000-09-29 2007-05-08 Mindfabric Holdings Llc Natural-language voice-activated personal assistant
JP2003044708A (ja) 2000-10-02 2003-02-14 Omron Corp 情報仲介システムとそれに用いられる情報仲介方法
US7219058B1 (en) 2000-10-13 2007-05-15 At&T Corp. System and method for processing speech recognition results
US6922670B2 (en) 2000-10-24 2005-07-26 Sanyo Electric Co., Ltd. User support apparatus and system using agents
US7027974B1 (en) 2000-10-27 2006-04-11 Science Applications International Corporation Ontology-based parser for natural language processing
US6795808B1 (en) 2000-10-30 2004-09-21 Koninklijke Philips Electronics N.V. User interface/entertainment device that simulates personal interaction and charges external database with relevant data
US6721706B1 (en) 2000-10-30 2004-04-13 Koninklijke Philips Electronics N.V. Environment-responsive user interface/entertainment device that simulates personal interaction
US6934756B2 (en) 2000-11-01 2005-08-23 International Business Machines Corporation Conversational networking via transport, coding and control conversational protocols
GB0027178D0 (en) * 2000-11-07 2000-12-27 Canon Kk Speech processing system
US6941266B1 (en) 2000-11-15 2005-09-06 At&T Corp. Method and system for predicting problematic dialog situations in a task classification system
US6735592B1 (en) 2000-11-16 2004-05-11 Discern Communications System, method, and computer program product for a network-based content exchange system
US7013308B1 (en) 2000-11-28 2006-03-14 Semscript Ltd. Knowledge storage and retrieval system and method
US20020065568A1 (en) 2000-11-30 2002-05-30 Silfvast Robert Denton Plug-in modules for digital signal processor functionalities
US6973429B2 (en) 2000-12-04 2005-12-06 A9.Com, Inc. Grammar generation for voice-based searches
US20020067839A1 (en) 2000-12-04 2002-06-06 Heinrich Timothy K. The wireless voice activated and recogintion car system
JP2002175316A (ja) 2000-12-07 2002-06-21 Sanyo Electric Co Ltd ユーザ支援装置およびシステム
US7016847B1 (en) 2000-12-08 2006-03-21 Ben Franklin Patent Holdings L.L.C. Open architecture for a voice user interface
US6456711B1 (en) 2000-12-12 2002-09-24 At&T Corp. Method for placing a call intended for an enhanced network user on hold while the enhanced network user is unavailable to take the call using a distributed feature architecture
US7170993B2 (en) 2000-12-19 2007-01-30 Lucent Technologies Inc. Methods and apparatus for automated monitoring and action taking based on decision support mechanism
US8023622B2 (en) 2000-12-21 2011-09-20 Grape Technology Group, Inc. Technique for call context based advertising through an information assistance service
US20020082911A1 (en) 2000-12-22 2002-06-27 Dunn Charles L. Online revenue sharing
US6973427B2 (en) 2000-12-26 2005-12-06 Microsoft Corporation Method for adding phonetic descriptions to a speech recognition lexicon
US20020087326A1 (en) 2000-12-29 2002-07-04 Lee Victor Wai Leung Computer-implemented web page summarization method and system
US20020087312A1 (en) 2000-12-29 2002-07-04 Lee Victor Wai Leung Computer-implemented conversation buffering method and system
US7085723B2 (en) 2001-01-12 2006-08-01 International Business Machines Corporation System and method for determining utterance context in a multi-context speech application
DE10101282A1 (de) 2001-01-12 2002-07-18 Siemens Ag Notrufmeldung mittels mobiler Telekommunikationsgeräte
US6751591B1 (en) 2001-01-22 2004-06-15 At&T Corp. Method and system for predicting understanding errors in a task classification system
US7069207B2 (en) 2001-01-26 2006-06-27 Microsoft Corporation Linguistically intelligent text compression
US7487110B2 (en) 2001-01-30 2009-02-03 International Business Machines Corporation Automotive information communication exchange system, method, and program product
US6964023B2 (en) 2001-02-05 2005-11-08 International Business Machines Corporation System and method for multi-modal focus detection, referential ambiguity resolution and mood classification using multi-modal input
US20020107873A1 (en) 2001-02-07 2002-08-08 Bandag Licensing Corporation System and method for data collection, reporting, and analysis of fleet vehicle information
US7206418B2 (en) * 2001-02-12 2007-04-17 Fortemedia, Inc. Noise suppression for a wireless communication device
EP1231788A1 (en) 2001-02-12 2002-08-14 Koninklijke Philips Electronics N.V. Arrangement for distributing content, profiling center, receiving device and method
US6549629B2 (en) * 2001-02-21 2003-04-15 Digisonix Llc DVE system with normalized selection
GB2372864B (en) 2001-02-28 2005-09-07 Vox Generation Ltd Spoken language interface
US6754627B2 (en) 2001-03-01 2004-06-22 International Business Machines Corporation Detecting speech recognition errors in an embedded speech recognition system
US7024364B2 (en) * 2001-03-09 2006-04-04 Bevocal, Inc. System, method and computer program product for looking up business addresses and directions based on a voice dial-up session
US20020173961A1 (en) 2001-03-09 2002-11-21 Guerra Lisa M. System, method and computer program product for dynamic, robust and fault tolerant audio output in a speech recognition framework
US20020152260A1 (en) 2001-03-12 2002-10-17 Qiming Chen Dynamic agent with embedded web server and mark-up language support for e-commerce automation
US20020133402A1 (en) 2001-03-13 2002-09-19 Scott Faber Apparatus and method for recruiting, communicating with, and paying participants of interactive advertising
WO2002073451A2 (en) 2001-03-13 2002-09-19 Intelligate Ltd. Dynamic natural language understanding
US7574362B2 (en) * 2001-03-14 2009-08-11 At&T Intellectual Property Ii, L.P. Method for automated sentence planning in a task classification system
WO2002073449A1 (en) * 2001-03-14 2002-09-19 At & T Corp. Automated sentence planning in a task classification system
US7729918B2 (en) * 2001-03-14 2010-06-01 At&T Intellectual Property Ii, Lp Trainable sentence planning system
US6801897B2 (en) 2001-03-28 2004-10-05 International Business Machines Corporation Method of providing concise forms of natural commands
US8175886B2 (en) 2001-03-29 2012-05-08 Intellisist, Inc. Determination of signal-processing approach based on signal destination characteristics
US6487494B2 (en) 2001-03-29 2002-11-26 Wingcast, Llc System and method for reducing the amount of repetitive data sent by a server to a client for vehicle navigation
US7472075B2 (en) 2001-03-29 2008-12-30 Intellisist, Inc. System and method to associate broadcast radio content with a transaction via an internet server
US7406421B2 (en) * 2001-10-26 2008-07-29 Intellisist Inc. Systems and methods for reviewing informational content in a vehicle
AU2002251205A1 (en) 2001-03-30 2002-10-15 British Telecommunications Public Limited Company Multi-modal interface
US6996531B2 (en) 2001-03-30 2006-02-07 Comverse Ltd. Automated database assistance using a telephone for a speech based or text based multimedia communication mode
FR2822994B1 (fr) 2001-03-30 2004-05-21 Bouygues Telecom Sa Assistance au conducteur d'un vehicule automobile
JP2002358095A (ja) 2001-03-30 2002-12-13 Sony Corp 音声処理装置および音声処理方法、並びにプログラムおよび記録媒体
US6885989B2 (en) 2001-04-02 2005-04-26 International Business Machines Corporation Method and system for collaborative speech recognition for small-area network
US20040030741A1 (en) 2001-04-02 2004-02-12 Wolton Richard Ernest Method and apparatus for search, visual navigation, analysis and retrieval of information from networks with remote notification and content delivery
US6856990B2 (en) 2001-04-09 2005-02-15 Intel Corporation Network dedication system
JP2002318132A (ja) 2001-04-23 2002-10-31 Hitachi Ltd 音声対話型ナビゲーションシステムおよび移動端末装置および音声対話サーバ
US7437295B2 (en) 2001-04-27 2008-10-14 Accenture Llp Natural language processing for a location-based services system
US7698228B2 (en) 2001-04-27 2010-04-13 Accenture Llp Tracking purchases in a location-based services system
US7970648B2 (en) 2001-04-27 2011-06-28 Accenture Global Services Limited Advertising campaign and business listing management for a location-based services system
US6950821B2 (en) 2001-05-04 2005-09-27 Sun Microsystems, Inc. System and method for resolving distributed network search queries to information providers
US6804684B2 (en) 2001-05-07 2004-10-12 Eastman Kodak Company Method for associating semantic information with multiple images in an image database environment
US20020173333A1 (en) 2001-05-18 2002-11-21 Buchholz Dale R. Method and apparatus for processing barge-in requests
US6944594B2 (en) 2001-05-30 2005-09-13 Bellsouth Intellectual Property Corporation Multi-context conversational environment system and method
JP2003005897A (ja) 2001-06-20 2003-01-08 Alpine Electronics Inc 情報入力方法および装置
US6801604B2 (en) 2001-06-25 2004-10-05 International Business Machines Corporation Universal IP-based and scalable architectures across conversational applications using web services for speech and audio processing resources
US20020198714A1 (en) 2001-06-26 2002-12-26 Guojun Zhou Statistical spoken dialog system
US20100029261A1 (en) 2001-06-27 2010-02-04 John Mikkelsen Virtual wireless data cable method, apparatus and system
US7606712B1 (en) 2001-06-28 2009-10-20 At&T Intellectual Property Ii, L.P. Speech recognition interface for voice actuation of legacy systems
US20050234727A1 (en) 2001-07-03 2005-10-20 Leo Chiu Method and apparatus for adapting a voice extensible markup language-enabled voice system for natural speech recognition and system response
US20090144131A1 (en) 2001-07-03 2009-06-04 Leo Chiu Advertising method and apparatus
US6983307B2 (en) 2001-07-11 2006-01-03 Kirusa, Inc. Synchronization among plural browsers
JP2003029778A (ja) * 2001-07-16 2003-01-31 Fujitsu Ten Ltd ナビゲーションシステムにおける音声対話インターフェース処理方法
US7123727B2 (en) * 2001-07-18 2006-10-17 Agere Systems Inc. Adaptive close-talking differential microphone array
EP1417678A1 (de) 2001-08-13 2004-05-12 Hans Geiger Verfahren und vorrichtung zum erkennen einer phonetischen lautfolge oder zeichenfolge
US7283951B2 (en) 2001-08-14 2007-10-16 Insightful Corporation Method and system for enhanced data searching
US6757544B2 (en) 2001-08-15 2004-06-29 Motorola, Inc. System and method for determining a location relevant to a communication device and/or its associated user
US20030093419A1 (en) 2001-08-17 2003-05-15 Srinivas Bangalore System and method for querying information using a flexible multi-modal interface
US7920682B2 (en) 2001-08-21 2011-04-05 Byrne William J Dynamic interactive voice interface
US7305381B1 (en) 2001-09-14 2007-12-04 Ricoh Co., Ltd Asynchronous unconscious retrieval in a network of information appliances
US7403938B2 (en) 2001-09-24 2008-07-22 Iac Search & Media, Inc. Natural language query processing
US6959276B2 (en) 2001-09-27 2005-10-25 Microsoft Corporation Including the category of environmental noise when processing speech signals
US6721633B2 (en) 2001-09-28 2004-04-13 Robert Bosch Gmbh Method and device for interfacing a driver information system using a voice portal server
US7289606B2 (en) 2001-10-01 2007-10-30 Sandeep Sibal Mode-swapping in multi-modal telephonic applications
JP3997459B2 (ja) 2001-10-02 2007-10-24 株式会社日立製作所 音声入力システムおよび音声ポータルサーバおよび音声入力端末
US7640006B2 (en) 2001-10-03 2009-12-29 Accenture Global Services Gmbh Directory assistance with multi-modal messaging
US7254384B2 (en) 2001-10-03 2007-08-07 Accenture Global Services Gmbh Multi-modal messaging
US20030069734A1 (en) 2001-10-05 2003-04-10 Everhart Charles Allen Technique for active voice recognition grammar adaptation for dynamic multimedia application
JP4065936B2 (ja) 2001-10-09 2008-03-26 独立行政法人情報通信研究機構 機械学習法を用いた言語解析処理システムおよび機械学習法を用いた言語省略解析処理システム
US6501834B1 (en) 2001-11-21 2002-12-31 At&T Corp. Message sender status monitor
US20030101054A1 (en) 2001-11-27 2003-05-29 Ncc, Llc Integrated system and method for electronic speech recognition and transcription
US7174300B2 (en) 2001-12-11 2007-02-06 Lockheed Martin Corporation Dialog processing method and apparatus for uninhabited air vehicles
US7165028B2 (en) * 2001-12-12 2007-01-16 Texas Instruments Incorporated Method of speech recognition resistant to convolutive distortion and additive distortion
GB2383247A (en) 2001-12-13 2003-06-18 Hewlett Packard Co Multi-modal picture allowing verbal interaction between a user and the picture
US7231343B1 (en) 2001-12-20 2007-06-12 Ianywhere Solutions, Inc. Synonyms mechanism for natural language systems
US20030120493A1 (en) * 2001-12-21 2003-06-26 Gupta Sunil K. Method and system for updating and customizing recognition vocabulary
EP1324274A3 (en) 2001-12-28 2005-11-02 Matsushita Electric Industrial Co., Ltd. Vehicle information recording system
US7203644B2 (en) 2001-12-31 2007-04-10 Intel Corporation Automating tuning of speech recognition systems
US7493259B2 (en) 2002-01-04 2009-02-17 Siebel Systems, Inc. Method for accessing data via voice
US7493559B1 (en) 2002-01-09 2009-02-17 Ricoh Co., Ltd. System and method for direct multi-modal annotation of objects
US7117200B2 (en) 2002-01-11 2006-10-03 International Business Machines Corporation Synthesizing information-bearing content from multiple channels
US7111248B2 (en) 2002-01-15 2006-09-19 Openwave Systems Inc. Alphanumeric information input method
US7536297B2 (en) * 2002-01-22 2009-05-19 International Business Machines Corporation System and method for hybrid text mining for finding abbreviations and their definitions
US7054817B2 (en) * 2002-01-25 2006-05-30 Canon Europa N.V. User interface for speech model generation and testing
US20030144846A1 (en) * 2002-01-31 2003-07-31 Denenberg Lawrence A. Method and system for modifying the behavior of an application based upon the application's grammar
US7130390B2 (en) 2002-02-01 2006-10-31 Microsoft Corporation Audio messaging system and method
US7177814B2 (en) 2002-02-07 2007-02-13 Sap Aktiengesellschaft Dynamic grammar for voice-enabled applications
US6591185B1 (en) * 2002-02-11 2003-07-08 Visteon Global Technologies, Inc. Method for determination of fuel usage for a vehicle in a vehicle navigation system
US7058890B2 (en) 2002-02-13 2006-06-06 Siebel Systems, Inc. Method and system for enabling connectivity to a data system
US8249880B2 (en) 2002-02-14 2012-08-21 Intellisist, Inc. Real-time display of system instructions
US7587317B2 (en) 2002-02-15 2009-09-08 Microsoft Corporation Word training interface
JP3974419B2 (ja) 2002-02-18 2007-09-12 株式会社日立製作所 音声入力を用いた情報取得方法及び情報取得システム
US6704396B2 (en) 2002-02-27 2004-03-09 Sbc Technology Resources, Inc. Multi-modal communications method
AU2003217769A1 (en) 2002-02-27 2003-09-09 Mary Beth Sater System and method that facilitates customizing media
US7016849B2 (en) 2002-03-25 2006-03-21 Sri International Method and apparatus for providing speech-driven routing between spoken language applications
US7181398B2 (en) 2002-03-27 2007-02-20 Hewlett-Packard Development Company, L.P. Vocabulary independent speech recognition system and method using subword units
US20050021397A1 (en) 2003-07-22 2005-01-27 Cui Yingwei Claire Content-targeted advertising using collected user behavior data
US7136875B2 (en) 2002-09-24 2006-11-14 Google, Inc. Serving advertisements based on content
US7072834B2 (en) * 2002-04-05 2006-07-04 Intel Corporation Adapting to adverse acoustic environment in speech processing using playback training data
US7197460B1 (en) 2002-04-23 2007-03-27 At&T Corp. System for handling frequently asked questions in a natural language dialog service
US6877001B2 (en) 2002-04-25 2005-04-05 Mitsubishi Electric Research Laboratories, Inc. Method and system for retrieving documents with spoken queries
US7167568B2 (en) 2002-05-02 2007-01-23 Microsoft Corporation Microphone array signal enhancement
US20030212558A1 (en) 2002-05-07 2003-11-13 Matula Valentine C. Method and apparatus for distributed interactive voice processing
US6915126B2 (en) 2002-05-08 2005-07-05 General Motors Corporation Method of activating a wireless communication system in a mobile vehicle
US20030212550A1 (en) 2002-05-10 2003-11-13 Ubale Anil W. Method, apparatus, and system for improving speech quality of voice-over-packets (VOP) systems
US20030212562A1 (en) 2002-05-13 2003-11-13 General Motors Corporation Manual barge-in for server-based in-vehicle voice recognition systems
JP2003329477A (ja) 2002-05-15 2003-11-19 Pioneer Electronic Corp ナビゲーション装置及び対話型情報提供プログラム
US7107210B2 (en) 2002-05-20 2006-09-12 Microsoft Corporation Method of noise reduction based on dynamic aspects of speech
US7127400B2 (en) 2002-05-22 2006-10-24 Bellsouth Intellectual Property Corporation Methods and systems for personal interactive voice response
US20040140989A1 (en) 2002-05-28 2004-07-22 John Papageorge Content subscription and delivery service
US7546382B2 (en) 2002-05-28 2009-06-09 International Business Machines Corporation Methods and systems for authoring of mixed-initiative multi-modal interactions and related browsing mechanisms
US7398209B2 (en) 2002-06-03 2008-07-08 Voicebox Technologies, Inc. Systems and methods for responding to natural language speech utterance
US7143037B1 (en) 2002-06-12 2006-11-28 Cisco Technology, Inc. Spelling words using an arbitrary phonetic alphabet
US7548491B2 (en) 2002-06-13 2009-06-16 General Motors Corporation Personalized key system for a mobile vehicle
US7502737B2 (en) 2002-06-24 2009-03-10 Intel Corporation Multi-pass recognition of spoken dialogue
US20050021470A1 (en) 2002-06-25 2005-01-27 Bose Corporation Intelligent music track selection
US7177816B2 (en) 2002-07-05 2007-02-13 At&T Corp. System and method of handling problematic input during context-sensitive help for multi-modal dialog systems
US7177815B2 (en) 2002-07-05 2007-02-13 At&T Corp. System and method of context-sensitive help for multi-modal dialog systems
US20040010358A1 (en) 2002-07-12 2004-01-15 General Motors Corporation Vehicle personalization through web portal
US7693720B2 (en) 2002-07-15 2010-04-06 Voicebox Technologies, Inc. Mobile systems and methods for responding to natural language speech utterance
EP1391830A1 (fr) 2002-07-19 2004-02-25 Albert Inc. S.A. Système d'extraction d'informations dans un texte en langage naturel
EP1394692A1 (en) 2002-08-05 2004-03-03 Alcatel Method, terminal, browser application, and mark-up language for multimodal interaction between a user and a terminal
US7236923B1 (en) * 2002-08-07 2007-06-26 Itt Manufacturing Enterprises, Inc. Acronym extraction system and method of identifying acronyms and extracting corresponding expansions from text
US6741931B1 (en) 2002-09-05 2004-05-25 Daimlerchrysler Corporation Vehicle navigation system with off-board server
WO2004025463A1 (ja) 2002-09-09 2004-03-25 Catena Corporation 要件定義方法、ソフトウェアの開発方法、及び、要件単語の変更方法並びに新規規定方法
US7328155B2 (en) 2002-09-25 2008-02-05 Toyota Infotechnology Center Co., Ltd. Method and system for speech recognition using grammar weighted based upon location information
US7184957B2 (en) * 2002-09-25 2007-02-27 Toyota Infotechnology Center Co., Ltd. Multiple pass speech recognition method and system
JP2004125430A (ja) * 2002-09-30 2004-04-22 Matsushita Electric Ind Co Ltd ナビゲーションシステム、ナビゲーションセンタ、車載ナビゲーション装置、およびナビゲーション方法
US20030115062A1 (en) * 2002-10-29 2003-06-19 Walker Marilyn A. Method for automated sentence planning
US8793127B2 (en) 2002-10-31 2014-07-29 Promptu Systems Corporation Method and apparatus for automatically determining speaker characteristics for speech-directed advertising or other enhancement of speech-controlled devices or services
DE50308036D1 (de) 2002-11-13 2007-10-04 Bernd Schoenebeck Sprachverarbeitendes system und verfahren
US6739556B1 (en) 2002-11-20 2004-05-25 Raytheon Company Method and apparatus for providing an aircraft emergency safety control system
WO2004053836A1 (en) 2002-12-10 2004-06-24 Kirusa, Inc. Techniques for disambiguating speech input using multimodal interfaces
US6834265B2 (en) 2002-12-13 2004-12-21 Motorola, Inc. Method and apparatus for selective speech recognition
US7890324B2 (en) 2002-12-19 2011-02-15 At&T Intellectual Property Ii, L.P. Context-sensitive interface widgets for multi-modal dialog systems
US20040143440A1 (en) * 2003-01-03 2004-07-22 Venkatesh Prasad Vehicle speech recognition system
US8335683B2 (en) 2003-01-23 2012-12-18 Microsoft Corporation System for using statistical classifiers for spoken language understanding
US20040148170A1 (en) 2003-01-23 2004-07-29 Alejandro Acero Statistical classifiers for spoken language understanding and command/control scenarios
US20040158555A1 (en) 2003-02-11 2004-08-12 Terradigtal Systems Llc. Method for managing a collection of media objects
DE10306022B3 (de) 2003-02-13 2004-02-19 Siemens Ag Dreistufige Einzelworterkennung
KR100486733B1 (ko) 2003-02-24 2005-05-03 삼성전자주식회사 음소 결합정보를 이용한 연속 음성인식방법 및 장치
GB2398913B (en) * 2003-02-27 2005-08-17 Motorola Inc Noise estimation in speech recognition
JP4103639B2 (ja) * 2003-03-14 2008-06-18 セイコーエプソン株式会社 音響モデル作成方法および音響モデル作成装置ならびに音声認識装置
JP4155854B2 (ja) 2003-03-24 2008-09-24 富士通株式会社 対話制御システム及び方法
US7146319B2 (en) 2003-03-31 2006-12-05 Novauris Technologies Ltd. Phonetically based speech recognition system and method
US20050021826A1 (en) 2003-04-21 2005-01-27 Sunil Kumar Gateway controller for a multimodal system that provides inter-communication among different data and voice servers through various mobile devices, and interface for that controller
US7421393B1 (en) 2004-03-01 2008-09-02 At&T Corp. System for developing a dialog manager using modular spoken-dialog components
US20050015256A1 (en) 2003-05-29 2005-01-20 Kargman James B. Method and apparatus for ordering food items, and in particular, pizza
JP2005003926A (ja) 2003-06-11 2005-01-06 Sony Corp 情報処理装置および方法、並びにプログラム
JP2005010691A (ja) 2003-06-20 2005-01-13 P To Pa:Kk 音声認識装置、音声認識方法、会話制御装置、会話制御方法及びこれらのためのプログラム
US20040267534A1 (en) * 2003-06-27 2004-12-30 General Motors Corporation Selective vehicle component control
US7454368B2 (en) 2003-06-30 2008-11-18 At&T Intellectual Property I, L.P. Method, computer readable medium, and system for assisting a customer in making purchases
KR100577387B1 (ko) 2003-08-06 2006-05-10 삼성전자주식회사 음성 대화 시스템에서의 음성 인식 오류 처리 방법 및 장치
US20050043940A1 (en) 2003-08-20 2005-02-24 Marvin Elder Preparing a data source for a natural language query
US7428497B2 (en) 2003-10-06 2008-09-23 Utbk, Inc. Methods and apparatuses for pay-per-call advertising in mobile/wireless applications
US20070162296A1 (en) 2003-10-06 2007-07-12 Utbk, Inc. Methods and apparatuses for audio advertisements
US7308341B2 (en) * 2003-10-14 2007-12-11 Donnelly Corporation Vehicle communication system
GB0325497D0 (en) 2003-10-31 2003-12-03 Vox Generation Ltd Automated speech application creation deployment and management
US7454608B2 (en) 2003-10-31 2008-11-18 International Business Machines Corporation Resource configuration in multi-modal distributed computing systems
US7697673B2 (en) 2003-11-17 2010-04-13 Apptera Inc. System for advertisement selection, placement and delivery within a multiple-tenant voice interaction service system
JP2005157494A (ja) 2003-11-20 2005-06-16 Aruze Corp 会話制御装置及び会話制御方法
JP4558308B2 (ja) 2003-12-03 2010-10-06 ニュアンス コミュニケーションズ,インコーポレイテッド 音声認識システム、データ処理装置、そのデータ処理方法及びプログラム
US20050137877A1 (en) * 2003-12-17 2005-06-23 General Motors Corporation Method and system for enabling a device function of a vehicle
US7027586B2 (en) 2003-12-18 2006-04-11 Sbc Knowledge Ventures, L.P. Intelligently routing customer communications
US7266430B2 (en) * 2003-12-22 2007-09-04 International Business Machines Corporation Medical applications in telematics
GB2409561A (en) 2003-12-23 2005-06-29 Canon Kk A method of correcting errors in a speech recognition system
US20050137850A1 (en) 2003-12-23 2005-06-23 Intel Corporation Method for automation of programmable interfaces
WO2005064592A1 (ja) 2003-12-26 2005-07-14 Kabushikikaisha Kenwood 機器制御装置、音声認識装置、エージェント装置、車載機器制御装置、ナビゲーション装置、オーディオ装置、機器制御方法、音声認識方法、エージェント処理方法、車載機器制御方法、ナビゲーション方法、オーディオ装置制御方法及びプログラム
US7386443B1 (en) 2004-01-09 2008-06-10 At&T Corp. System and method for mobile automatic speech recognition
JP3924583B2 (ja) 2004-02-03 2007-06-06 松下電器産業株式会社 ユーザ適応型装置およびその制御方法
US7542903B2 (en) 2004-02-18 2009-06-02 Fuji Xerox Co., Ltd. Systems and methods for determining predictive models of discourse functions
US7706616B2 (en) 2004-02-27 2010-04-27 International Business Machines Corporation System and method for recognizing word patterns in a very large vocabulary based on a virtual keyboard layout
US20050216254A1 (en) 2004-03-24 2005-09-29 Gupta Anurag K System-resource-based multi-modal input fusion
US7289904B2 (en) * 2004-04-06 2007-10-30 Honda Motor Co., Ltd. Vehicle navigation system and methods for incorporating user preferences into same
US20050246174A1 (en) 2004-04-28 2005-11-03 Degolia Richard C Method and system for presenting dynamic commercial content to clients interacting with a voice extensible markup language system
US20050283752A1 (en) 2004-05-17 2005-12-22 Renate Fruchter DiVAS-a cross-media system for ubiquitous gesture-discourse-sketch knowledge capture and reuse
US20060206310A1 (en) 2004-06-29 2006-09-14 Damaka, Inc. System and method for natural language processing in a peer-to-peer hybrid communications network
US8528078B2 (en) 2004-07-15 2013-09-03 Anakam, Inc. System and method for blocking unauthorized network log in using stolen password
DE102004037858A1 (de) * 2004-08-04 2006-03-16 Harman Becker Automotive Systems Gmbh Navigationssystem mit sprachgesteuerter Angabe von Sonderzielen
US8447651B1 (en) 2004-08-25 2013-05-21 Amazon Technologies, Inc. Bidding on pending, query term-based advertising opportunities
US20060046740A1 (en) * 2004-09-01 2006-03-02 Johnson Karen L Technique for providing location-based information concerning products and services through an information assistance service
US7480618B2 (en) 2004-09-02 2009-01-20 Microsoft Corporation Eliminating interference of noisy modality in a multimodal application
US7716056B2 (en) * 2004-09-27 2010-05-11 Robert Bosch Corporation Method and system for interactive conversational dialogue for cognitively overloaded device users
FR2875919A1 (fr) 2004-09-27 2006-03-31 France Telecom Agent rationnel dialoguant, systeme de dialogue intelligent l'utilisant, procede de pilotage d'un dialogue intelligent, et programme pour sa mise en oeuvre
US20060074660A1 (en) 2004-09-29 2006-04-06 France Telecom Method and apparatus for enhancing speech recognition accuracy by using geographic data to filter a set of words
US7925506B2 (en) 2004-10-05 2011-04-12 Inago Corporation Speech recognition accuracy via concept to keyword mapping
US20060253281A1 (en) 2004-11-24 2006-11-09 Alan Letzt Healthcare communications and documentation system
US7376645B2 (en) 2004-11-29 2008-05-20 The Intellection Group, Inc. Multimodal natural language query system and architecture for processing voice and proximity-based queries
US20070214182A1 (en) 2005-01-15 2007-09-13 Outland Research, Llc Establishment-based media and messaging service
US7933388B1 (en) 2005-01-20 2011-04-26 Andre Denis Vanier Method and system for providing information and advertising content in a telephone system
US7873654B2 (en) 2005-01-24 2011-01-18 The Intellection Group, Inc. Multimodal natural language query system for processing and analyzing voice and proximity-based queries
US7437297B2 (en) 2005-01-27 2008-10-14 International Business Machines Corporation Systems and methods for predicting consequences of misinterpretation of user commands in automated systems
KR100718147B1 (ko) 2005-02-01 2007-05-14 삼성전자주식회사 음성인식용 문법망 생성장치 및 방법과 이를 이용한 대화체음성인식장치 및 방법
US7831433B1 (en) * 2005-02-03 2010-11-09 Hrl Laboratories, Llc System and method for using context in navigation dialog
US7609669B2 (en) 2005-02-14 2009-10-27 Vocollect, Inc. Voice directed system and method configured for assured messaging to multiple recipients
US7461059B2 (en) * 2005-02-23 2008-12-02 Microsoft Corporation Dynamically updated search results based upon continuously-evolving search query that is based at least in part upon phrase suggestion, search engine uses previous result sets performing additional search tasks
WO2006096873A1 (en) 2005-03-09 2006-09-14 Medio Systems, Inc. Method and system of bidding for advertisement placement on computing devices
US7283829B2 (en) 2005-03-25 2007-10-16 Cisco Technology, Inc. Management of call requests in multi-modal communication environments
US7668716B2 (en) 2005-05-05 2010-02-23 Dictaphone Corporation Incorporation of external knowledge in multimodal dialog systems
US7565239B2 (en) * 2005-05-06 2009-07-21 Alpine Electronics, Inc. Method and apparatus for navigation system for searching selected type of information along route to destination
US7813485B2 (en) 2005-05-26 2010-10-12 International Business Machines Corporation System and method for seamlessly integrating an interactive visual menu with an voice menu provided in an interactive voice response system
US7917365B2 (en) 2005-06-16 2011-03-29 Nuance Communications, Inc. Synchronizing visual and speech events in a multimodal application
US7672931B2 (en) 2005-06-30 2010-03-02 Microsoft Corporation Searching for content using voice search queries
US7873523B2 (en) * 2005-06-30 2011-01-18 Microsoft Corporation Computer implemented method of analyzing recognition results between a user and an interactive application utilizing inferred values instead of transcribed speech
US8180037B1 (en) 2005-06-30 2012-05-15 Sprint Spectrum L.P. Automated registration for mobile device reminders
JP2007011928A (ja) 2005-07-04 2007-01-18 Sony Corp コンテンツ提供システム、コンテンツ提供装置、コンテンツ配信サーバ、コンテンツ受信端末およびコンテンツ提供方法
WO2007008798A2 (en) 2005-07-07 2007-01-18 V-Enable, Inc. System and method for searching for network-based content in a multi-modal system using spoken keywords
WO2007008248A2 (en) 2005-07-11 2007-01-18 Voicedemand, Inc. Voice control of a media player
US7548859B2 (en) 2005-08-03 2009-06-16 Motorola, Inc. Method and system for assisting users in interacting with multi-modal dialog systems
US7640160B2 (en) * 2005-08-05 2009-12-29 Voicebox Technologies, Inc. Systems and methods for responding to natural language speech utterance
US7620549B2 (en) 2005-08-10 2009-11-17 Voicebox Technologies, Inc. System and method of supporting adaptive misrecognition in conversational speech
US20070043569A1 (en) 2005-08-19 2007-02-22 Intervoice Limited Partnership System and method for inheritance of advertised functionality in a user interactive system
US20070050279A1 (en) * 2005-08-26 2007-03-01 Palo Alto Research Center Incorporated Reverse bidding for trip services
US7949529B2 (en) 2005-08-29 2011-05-24 Voicebox Technologies, Inc. Mobile systems and methods of supporting natural language human-machine interactions
US8078551B2 (en) 2005-08-31 2011-12-13 Intuview Ltd. Decision-support expert system and methods for real-time exploitation of documents in non-english languages
WO2007027989A2 (en) 2005-08-31 2007-03-08 Voicebox Technologies, Inc. Dynamic speech sharpening
US8805339B2 (en) 2005-09-14 2014-08-12 Millennial Media, Inc. Categorization of a mobile user profile based on browse and viewing behavior
US8503995B2 (en) 2005-09-14 2013-08-06 Jumptap, Inc. Mobile dynamic advertisement creation and placement
US9009046B1 (en) 2005-09-27 2015-04-14 At&T Intellectual Property Ii, L.P. System and method for disambiguating multiple intents in a natural language dialog system
US7672852B2 (en) 2005-09-29 2010-03-02 Microsoft Corporation Localization of prompts
US8626588B2 (en) 2005-09-30 2014-01-07 Google Inc. Advertising with audio content
US20070078708A1 (en) 2005-09-30 2007-04-05 Hua Yu Using speech recognition to determine advertisements relevant to audio content and/or audio content relevant to advertisements
US20070078814A1 (en) 2005-10-04 2007-04-05 Kozoru, Inc. Novel information retrieval systems and methods
US20070185859A1 (en) 2005-10-12 2007-08-09 John Flowers Novel systems and methods for performing contextual information retrieval
US20070192309A1 (en) 2005-10-12 2007-08-16 Gordon Fischer Method and system for identifying sentence boundaries
JP4849662B2 (ja) 2005-10-21 2012-01-11 株式会社ユニバーサルエンターテインメント 会話制御装置
US7477909B2 (en) 2005-10-31 2009-01-13 Nuance Communications, Inc. System and method for conducting a search using a wireless mobile device
CN1959628A (zh) * 2005-10-31 2007-05-09 西门子(中国)有限公司 一种人机交互导航系统
JP2009521736A (ja) 2005-11-07 2009-06-04 スキャンスカウト,インコーポレイテッド リッチメディアと共に広告をレンダリングするための技術
US7587308B2 (en) * 2005-11-21 2009-09-08 Hewlett-Packard Development Company, L.P. Word recognition using ontologies
US8751145B2 (en) * 2005-11-30 2014-06-10 Volkswagen Of America, Inc. Method for voice recognition
US20070135101A1 (en) 2005-12-08 2007-06-14 Comverse, Ltd. Enhanced visual IVR capabilities
US7668644B2 (en) * 2005-12-22 2010-02-23 Nissan Technical Center North America, Inc. Vehicle fuel informational system
US8325398B2 (en) 2005-12-22 2012-12-04 Canon Kabushiki Kaisha Image editing system, image management apparatus, and image editing program
US20070174258A1 (en) 2006-01-23 2007-07-26 Jones Scott A Targeted mobile device advertisements
US20070186165A1 (en) 2006-02-07 2007-08-09 Pudding Ltd. Method And Apparatus For Electronically Providing Advertisements
US20070208732A1 (en) 2006-02-07 2007-09-06 Future Vistas, Inc. Telephonic information retrieval systems and methods
US8719005B1 (en) 2006-02-10 2014-05-06 Rusty Shawn Lee Method and apparatus for using directed reasoning to respond to natural language queries
US20070203736A1 (en) 2006-02-28 2007-08-30 Commonwealth Intellectual Property Holdings, Inc. Interactive 411 Directory Assistance
KR101716873B1 (ko) 2006-03-16 2017-03-15 엠.브루베이커 커티스 이동 객체에 하이퍼-관련 광고의 표시를 통한 수익 획득 시스템 및 방법
EP2011017A4 (en) 2006-03-30 2010-07-07 Stanford Res Inst Int METHOD AND APPARATUS FOR ANNOTATING MULTIMEDIA STREAMS
US8224695B2 (en) 2006-03-31 2012-07-17 Google Inc. Monetizing service calls through advertising
US7941753B2 (en) * 2006-03-31 2011-05-10 Aol Inc. Communicating appointment and/or mapping information among a calendar application and a navigation application
US20070276651A1 (en) 2006-05-23 2007-11-29 Motorola, Inc. Grammar adaptation through cooperative client and server based speech recognition
US7533089B2 (en) 2006-06-27 2009-05-12 International Business Machines Corporation Hybrid approach for query recommendation in conversation systems
CN101489469B (zh) 2006-07-10 2012-12-12 埃森哲环球服务有限公司 用于提供反馈的移动个人服务平台
WO2008011432A2 (en) * 2006-07-17 2008-01-24 Abraham Vasant System and method for coordinating customized mobility services through a network
US7620551B2 (en) 2006-07-20 2009-11-17 Mspot, Inc. Method and apparatus for providing search capability and targeted advertising for audio, image, and video content over the internet
US8799073B2 (en) 2006-08-15 2014-08-05 Microsoft Corporation Computing system for monetizing calendar applications
JP4181590B2 (ja) 2006-08-30 2008-11-19 株式会社東芝 インタフェース装置及びインタフェース処理方法
US8145493B2 (en) 2006-09-11 2012-03-27 Nuance Communications, Inc. Establishing a preferred mode of interaction between a user and a multimodal application
US8086463B2 (en) 2006-09-12 2011-12-27 Nuance Communications, Inc. Dynamically generating a vocal help prompt in a multimodal application
US7957976B2 (en) 2006-09-12 2011-06-07 Nuance Communications, Inc. Establishing a multimodal advertising personality for a sponsor of a multimodal application
WO2008032329A2 (en) 2006-09-13 2008-03-20 Alon Atsmon Providing content responsive to multimedia signals
US7788084B2 (en) 2006-09-19 2010-08-31 Xerox Corporation Labeling of work of art titles in text for natural language processing
US8073681B2 (en) 2006-10-16 2011-12-06 Voicebox Technologies, Inc. System and method for a cooperative conversational voice user interface
WO2008057268A2 (en) 2006-10-26 2008-05-15 Mobile Content Networks, Inc. Techniques for determining relevant advertisements in response to queries
US8880402B2 (en) 2006-10-28 2014-11-04 General Motors Llc Automatically adapting user guidance in automated speech recognition
US8924197B2 (en) 2006-10-31 2014-12-30 Semantifi, Inc. System and method for converting a natural language query into a logical query
WO2008056251A2 (en) 2006-11-10 2008-05-15 Audiogate Technologies Ltd. System and method for providing advertisement based on speech recognition
US8055502B2 (en) 2006-11-28 2011-11-08 General Motors Llc Voice dialing using a rejection reference
JP4833043B2 (ja) 2006-11-30 2011-12-07 ヤフー株式会社 ブログ又はクエリ・クリックを利用したアフィニティ装置
US7640272B2 (en) * 2006-12-07 2009-12-29 Microsoft Corporation Using automated content analysis for audio/video content consumption
TWI342010B (en) * 2006-12-13 2011-05-11 Delta Electronics Inc Speech recognition method and system with intelligent classification and adjustment
US7630978B2 (en) 2006-12-14 2009-12-08 Yahoo! Inc. Query rewriting with spell correction suggestions using a generated set of query features
US20080154604A1 (en) * 2006-12-22 2008-06-26 Nokia Corporation System and method for providing context-based dynamic speech grammar generation for use in search applications
US7818176B2 (en) 2007-02-06 2010-10-19 Voicebox Technologies, Inc. System and method for selecting and presenting advertisements based on natural language processing of voice-based input
US8219406B2 (en) 2007-03-15 2012-07-10 Microsoft Corporation Speech-centric multimodal user interface design in mobile technology
US8909532B2 (en) 2007-03-23 2014-12-09 Nuance Communications, Inc. Supporting multi-lingual user interaction with a multimodal application
ATE555433T1 (de) 2007-04-26 2012-05-15 Ford Global Tech Llc Emotives beratungssystem und verfahren
US8396713B2 (en) 2007-04-30 2013-03-12 Nuance Communications, Inc. Method and system for using a statistical language model and an action classifier in parallel with grammar for better handling of out-of-grammar utterances
US8032383B1 (en) 2007-05-04 2011-10-04 Foneweb, Inc. Speech controlled services and devices using internet
US20080294994A1 (en) 2007-05-18 2008-11-27 Justin David Kruger Event management system and method with calendar interface
EP2003572B1 (en) 2007-05-22 2010-08-04 Honda Motor Co., Ltd. Language understanding device
US8060367B2 (en) * 2007-06-26 2011-11-15 Targus Information Corporation Spatially indexed grammar and methods of use
US20090006194A1 (en) * 2007-06-27 2009-01-01 Microsoft Corporation Location, destination and other contextual information-based mobile advertisements
US8219399B2 (en) 2007-07-11 2012-07-10 Garmin Switzerland Gmbh Automated speech recognition (ASR) tiling
US20090024476A1 (en) 2007-07-18 2009-01-22 Idelix Software Inc. Method and system for enhanced geographically-based and time-based online advertising
US8639509B2 (en) 2007-07-27 2014-01-28 Robert Bosch Gmbh Method and system for computing or determining confidence scores for parse trees at all levels
US20090055180A1 (en) * 2007-08-23 2009-02-26 Coon Bradley S System and method for optimizing speech recognition in a vehicle
US8024188B2 (en) 2007-08-24 2011-09-20 Robert Bosch Gmbh Method and system of optimal selection strategy for statistical classifications
US20090070109A1 (en) 2007-09-12 2009-03-12 Microsoft Corporation Speech-to-Text Transcription for Personal Communication Devices
DE102007044792B4 (de) 2007-09-19 2012-12-13 Siemens Ag Verfahren, Steuergerät und System zur Steuerung oder Bedienung
US8868479B2 (en) 2007-09-28 2014-10-21 Telogis, Inc. Natural language parsers to normalize addresses for geocoding
DE102008051757A1 (de) 2007-11-12 2009-05-14 Volkswagen Ag Multimodale Benutzerschnittstelle eines Fahrerassistenzsystems zur Eingabe und Präsentation von Informationen
US8140335B2 (en) 2007-12-11 2012-03-20 Voicebox Technologies, Inc. System and method for providing a natural language voice user interface in an integrated voice navigation services environment
US8423362B2 (en) 2007-12-21 2013-04-16 General Motors Llc In-vehicle circumstantial speech recognition
US20090171908A1 (en) 2008-01-02 2009-07-02 Michael Patrick Nash Natural language minimally explicit grammar pattern
US20090197582A1 (en) * 2008-02-01 2009-08-06 Lewis Robert C Platform for mobile advertising and microtargeting of promotions
US8306810B2 (en) 2008-02-12 2012-11-06 Ezsav Inc. Systems and methods to enable interactivity among a plurality of devices
US8077975B2 (en) 2008-02-26 2011-12-13 Microsoft Corporation Handwriting symbol recognition accuracy using speech input
US8255224B2 (en) 2008-03-07 2012-08-28 Google Inc. Voice recognition grammar selection based on context
US20090259646A1 (en) 2008-04-09 2009-10-15 Yahoo!, Inc. Method for Calculating Score for Search Query
US20090259561A1 (en) 2008-04-15 2009-10-15 Donald Robert Martin Boys Method and System for Correlation of Product Quantities to Multiple Ship-to Addresses for a Single Online Order
US20090276700A1 (en) 2008-04-30 2009-11-05 Nokia Corporation Method, apparatus, and computer program product for determining user status indicators
US8090738B2 (en) 2008-05-14 2012-01-03 Microsoft Corporation Multi-modal search wildcards
US8589161B2 (en) 2008-05-27 2013-11-19 Voicebox Technologies, Inc. System and method for an integrated, multi-modal, multi-device natural language voice services environment
US9305548B2 (en) 2008-05-27 2016-04-05 Voicebox Technologies Corporation System and method for an integrated, multi-modal, multi-device natural language voice services environment
US20090304161A1 (en) 2008-06-05 2009-12-10 Nathan Marshall Pettyjohn system and method utilizing voice search to locate a product in stores from a phone
US8171021B2 (en) 2008-06-23 2012-05-01 Google Inc. Query identification and association
US8781833B2 (en) 2008-07-17 2014-07-15 Nuance Communications, Inc. Speech recognition semantic classification training
US8909810B2 (en) 2008-08-05 2014-12-09 Isabella Products, Inc. Systems and methods for multimedia content sharing
US20100064025A1 (en) 2008-09-10 2010-03-11 Nokia Corporation Method and Apparatus for Providing Media Service
US8224652B2 (en) 2008-09-26 2012-07-17 Microsoft Corporation Speech and text driven HMM-based body animation synthesis
US20100094707A1 (en) 2008-10-10 2010-04-15 Carl Johan Freer Method and platform for voice and location-based services for mobile advertising
US20100138300A1 (en) 2008-12-02 2010-06-03 At&T Intellectual Property I, L.P. Method and apparatus for promoting products or services
US8326637B2 (en) 2009-02-20 2012-12-04 Voicebox Technologies, Inc. System and method for processing multi-modal device interactions in a natural language voice services environment
JP4977163B2 (ja) 2009-03-30 2012-07-18 株式会社東芝 有限状態トランスデューサ決定化装置及び有限状態トランスデューサ決定化方法
US8543401B2 (en) 2009-04-17 2013-09-24 Synchronoss Technologies System and method for improving performance of semantic classifiers in spoken dialog systems
US8326599B2 (en) 2009-04-21 2012-12-04 Xerox Corporation Bi-phrase filtering for statistical machine translation
US20130254314A1 (en) 2009-06-09 2013-09-26 Edmond K. Chow Digital content delivery
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US8979538B2 (en) 2009-06-26 2015-03-17 Microsoft Technology Licensing, Llc Using game play elements to motivate learning
US9171541B2 (en) 2009-11-10 2015-10-27 Voicebox Technologies Corporation System and method for hybrid processing in a natural language voice services environment
US9502025B2 (en) 2009-11-10 2016-11-22 Voicebox Technologies Corporation System and method for providing a natural language content dedication service
US8712759B2 (en) 2009-11-13 2014-04-29 Clausal Computing Oy Specializing disambiguation of a natural language expression
US8612206B2 (en) 2009-12-08 2013-12-17 Microsoft Corporation Transliterating semitic languages including diacritics
US8612205B2 (en) 2010-06-14 2013-12-17 Xerox Corporation Word alignment method and system for improved vocabulary coverage in statistical machine translation
US8543374B2 (en) 2010-08-12 2013-09-24 Xerox Corporation Translation system combining hierarchical and phrase-based models
US9292149B2 (en) 2010-10-22 2016-03-22 Litl Llc Method and apparatus for public computing
GB2486002A (en) 2010-11-30 2012-06-06 Youview Tv Ltd Media Content Provision
US8645208B2 (en) 2010-12-14 2014-02-04 Yellowpages.Com Llc Systems and methods for providing automatic reminders for saved advertisements
US8849791B1 (en) 2011-06-29 2014-09-30 Amazon Technologies, Inc. Assisted shopping
US20130006734A1 (en) 2011-06-30 2013-01-03 Matthew Adam Ocko Automated bidding platform for digital incentives
JP6066354B2 (ja) 2011-07-01 2017-01-25 日本電気株式会社 信頼度計算の方法及び装置
US10546306B2 (en) 2011-09-07 2020-01-28 Elwha Llc Computational systems and methods for regulating information flow during interactions
US8762156B2 (en) 2011-09-28 2014-06-24 Apple Inc. Speech recognition repair using contextual information
US8340975B1 (en) 2011-10-04 2012-12-25 Theodore Alfred Rosenberger Interactive speech recognition device and system for hands-free building control
US8346563B1 (en) 2012-04-10 2013-01-01 Artificial Solutions Ltd. System and methods for delivering advanced natural language interaction applications
EP2839391A4 (en) 2012-04-20 2016-01-27 Maluuba Inc CONVERSATION AGENT
CA2873240C (en) 2012-05-16 2020-11-17 Xtreme Interactions Inc. System, device and method for processing interlaced multimodal user input
US9875483B2 (en) 2012-05-17 2018-01-23 Wal-Mart Stores, Inc. Conversational interfaces
US8892575B2 (en) 2012-06-06 2014-11-18 Sap Se Dictionary entry name generator
US8577671B1 (en) 2012-07-20 2013-11-05 Veveo, Inc. Method of and system for using conversation state information in a conversational interaction system
US8972243B1 (en) 2012-11-20 2015-03-03 Amazon Technologies, Inc. Parse information encoding in a finite state transducer
US9070366B1 (en) 2012-12-19 2015-06-30 Amazon Technologies, Inc. Architecture for multi-domain utterance processing
US10235358B2 (en) 2013-02-21 2019-03-19 Microsoft Technology Licensing, Llc Exploiting structured content for unsupervised natural language semantic parsing
US9601026B1 (en) 2013-03-07 2017-03-21 Posit Science Corporation Neuroplasticity games for depression
US9542947B2 (en) 2013-03-12 2017-01-10 Google Technology Holdings LLC Method and apparatus including parallell processes for voice recognition
AU2014233517B2 (en) 2013-03-15 2017-05-25 Apple Inc. Training an at least partial voice command system
US10372815B2 (en) 2013-07-12 2019-08-06 Microsoft Technology Licensing, Llc Interactive concept editing in computer-human interactive learning
US20150193379A1 (en) 2014-01-06 2015-07-09 Apple Inc. System and method for cognizant time-based reminders
US9037455B1 (en) 2014-01-08 2015-05-19 Google Inc. Limiting notification interruptions
US9519686B2 (en) 2014-04-09 2016-12-13 International Business Machines Corporation Confidence ranking of answers based on temporal semantics
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US20160078491A1 (en) 2014-09-16 2016-03-17 Voicebox Technologies Corporation System and method of marketing of reminders
US9626703B2 (en) 2014-09-16 2017-04-18 Voicebox Technologies Corporation Voice commerce
US9898459B2 (en) 2014-09-16 2018-02-20 Voicebox Technologies Corporation Integration of domain information into state transitions of a finite state transducer for natural language processing
US20160078773A1 (en) 2014-09-17 2016-03-17 Voicebox Technologies Corporation System and method of providing task-based solicitation of request related user inputs
EP3207467A4 (en) 2014-10-15 2018-05-23 VoiceBox Technologies Corporation System and method for providing follow-up responses to prior natural language inputs of a user
US10431214B2 (en) 2014-11-26 2019-10-01 Voicebox Technologies Corporation System and method of determining a domain and/or an action related to a natural language input
US10614799B2 (en) 2014-11-26 2020-04-07 Voicebox Technologies Corporation System and method of providing intent predictions for an utterance prior to a system detection of an end of the utterance
US20160188292A1 (en) 2014-12-30 2016-06-30 Voicebox Technologies Corporation System and method for interpreting natural language inputs based on storage of the inputs

Cited By (407)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9646614B2 (en) 2000-03-16 2017-05-09 Apple Inc. Fast, language-independent method for user authentication by voice
US11928604B2 (en) 2005-09-08 2024-03-12 Apple Inc. Method and apparatus for building an intelligent automated assistant
US10318871B2 (en) 2005-09-08 2019-06-11 Apple Inc. Method and apparatus for building an intelligent automated assistant
US11671920B2 (en) 2007-04-03 2023-06-06 Apple Inc. Method and system for operating a multifunction portable electronic device using voice-activation
US10568032B2 (en) 2007-04-03 2020-02-18 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US11023513B2 (en) 2007-12-20 2021-06-01 Apple Inc. Method and apparatus for searching using an active ontology
US10381016B2 (en) 2008-01-03 2019-08-13 Apple Inc. Methods and apparatus for altering audio output signals
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US9865248B2 (en) 2008-04-05 2018-01-09 Apple Inc. Intelligent text-to-speech conversion
US9626955B2 (en) 2008-04-05 2017-04-18 Apple Inc. Intelligent text-to-speech conversion
US10108612B2 (en) 2008-07-31 2018-10-23 Apple Inc. Mobile device having human language translation capability with positional feedback
US9535906B2 (en) 2008-07-31 2017-01-03 Apple Inc. Mobile device having human language translation capability with positional feedback
US11348582B2 (en) 2008-10-02 2022-05-31 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10643611B2 (en) 2008-10-02 2020-05-05 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10475446B2 (en) 2009-06-05 2019-11-12 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US11080012B2 (en) 2009-06-05 2021-08-03 Apple Inc. Interface for a virtual digital assistant
US10795541B2 (en) 2009-06-05 2020-10-06 Apple Inc. Intelligent organization of tasks items
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10283110B2 (en) 2009-07-02 2019-05-07 Apple Inc. Methods and apparatuses for automatic speech recognition
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10741185B2 (en) 2010-01-18 2020-08-11 Apple Inc. Intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10706841B2 (en) 2010-01-18 2020-07-07 Apple Inc. Task flow identification based on user intent
US9548050B2 (en) 2010-01-18 2017-01-17 Apple Inc. Intelligent automated assistant
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US11423886B2 (en) 2010-01-18 2022-08-23 Apple Inc. Task flow identification based on user intent
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10607140B2 (en) 2010-01-25 2020-03-31 Newvaluexchange Ltd. Apparatuses, methods and systems for a digital conversation management platform
US10984326B2 (en) 2010-01-25 2021-04-20 Newvaluexchange Ltd. Apparatuses, methods and systems for a digital conversation management platform
US11410053B2 (en) 2010-01-25 2022-08-09 Newvaluexchange Ltd. Apparatuses, methods and systems for a digital conversation management platform
US10607141B2 (en) 2010-01-25 2020-03-31 Newvaluexchange Ltd. Apparatuses, methods and systems for a digital conversation management platform
US10984327B2 (en) 2010-01-25 2021-04-20 New Valuexchange Ltd. Apparatuses, methods and systems for a digital conversation management platform
US9633660B2 (en) 2010-02-25 2017-04-25 Apple Inc. User profiling for voice input processing
US10692504B2 (en) 2010-02-25 2020-06-23 Apple Inc. User profiling for voice input processing
US10049675B2 (en) 2010-02-25 2018-08-14 Apple Inc. User profiling for voice input processing
US10417405B2 (en) 2011-03-21 2019-09-17 Apple Inc. Device access using voice authentication
US10102359B2 (en) 2011-03-21 2018-10-16 Apple Inc. Device access using voice authentication
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
CN110264145B (zh) * 2011-06-03 2023-08-22 苹果公司 用于提供提醒的方法、设备、系统和介质
CN103582896A (zh) * 2011-06-03 2014-02-12 苹果公司 生成和处理代表待执行任务的任务项目
CN110264145A (zh) * 2011-06-03 2019-09-20 苹果公司 生成和处理代表待执行任务的任务项目
CN110110953A (zh) * 2011-06-03 2019-08-09 苹果公司 生成和处理代表待执行任务的任务项目
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US11350253B2 (en) 2011-06-03 2022-05-31 Apple Inc. Active transport based notifications
US11120372B2 (en) 2011-06-03 2021-09-14 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
CN110110952A (zh) * 2011-06-03 2019-08-09 苹果公司 生成和处理代表待执行任务的任务项目
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
CN110232489A (zh) * 2011-06-03 2019-09-13 苹果公司 生成和处理代表待执行任务的任务项目
CN102255952A (zh) * 2011-06-13 2011-11-23 苏州萃智新技术开发有限公司 基于位置的服务中间件
US9798393B2 (en) 2011-08-29 2017-10-24 Apple Inc. Text correction processing
CN105719647B (zh) * 2011-09-27 2019-09-13 感官公司 使用说话者检验的背景语音辨识助理
CN105719647A (zh) * 2011-09-27 2016-06-29 感官公司 使用说话者检验的背景语音辨识助理
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
CN103226949A (zh) * 2011-09-30 2013-07-31 苹果公司 在虚拟助理中使用情境信息来促进命令的处理
CN103226949B (zh) * 2011-09-30 2017-02-01 苹果公司 在虚拟助理中使用情境信息来促进命令的处理
CN102520789A (zh) * 2011-11-18 2012-06-27 上海聚力传媒技术有限公司 一种用于实现语音控制受控设备的方法与设备
US11069336B2 (en) 2012-03-02 2021-07-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US11740776B2 (en) 2012-05-09 2023-08-29 Apple Inc. Context-specific user interfaces
US9953088B2 (en) 2012-05-14 2018-04-24 Apple Inc. Crowd sourcing information to fulfill user requests
US11269678B2 (en) 2012-05-15 2022-03-08 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US11321116B2 (en) 2012-05-15 2022-05-03 Apple Inc. Systems and methods for integrating third party services with a digital assistant
CN107608586B (zh) * 2012-06-05 2021-03-19 苹果公司 导航期间的语音指令
US10911872B2 (en) 2012-06-05 2021-02-02 Apple Inc. Context-aware voice guidance
US11290820B2 (en) 2012-06-05 2022-03-29 Apple Inc. Voice instructions during navigation
US11727641B2 (en) 2012-06-05 2023-08-15 Apple Inc. Problem reporting in maps
US11055912B2 (en) 2012-06-05 2021-07-06 Apple Inc. Problem reporting in maps
US11082773B2 (en) 2012-06-05 2021-08-03 Apple Inc. Context-aware voice guidance
US10718625B2 (en) 2012-06-05 2020-07-21 Apple Inc. Voice instructions during navigation
US10732003B2 (en) 2012-06-05 2020-08-04 Apple Inc. Voice instructions during navigation
CN107608586A (zh) * 2012-06-05 2018-01-19 苹果公司 导航期间的语音指令
US10079014B2 (en) 2012-06-08 2018-09-18 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9971774B2 (en) 2012-09-19 2018-05-15 Apple Inc. Voice-based media searching
US11676578B2 (en) 2012-12-28 2023-06-13 Saturn Licensing Llc Information processing device, information processing method, and program
US11100919B2 (en) 2012-12-28 2021-08-24 Saturn Licensing Llc Information processing device, information processing method, and program
US10424291B2 (en) 2012-12-28 2019-09-24 Saturn Licensing Llc Information processing device, information processing method, and program
CN104871240A (zh) * 2012-12-28 2015-08-26 索尼公司 信息处理设备、信息处理方法、以及程序
US9466295B2 (en) 2012-12-31 2016-10-11 Via Technologies, Inc. Method for correcting a speech response and natural language dialogue system
TWI594139B (zh) * 2012-12-31 2017-08-01 威盛電子股份有限公司 修正語音應答的方法及自然語言對話系統
US10714117B2 (en) 2013-02-07 2020-07-14 Apple Inc. Voice trigger for a digital assistant
US11636869B2 (en) 2013-02-07 2023-04-25 Apple Inc. Voice trigger for a digital assistant
US10978090B2 (en) 2013-02-07 2021-04-13 Apple Inc. Voice trigger for a digital assistant
CN104050967A (zh) * 2013-03-14 2014-09-17 本田技研工业株式会社 语音接口系统和方法
CN105190489A (zh) * 2013-03-14 2015-12-23 微软技术许可有限责任公司 用于文本预测的语言模型词典
US11388291B2 (en) 2013-03-14 2022-07-12 Apple Inc. System and method for processing voicemail
CN110096712A (zh) * 2013-03-15 2019-08-06 苹果公司 通过智能数字助理的用户培训
US11798547B2 (en) 2013-03-15 2023-10-24 Apple Inc. Voice activated device for use with a voice-based digital assistant
US11539831B2 (en) 2013-03-15 2022-12-27 Apple Inc. Providing remote interactions with host device using a wireless device
US11609631B2 (en) 2013-05-20 2023-03-21 Intel Corporation Natural human-computer interaction for virtual personal assistant systems
CN105122353A (zh) * 2013-05-20 2015-12-02 英特尔公司 用于虚拟个人助理系统的自然人-计算机交互
US11181980B2 (en) 2013-05-20 2021-11-23 Intel Corporation Natural human-computer interaction for virtual personal assistant systems
US10198069B2 (en) 2013-05-20 2019-02-05 Intel Corporation Natural human-computer interaction for virtual personal assistant systems
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
US9633674B2 (en) 2013-06-07 2017-04-25 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9966060B2 (en) 2013-06-07 2018-05-08 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9620104B2 (en) 2013-06-07 2017-04-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9966068B2 (en) 2013-06-08 2018-05-08 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10657961B2 (en) 2013-06-08 2020-05-19 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US10769385B2 (en) 2013-06-09 2020-09-08 Apple Inc. System and method for inferring user intent from speech inputs
US11727219B2 (en) 2013-06-09 2023-08-15 Apple Inc. System and method for inferring user intent from speech inputs
US11048473B2 (en) 2013-06-09 2021-06-29 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10185542B2 (en) 2013-06-09 2019-01-22 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
CN111368155A (zh) * 2013-06-21 2020-07-03 微软技术许可有限责任公司 环境感知对话策略和响应生成
CN111368155B (zh) * 2013-06-21 2024-03-08 微软技术许可有限责任公司 环境感知对话策略和响应生成
CN105453080A (zh) * 2013-08-30 2016-03-30 英特尔公司 用于虚拟个人助理的可扩展上下文感知的自然语言交互
US11314370B2 (en) 2013-12-06 2022-04-26 Apple Inc. Method for extracting salient dialog usage from live data
CN103618838A (zh) * 2013-12-12 2014-03-05 惠州Tcl移动通信有限公司 一种利用移动终端辅助驾驶的方法及系统
CN106796787A (zh) * 2014-05-20 2017-05-31 亚马逊技术有限公司 在自然语言处理中使用先前对话行为进行的语境解释
CN106796787B (zh) * 2014-05-20 2020-12-22 亚马逊技术有限公司 在自然语言处理中使用先前对话行为进行的语境解释
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US11133008B2 (en) 2014-05-30 2021-09-28 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US11670289B2 (en) 2014-05-30 2023-06-06 Apple Inc. Multi-command single utterance input method
US10169329B2 (en) 2014-05-30 2019-01-01 Apple Inc. Exemplar-based natural language processing
US11257504B2 (en) 2014-05-30 2022-02-22 Apple Inc. Intelligent assistant for home automation
US10083690B2 (en) 2014-05-30 2018-09-25 Apple Inc. Better resolution when referencing to concepts
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10714095B2 (en) 2014-05-30 2020-07-14 Apple Inc. Intelligent assistant for home automation
US10878809B2 (en) 2014-05-30 2020-12-29 Apple Inc. Multi-command single utterance input method
US10497365B2 (en) 2014-05-30 2019-12-03 Apple Inc. Multi-command single utterance input method
US10657966B2 (en) 2014-05-30 2020-05-19 Apple Inc. Better resolution when referencing to concepts
US11810562B2 (en) 2014-05-30 2023-11-07 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10417344B2 (en) 2014-05-30 2019-09-17 Apple Inc. Exemplar-based natural language processing
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US10699717B2 (en) 2014-05-30 2020-06-30 Apple Inc. Intelligent assistant for home automation
US11699448B2 (en) 2014-05-30 2023-07-11 Apple Inc. Intelligent assistant for home automation
US11430571B2 (en) 2014-05-30 2022-08-30 Apple Inc. Wellness aggregator
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9668024B2 (en) 2014-06-30 2017-05-30 Apple Inc. Intelligent automated assistant for TV user interactions
US11516537B2 (en) 2014-06-30 2022-11-29 Apple Inc. Intelligent automated assistant for TV user interactions
US10904611B2 (en) 2014-06-30 2021-01-26 Apple Inc. Intelligent automated assistant for TV user interactions
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
CN109598112A (zh) * 2014-07-18 2019-04-09 谷歌有限责任公司 利用协同定位信息的发言人验证
US11942095B2 (en) 2014-07-18 2024-03-26 Google Llc Speaker verification using co-location information
US11550465B2 (en) 2014-08-15 2023-01-10 Apple Inc. Weather user interface
US11922004B2 (en) 2014-08-15 2024-03-05 Apple Inc. Weather user interface
CN105355202B (zh) * 2014-08-22 2021-03-09 现代自动车株式会社 语音识别装置、具有语音识别装置的车辆及其控制方法
CN105355202A (zh) * 2014-08-22 2016-02-24 现代自动车株式会社 语音识别装置、具有语音识别装置的车辆及其控制方法
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US10431204B2 (en) 2014-09-11 2019-10-01 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
CN107112013B (zh) * 2014-09-14 2020-10-23 谷歌有限责任公司 用于创建可定制对话系统引擎的平台
CN107112013A (zh) * 2014-09-14 2017-08-29 谷歌公司 用于创建可定制对话系统引擎的平台
CN107004209A (zh) * 2014-09-16 2017-08-01 声钰科技 营销提示的系统和方法
US10453443B2 (en) 2014-09-30 2019-10-22 Apple Inc. Providing an indication of the suitability of speech recognition
US9986419B2 (en) 2014-09-30 2018-05-29 Apple Inc. Social reminders
US10438595B2 (en) 2014-09-30 2019-10-08 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10390213B2 (en) 2014-09-30 2019-08-20 Apple Inc. Social reminders
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
CN106796606B (zh) * 2014-10-10 2020-07-17 歌乐株式会社 检索系统
CN106796606A (zh) * 2014-10-10 2017-05-31 歌乐株式会社 检索系统
US10514268B2 (en) 2014-10-10 2019-12-24 Clarion Co., Ltd. Search system
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US11556230B2 (en) 2014-12-02 2023-01-17 Apple Inc. Data detection
CN107112015A (zh) * 2014-12-30 2017-08-29 微软技术许可有限责任公司 发现第三方启用语音的资源的能力
CN104572947B (zh) * 2014-12-31 2018-03-27 国家电网公司 电力自助缴费终端中的多语种集成调用引擎及其使用方法
CN104572947A (zh) * 2014-12-31 2015-04-29 国家电网公司 电力自助缴费终端中的多语种集成调用引擎及其使用方法
US11388280B2 (en) 2015-02-02 2022-07-12 Apple Inc. Device, method, and graphical user interface for battery management
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US11231904B2 (en) 2015-03-06 2022-01-25 Apple Inc. Reducing response latency of intelligent automated assistants
CN107430489A (zh) * 2015-03-08 2017-12-01 苹果公司 共享用户可配置的图形构造
CN107430489B (zh) * 2015-03-08 2021-07-09 苹果公司 共享用户可配置的图形构造的方法、介质和设备
US10529332B2 (en) 2015-03-08 2020-01-07 Apple Inc. Virtual assistant activation
US10311871B2 (en) 2015-03-08 2019-06-04 Apple Inc. Competing devices responding to voice triggers
US10930282B2 (en) 2015-03-08 2021-02-23 Apple Inc. Competing devices responding to voice triggers
US11087759B2 (en) 2015-03-08 2021-08-10 Apple Inc. Virtual assistant activation
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US11842734B2 (en) 2015-03-08 2023-12-12 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US11468282B2 (en) 2015-05-15 2022-10-11 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US11070949B2 (en) 2015-05-27 2021-07-20 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on an electronic device with a touch-sensitive display
US11127397B2 (en) 2015-05-27 2021-09-21 Apple Inc. Device voice control
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10681212B2 (en) 2015-06-05 2020-06-09 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10356243B2 (en) 2015-06-05 2019-07-16 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11385860B2 (en) 2015-06-07 2022-07-12 Apple Inc. Browser with docked tabs
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US11010127B2 (en) 2015-06-29 2021-05-18 Apple Inc. Virtual assistant for media playback
US11947873B2 (en) 2015-06-29 2024-04-02 Apple Inc. Virtual assistant for media playback
CN107851437A (zh) * 2015-08-10 2018-03-27 歌乐株式会社 语音操作系统、服务器装置、车载设备和语音操作方法
CN107851437B (zh) * 2015-08-10 2021-08-10 歌乐株式会社 语音操作系统、服务器装置、车载设备和语音操作方法
US11580867B2 (en) 2015-08-20 2023-02-14 Apple Inc. Exercised-based watch face and complications
US11908343B2 (en) 2015-08-20 2024-02-20 Apple Inc. Exercised-based watch face and complications
CN105183850A (zh) * 2015-09-07 2015-12-23 百度在线网络技术(北京)有限公司 基于人工智能的信息查询方法及装置
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US11809483B2 (en) 2015-09-08 2023-11-07 Apple Inc. Intelligent automated assistant for media search and playback
US11853536B2 (en) 2015-09-08 2023-12-26 Apple Inc. Intelligent automated assistant in a media environment
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US11500672B2 (en) 2015-09-08 2022-11-15 Apple Inc. Distributed personal assistant
US11126400B2 (en) 2015-09-08 2021-09-21 Apple Inc. Zero latency digital assistant
US11550542B2 (en) 2015-09-08 2023-01-10 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US11526368B2 (en) 2015-11-06 2022-12-13 Apple Inc. Intelligent automated assistant in a messaging environment
US11886805B2 (en) 2015-11-09 2024-01-30 Apple Inc. Unconventional virtual assistant interactions
US10354652B2 (en) 2015-12-02 2019-07-16 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10942703B2 (en) 2015-12-23 2021-03-09 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
CN107305483A (zh) * 2016-04-25 2017-10-31 北京搜狗科技发展有限公司 一种基于语义识别的语音交互方法及装置
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
US11069347B2 (en) 2016-06-08 2021-07-20 Apple Inc. Intelligent automated assistant for media exploration
US10354011B2 (en) 2016-06-09 2019-07-16 Apple Inc. Intelligent automated assistant in a home environment
US11037565B2 (en) 2016-06-10 2021-06-15 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10733993B2 (en) 2016-06-10 2020-08-04 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US11657820B2 (en) 2016-06-10 2023-05-23 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US11809783B2 (en) 2016-06-11 2023-11-07 Apple Inc. Intelligent device arbitration and control
US10942702B2 (en) 2016-06-11 2021-03-09 Apple Inc. Intelligent device arbitration and control
US10269345B2 (en) 2016-06-11 2019-04-23 Apple Inc. Intelligent task discovery
US10297253B2 (en) 2016-06-11 2019-05-21 Apple Inc. Application integration with a digital assistant
US11918857B2 (en) 2016-06-11 2024-03-05 Apple Inc. Activity and workout updates
US10521466B2 (en) 2016-06-11 2019-12-31 Apple Inc. Data driven natural language event detection and classification
US10580409B2 (en) 2016-06-11 2020-03-03 Apple Inc. Application integration with a digital assistant
US10089072B2 (en) 2016-06-11 2018-10-02 Apple Inc. Intelligent device arbitration and control
US11152002B2 (en) 2016-06-11 2021-10-19 Apple Inc. Application integration with a digital assistant
US11660503B2 (en) 2016-06-11 2023-05-30 Apple Inc. Activity and workout updates
US11749275B2 (en) 2016-06-11 2023-09-05 Apple Inc. Application integration with a digital assistant
US11148007B2 (en) 2016-06-11 2021-10-19 Apple Inc. Activity and workout updates
US11161010B2 (en) 2016-06-11 2021-11-02 Apple Inc. Activity and workout updates
US11632591B2 (en) 2016-06-12 2023-04-18 Apple Inc. Recording and broadcasting application visual output
US11336961B2 (en) 2016-06-12 2022-05-17 Apple Inc. Recording and broadcasting application visual output
CN106157651A (zh) * 2016-07-26 2016-11-23 中国科学院自动化研究所 一种基于语音语义理解的交通电台路况信息播报系统
CN106157651B (zh) * 2016-07-26 2019-06-14 中国科学院自动化研究所 一种基于语音语义理解的交通电台路况信息播报系统
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10553215B2 (en) 2016-09-23 2020-02-04 Apple Inc. Intelligent automated assistant
CN106503156B (zh) * 2016-10-24 2019-09-03 北京百度网讯科技有限公司 基于人工智能的人机交互方法及装置
CN106503156A (zh) * 2016-10-24 2017-03-15 北京百度网讯科技有限公司 基于人工智能的人机交互方法及装置
CN106682090A (zh) * 2016-11-29 2017-05-17 上海智臻智能网络科技股份有限公司 主动交互实现装置、方法及智能语音交互设备
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
CN108242237A (zh) * 2016-12-26 2018-07-03 现代自动车株式会社 语音处理设备、具有该设备的车辆以及语音处理方法
US11656884B2 (en) 2017-01-09 2023-05-23 Apple Inc. Application integration with a digital assistant
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
CN110301004A (zh) * 2017-02-23 2019-10-01 语义设备公司 可扩展对话系统
US11842724B2 (en) 2017-02-23 2023-12-12 Microsoft Technology Licensing, Llc Expandable dialogue system
CN110301004B (zh) * 2017-02-23 2023-08-08 微软技术许可有限责任公司 可扩展对话系统
CN108694944A (zh) * 2017-04-05 2018-10-23 三星电子株式会社 通过使用框架生成自然语言表达的方法和设备
CN108694944B (zh) * 2017-04-05 2023-10-31 三星电子株式会社 通过使用框架生成自然语言表达的方法和设备
CN107146610A (zh) * 2017-04-10 2017-09-08 北京猎户星空科技有限公司 一种用户意图的确定方法及装置
US10741181B2 (en) 2017-05-09 2020-08-11 Apple Inc. User interface for correcting recognition errors
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10332518B2 (en) 2017-05-09 2019-06-25 Apple Inc. User interface for correcting recognition errors
US11599331B2 (en) 2017-05-11 2023-03-07 Apple Inc. Maintaining privacy of personal information
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10755703B2 (en) 2017-05-11 2020-08-25 Apple Inc. Offline personal assistant
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10847142B2 (en) 2017-05-11 2020-11-24 Apple Inc. Maintaining privacy of personal information
US11327634B2 (en) 2017-05-12 2022-05-10 Apple Inc. Context-specific user interfaces
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
US10789945B2 (en) 2017-05-12 2020-09-29 Apple Inc. Low-latency intelligent automated assistant
US10791176B2 (en) 2017-05-12 2020-09-29 Apple Inc. Synchronization and task delegation of a digital assistant
US11580990B2 (en) 2017-05-12 2023-02-14 Apple Inc. User-specific acoustic models
US11405466B2 (en) 2017-05-12 2022-08-02 Apple Inc. Synchronization and task delegation of a digital assistant
US11380310B2 (en) 2017-05-12 2022-07-05 Apple Inc. Low-latency intelligent automated assistant
US11775141B2 (en) 2017-05-12 2023-10-03 Apple Inc. Context-specific user interfaces
US10410637B2 (en) 2017-05-12 2019-09-10 Apple Inc. User-specific acoustic models
US10810274B2 (en) 2017-05-15 2020-10-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10482874B2 (en) 2017-05-15 2019-11-19 Apple Inc. Hierarchical belief states for digital assistants
CN110637284A (zh) * 2017-05-16 2019-12-31 谷歌有限责任公司 解析基于图像和/或其它传感器数据的自动化助理请求
US11734926B2 (en) 2017-05-16 2023-08-22 Google Llc Resolving automated assistant requests that are based on image(s) and/or other sensor data
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US11532306B2 (en) 2017-05-16 2022-12-20 Apple Inc. Detecting a trigger of a digital assistant
US10909171B2 (en) 2017-05-16 2021-02-02 Apple Inc. Intelligent automated assistant for media exploration
US10748546B2 (en) 2017-05-16 2020-08-18 Apple Inc. Digital assistant services based on device capabilities
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US11217255B2 (en) 2017-05-16 2022-01-04 Apple Inc. Far-field extension for digital assistant services
US11675829B2 (en) 2017-05-16 2023-06-13 Apple Inc. Intelligent automated assistant for media exploration
US10867180B2 (en) 2017-05-16 2020-12-15 Google Llc Resolving automated assistant requests that are based on image(s) and/or other sensor data
CN110637284B (zh) * 2017-05-16 2020-11-27 谷歌有限责任公司 解析自动化助理请求的方法
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US11274932B2 (en) * 2017-06-14 2022-03-15 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Navigation method, navigation device, and storage medium
CN109101475B (zh) * 2017-06-20 2021-07-27 北京嘀嘀无限科技发展有限公司 出行语音识别方法、系统和计算机设备
CN109101475A (zh) * 2017-06-20 2018-12-28 北京嘀嘀无限科技发展有限公司 出行语音识别方法、系统和计算机设备
CN107507614A (zh) * 2017-07-28 2017-12-22 北京小蓦机器人技术有限公司 结合ui执行自然语言命令的方法、设备、系统与存储介质
CN107507614B (zh) * 2017-07-28 2018-12-21 北京小蓦机器人技术有限公司 结合ui执行自然语言命令的方法、设备、系统与存储介质
CN111201566A (zh) * 2017-08-10 2020-05-26 费赛特实验室有限责任公司 用于处理数据和输出用户反馈的口语通信设备和计算体系架构以及相关方法
US11657215B2 (en) 2017-08-28 2023-05-23 Microsoft Technology Licensing, Llc Robust expandable dialogue system
CN110019699B (zh) * 2017-09-05 2023-10-20 声音猎手公司 域间通过语法槽的分类
US11935029B2 (en) 2017-09-05 2024-03-19 Soundhound, Inc. Classification by natural language grammar slots across domains
CN110019699A (zh) * 2017-09-05 2019-07-16 声音猎手公司 域间通过语法槽的分类
CN107680591A (zh) * 2017-09-21 2018-02-09 百度在线网络技术(北京)有限公司 基于车载终端的语音交互方法、装置及其设备
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
CN111108476A (zh) * 2017-12-08 2020-05-05 谷歌有限责任公司 通过语音驱动的计算基础设施进行的图形用户界面渲染管理
CN111108476B (zh) * 2017-12-08 2024-03-26 谷歌有限责任公司 通过语音驱动的计算基础设施进行的图形用户界面渲染管理
CN109920407A (zh) * 2017-12-12 2019-06-21 上海博泰悦臻网络技术服务有限公司 智能终端及其饮食搜寻方法、及无人驾驶车辆
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
CN110070861A (zh) * 2018-01-22 2019-07-30 丰田自动车株式会社 信息处理装置和信息处理方法
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
CN108563631A (zh) * 2018-03-23 2018-09-21 江苏速度信息科技股份有限公司 一种自然语言地址描述的自动识别方法
US11710482B2 (en) 2018-03-26 2023-07-25 Apple Inc. Natural assistant interaction
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US11782575B2 (en) 2018-05-07 2023-10-10 Apple Inc. User interfaces for sharing contextually relevant media content
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11900923B2 (en) 2018-05-07 2024-02-13 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11854539B2 (en) 2018-05-07 2023-12-26 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11487364B2 (en) 2018-05-07 2022-11-01 Apple Inc. Raise to speak
US11327650B2 (en) 2018-05-07 2022-05-10 Apple Inc. User interfaces having a collection of complications
US11169616B2 (en) 2018-05-07 2021-11-09 Apple Inc. Raise to speak
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US11009970B2 (en) 2018-06-01 2021-05-18 Apple Inc. Attention aware virtual assistant dismissal
US10403283B1 (en) 2018-06-01 2019-09-03 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10984798B2 (en) 2018-06-01 2021-04-20 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11431642B2 (en) 2018-06-01 2022-08-30 Apple Inc. Variable latency device coordination
US11495218B2 (en) 2018-06-01 2022-11-08 Apple Inc. Virtual assistant operation in multi-device environments
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US10684703B2 (en) 2018-06-01 2020-06-16 Apple Inc. Attention aware virtual assistant dismissal
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US10720160B2 (en) 2018-06-01 2020-07-21 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11360577B2 (en) 2018-06-01 2022-06-14 Apple Inc. Attention aware virtual assistant dismissal
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US10944859B2 (en) 2018-06-03 2021-03-09 Apple Inc. Accelerated task performance
US10504518B1 (en) 2018-06-03 2019-12-10 Apple Inc. Accelerated task performance
CN112272635A (zh) * 2018-06-08 2021-01-26 罗伯特·博世有限公司 用于优化停车建议的方法和车辆系统
CN112272635B (zh) * 2018-06-08 2023-08-11 罗伯特·博世有限公司 用于优化停车建议的方法和车辆系统
CN108871370A (zh) * 2018-07-03 2018-11-23 北京百度网讯科技有限公司 导航方法、装置、设备和介质
CN109240640A (zh) * 2018-08-30 2019-01-18 百度在线网络技术(北京)有限公司 广告语音交互方法、装置及存储介质
CN109240640B (zh) * 2018-08-30 2021-04-20 百度在线网络技术(北京)有限公司 广告语音交互方法、装置及存储介质
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
CN109540160A (zh) * 2018-10-18 2019-03-29 深圳壹账通智能科技有限公司 一种基于语音交互的最佳路径分析方法及相关设备
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
TWI698756B (zh) * 2018-11-08 2020-07-11 中華電信股份有限公司 查詢服務之系統與方法
CN111301312A (zh) * 2018-12-12 2020-06-19 现代自动车株式会社 语音识别系统的会话引导方法
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11131967B2 (en) 2019-05-06 2021-09-28 Apple Inc. Clock faces for an electronic device
US11340757B2 (en) 2019-05-06 2022-05-24 Apple Inc. Clock faces for an electronic device
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11301130B2 (en) 2019-05-06 2022-04-12 Apple Inc. Restricted operation of an electronic device
US11705130B2 (en) 2019-05-06 2023-07-18 Apple Inc. Spoken notifications
US11217251B2 (en) 2019-05-06 2022-01-04 Apple Inc. Spoken notifications
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11340778B2 (en) 2019-05-06 2022-05-24 Apple Inc. Restricted operation of an electronic device
US11888791B2 (en) 2019-05-21 2024-01-30 Apple Inc. Providing message response suggestions
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
CN112015873A (zh) * 2019-05-31 2020-12-01 苹果公司 通过设备内置目标定位和个性化实现语音助理可发现性
US11237797B2 (en) 2019-05-31 2022-02-01 Apple Inc. User activity shortcut suggestions
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11360739B2 (en) 2019-05-31 2022-06-14 Apple Inc. User activity shortcut suggestions
US11657813B2 (en) 2019-05-31 2023-05-23 Apple Inc. Voice identification in digital assistant systems
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11831799B2 (en) 2019-08-09 2023-11-28 Apple Inc. Propagating context information in a privacy preserving manner
CN112455442A (zh) * 2019-09-09 2021-03-09 通用汽车环球科技运作有限责任公司 用于辅助驾驶车辆中的语音控制操纵的方法和装置
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
CN110850829A (zh) * 2019-11-19 2020-02-28 苏州思必驰信息科技有限公司 一种基于天气的车载设备智能控制方法及系统
CN110850829B (zh) * 2019-11-19 2021-11-26 思必驰科技股份有限公司 一种基于天气的车载设备智能控制方法及系统
US11924254B2 (en) 2020-05-11 2024-03-05 Apple Inc. Digital assistant hardware abstraction
US11442414B2 (en) 2020-05-11 2022-09-13 Apple Inc. User interfaces related to time
US11765209B2 (en) 2020-05-11 2023-09-19 Apple Inc. Digital assistant hardware abstraction
US11842032B2 (en) 2020-05-11 2023-12-12 Apple Inc. User interfaces for managing user interface sharing
US11372659B2 (en) 2020-05-11 2022-06-28 Apple Inc. User interfaces for managing user interface sharing
US11526256B2 (en) 2020-05-11 2022-12-13 Apple Inc. User interfaces for managing user interface sharing
US11822778B2 (en) 2020-05-11 2023-11-21 Apple Inc. User interfaces related to time
CN112330353A (zh) * 2020-09-22 2021-02-05 杭州浙启品牌管理有限公司 一种基于地图导航app广告的方法
CN112581958A (zh) * 2020-12-07 2021-03-30 中国南方电网有限责任公司 一种应用于电力领域的简短语音智能导航方法
CN112581958B (zh) * 2020-12-07 2024-04-09 中国南方电网有限责任公司 一种应用于电力领域的简短语音智能导航方法
US11694590B2 (en) 2020-12-21 2023-07-04 Apple Inc. Dynamic user interface with time indicator
US11720239B2 (en) 2021-01-07 2023-08-08 Apple Inc. Techniques for user interfaces related to an event
US11956609B2 (en) 2021-01-28 2024-04-09 Apple Inc. Context-aware voice guidance
US11676608B2 (en) 2021-04-02 2023-06-13 Google Llc Speaker verification using co-location information
US11921992B2 (en) 2021-05-14 2024-03-05 Apple Inc. User interfaces related to time
US11931625B2 (en) 2021-05-15 2024-03-19 Apple Inc. User interfaces for group workouts
US11938376B2 (en) 2021-05-15 2024-03-26 Apple Inc. User interfaces for group workouts

Also Published As

Publication number Publication date
US10347248B2 (en) 2019-07-09
US20140156278A1 (en) 2014-06-05
US20140288934A1 (en) 2014-09-25
US20150073910A1 (en) 2015-03-12
US8719026B2 (en) 2014-05-06
US9620113B2 (en) 2017-04-11
US8452598B2 (en) 2013-05-28
US20120101810A1 (en) 2012-04-26
US8326627B2 (en) 2012-12-04
CN109147781A (zh) 2019-01-04
EP2232388A4 (en) 2011-01-05
US8140335B2 (en) 2012-03-20
CN101939740B (zh) 2018-09-21
US20170270925A1 (en) 2017-09-21
US20130211710A1 (en) 2013-08-15
US20090150156A1 (en) 2009-06-11
EP2273491A1 (en) 2011-01-12
US20120109753A1 (en) 2012-05-03
US8370147B2 (en) 2013-02-05
WO2009075912A1 (en) 2009-06-18
US20150095159A1 (en) 2015-04-02
EP2232388A1 (en) 2010-09-29
US8983839B2 (en) 2015-03-17
US20120101809A1 (en) 2012-04-26

Similar Documents

Publication Publication Date Title
CN101939740B (zh) 在集成语言导航服务环境中提供自然语言语音用户界面
JP6670350B2 (ja) サードパーティサービスをデジタルアシスタントと統合するシステム及び方法
CN101292282B (zh) 支持自然语言人机交互的移动系统和方法
CN105190607B (zh) 通过智能数字助理的用户培训
US9667742B2 (en) System and method of conversational assistance in an interactive information system
CN104575493B (zh) 使用地理信息的声学模型适配
US8219406B2 (en) Speech-centric multimodal user interface design in mobile technology
CN102792320A (zh) 智能自动化助理
CN110503948A (zh) 对话系统和对话处理方法
CN110503947A (zh) 对话系统、包括其的车辆和对话处理方法
WO2012164333A1 (en) System and method to search, collect and present various geolocated information
JP2022103675A (ja) 情報処理装置、情報処理方法、及びプログラム
US20240102816A1 (en) Customizing Instructions During a Navigations Session
Bradley A user-centred design framework for context-aware computing
WO2023003540A1 (en) Flexible navigation and route generation
Tchankue-Sielinou A Model for Mobile, Context-aware in Car Communication Systems to Reduce Driver Distraction
och Innovation Reduced Distraction via Voice Interaction

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20160921

Address after: Washington, USA

Applicant after: Voicebox Technologies Inc.

Address before: Washington, USA

Applicant before: Voicebox Technologies Inc.

GR01 Patent grant
GR01 Patent grant