CN103164152A - 用于编辑视频的装置、方法和图形用户接口 - Google Patents
用于编辑视频的装置、方法和图形用户接口 Download PDFInfo
- Publication number
- CN103164152A CN103164152A CN2012103088621A CN201210308862A CN103164152A CN 103164152 A CN103164152 A CN 103164152A CN 2012103088621 A CN2012103088621 A CN 2012103088621A CN 201210308862 A CN201210308862 A CN 201210308862A CN 103164152 A CN103164152 A CN 103164152A
- Authority
- CN
- China
- Prior art keywords
- video
- video content
- content item
- item purpose
- clipping region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本申请案涉及一种用于编辑视频的装置、方法和图形用户接口。具有显示器和触敏表面的电子装置在视频应用程序的编辑模式中自动地裁剪视频内容项目;在所述视频应用程序的所述编辑模式中在所述显示器上显示所述视频内容项目的自动裁剪区域;以及,当在所述视频应用程序的所述编辑模式中在所述显示器上显示所述视频内容项目的所述裁剪区域时:检测所述触敏表面上的手势;以及,响应于检测到所述触敏表面上的所述手势:通过根据所述手势修改所述视频内容项目的所述裁剪区域来超驰对所述视频内容项目的自动裁剪;以及在所述显示器上显示所述视频内容项目的所述经修改的裁剪区域。
Description
技术领域
本发明大体上涉及具有触敏表面的电子装置,包含(但不限于)具有编辑视频的触敏表面的电子装置。
背景技术
触敏表面作为输入装置用于计算机和其它电子计算装置近年来已显著增加。示范性触敏表面包含触摸板和触摸屏显示器。此种表面广泛用于操纵显示器上的用户接口对象。
示范性用户接口对象包含视频内容项目。示范性操纵包含视频编辑操作,例如调整大小、旋转,和平移。用户可能需要对视频和声音(例如,音乐)播放器/编辑或应用程序(例如,来自加利福尼亚州库比迪诺(Cupertino,California)的苹果公司的QuickTime播放器)中的视频内容项目(例如,视频剪辑)执行此种操纵。
但是,用于编辑视频内容项目(“视频”)的现有方法繁杂且效率低下,对于新手用户来说尤其如此。举例来说,将视频编辑到所需分辨率大小或修剪区域单调乏味且对用户产生显著的认知负担。另外,现有方法比所需情况花费的时间长,进而浪费能量。此后者考虑因素对于靠电池操作的装置来说尤其重要。
发明内容
因此,需要具有更快、更有效的方法和接口用于编辑视频的电子装置。此种方法和接口可补充或代替用于编辑视频的常规方法。此种方法和接口减少对用户的认知负担,且产生更有效的人机接口。对于靠电池操作的装置,此种方法和接口节省电力,且增加电池充电之间的时间。
与用于具有触敏表面的电子装置的用户接口相关联的以上缺点和其它问题通过所揭示的装置来减少或消除。在一些实施例中,所述装置为桌上型计算机。在一些实施例中,所述装置为便携式(例如,笔记本计算机、平板计算机,或手持式装置)。在一些实施例中,所述装置具有触摸板。在一些实施例中,所述装置具有触敏显示器(也称“触摸屏”或“触摸屏显示器”)。在一些实施例中,所述装置具有图形用户接口(GUI)、一个或一个以上处理器、存储器和存储于存储器中用于执行多个功能的一个或一个以上模块、程序或指令集合。在一些实施例中,用户主要通过触敏表面上的手指接触和手势来与GUI交互。在一些实施例中,所述功能可包含图像和视频编辑、绘画、呈现、字处理、网站建立、光盘创作、电子表格制作、玩游戏、打电话、视频会议、收发电子邮件、即时消息接发、锻炼支持、数字摄影、数字视频拍摄、网络浏览、数字音乐播放,和/或数字视频播放。用于执行这些功能的可执行指令可包含于非暂时性计算机可读存储媒体或经配置以用于由一个或一个以上处理器执行的其它计算机程序产品中。
根据一些实施例,在具有显示器和触敏表面的电子装置处执行一种方法。所述方法包含:在视频应用程序的编辑模式中自动地裁剪视频内容项目;在视频应用程序的编辑模式中在显示器上显示视频内容项目的自动裁剪区域;以及,当在视频应用程序的编辑模式中在显示器上显示视频内容项目的裁剪区域时:检测触敏表面上的手势;以及,响应于检测到触敏表面上的手势:通过根据手势修改视频内容项目的裁剪区域来超驰对视频内容项目的自动裁剪;以及在显示器上显示视频内容项目的经修改的裁剪区域。
根据一些实施例,一种电子装置包含显示器、触敏表面、一个或一个以上处理器、存储器及一个或一个以上程序。所述一个或一个以上程序存储于存储器中,且经配置以由一个或一个以上处理器执行。所述一个或一个以上程序包含用于进行以下操作的指令:在视频应用程序的编辑模式中自动地裁剪视频内容项目;在视频应用程序的编辑模式中在显示器上显示视频内容项目的自动裁剪区域;以及,当在视频应用程序的编辑模式中在显示器上显示视频内容项目的裁剪区域时:检测触敏表面上的手势;以及,响应于检测到触敏表面上的手势:通过根据手势修改视频内容项目的裁剪区域来超驰对视频内容项目的自动裁剪;以及在显示器上显示视频内容项目的经修改的裁剪区域。
根据一些实施例,一种计算机可读存储媒体具有存储在其中的指令,所述指令在由具有显示器和触敏表面的电子装置执行时致使所述装置:在视频应用程序的编辑模式中自动地裁剪视频内容项目;在视频应用程序的编辑模式中在显示器上显示视频内容项目的自动裁剪区域;以及,当在视频应用程序的编辑模式中在显示器上显示视频内容项目的裁剪区域时:检测触敏表面上的手势;以及,响应于检测到触敏表面上的手势:通过根据手势修改视频内容项目的裁剪区域来超驰对视频内容项目的自动裁剪;以及在显示器上显示视频内容项目的经修改的裁剪区域。
根据一些实施例,一种在具有显示器、触敏表面、存储器和用以执行存储在存储器中的一个或一个以上程序的一个或一个以上处理器的电子装置上的图形用户接口包含在视频应用程序的编辑模式中显示的视频内容项目的自动裁剪区域;其中,当在视频应用程序的编辑模式中在显示器上显示视频内容项目的裁剪区域时:响应于检测到触敏表面上的手势:通过根据手势修改视频内容项目的裁剪区域来超驰对视频内容项目的自动裁剪;以及在显示器上显示视频内容项目的经修改的裁剪区域。
根据一些实施例,一种电子装置包含:显示器;触敏表面;用于在视频应用程序的编辑模式中自动地裁剪视频内容项目的构件;用于在视频应用程序的编辑模式中在显示器上显示视频内容项目的自动裁剪区域的构件;以及,当在视频应用程序的编辑模式中在显示器上显示视频内容项目的裁剪区域时启用的构件,其包含:用于检测触敏表面上的手势的构件;以及,响应于检测到触敏表面上的手势而启用的构件,其包含:用于通过根据手势修改视频内容项目的裁剪区域来超驰对视频内容项目的自动裁剪的构件;以及用于在显示器上显示视频内容项目的经修改的裁剪区域的构件。
根据一些实施例,一种供用于具有显示器和触敏表面的电子装置中的信息处理设备包含:用于在视频应用程序的编辑模式中自动地裁剪视频内容项目的构件;用于在视频应用程序的编辑模式中在显示器上显示视频内容项目的自动裁剪区域的构件;以及,当在视频应用程序的编辑模式中在显示器上显示视频内容项目的裁剪区域时启用的构件,其包含:用于检测触敏表面上的手势的构件;以及,响应于检测到触敏表面上的手势而启用的构件,其包含:用于通过根据手势修改视频内容项目的裁剪区域来超驰对视频内容项目的自动裁剪的构件;以及用于在显示器上显示视频内容项目的经修改的裁剪区域的构件。
根据一些实施例,一种电子装置包含显示器单元、经配置以接收手势的触敏表面单元,和耦合到所述显示器单元和所述触敏表面单元的处理单元。所述处理单元经配置以:在视频应用程序的编辑模式中自动地裁剪视频内容项目;使得能够在视频应用程序的编辑模式中在显示器单元上显示视频内容项目的自动裁剪区域;以及,当在视频应用程序的编辑模式中在显示器单元上显示视频内容项目的裁剪区域时:检测触敏表面上的手势;以及,响应于检测到触敏表面上的手势:通过根据手势修改视频内容项目的裁剪区域来超驰对视频内容项目的自动裁剪;以及使得能够在显示器单元上显示视频内容项目的经修改的裁剪区域。
因此,提供具有显示器和触敏表面的电子装置,其具有用于编辑视频的更快、更有效的方法和接口,进而增加此种装置的有效性、效率和用户满意度。此些方法和接口可补充或代替用于编辑视频的常规方法。
附图说明
为了更好地理解本发明的前述实施例以及其额外实施例,应结合下图参考以下具体实施方式,在图中,相同的参考数字指代所有图中的对应部分。
图1A是说明根据一些实施例的具有触敏显示器的便携式多功能装置的框图。
图1B是说明根据一些实施例的用于事件处置的示范性组件的框图。
图2说明根据一些实施例的具有触摸屏的便携式多功能装置。
图3是根据一些实施例的具有显示器和触敏表面的示范性多功能装置的框图。
图4A说明根据一些实施例的便携式多功能装置上的应用程序的菜单的示范性用户接口。
图4B说明根据一些实施例的具有与显示器分开的触敏表面的多功能装置的示范性用户接口。
图5A到5I说明根据一些实施例的用于编辑视频的示范性用户接口。
图6A到6B是说明根据一些实施例的编辑视频的方法的流程图。
图7是根据一些实施例的电子装置的功能方框图。
具体实施方式
视频编辑可包含将不同分辨率和纵横比的视频剪辑组合为形成最终视频的序列。如果视频剪辑不符合单一分辨率和纵横比,则最终视频中的若干部分之间的过渡可为不和谐的,且令查看者厌恶。一些视频编辑应用程序试图通过自动修剪和缩放视频剪辑来使用于顺应分辨率和纵横比的过程对用户更友好。然而,自动修剪和缩放可能产生不了用户想要的结果。下文所描述的实施例促进对视频的自动修剪和缩放的超驰,使得用户可快速且容易地编辑视频来获得所要结果。对自动修剪和缩放的超驰包含用以激活各种手动超驰的手势,例如,重新定位经修剪视频区域、调整经修剪视频区域的大小,和/或旋转经修剪视频区域。超驰自动修剪和缩放的能力为用户提供了在自动结果不合意时修改自动修剪和缩放的结果的灵活性。对于想要对其视频中的视频剪辑作出简单调整且没有时间或耐心学习复杂的编辑程序的初学者用户来说,这特别有用。
下文中,图1A到1B、2、3和7提供了对示范性装置的描述。图4A到4B以及5A到5I说明用于编辑视频的示范性用户接口。图6A到6B是说明编辑视频的方法的流程图。图5A到5I中的用户接口用于说明图6A到6B中的过程。
示范性装置
现在将详细参考实施例,在附图中说明所述实施例的实例。在以下详细描述中,陈述众多具体细节以便提供对本发明的透彻理解。然而,所属领域的技术人员将明白,可在没有这些具体细节的情况下实践本发明。在其它例子中,未详细描述众所周知的方法、程序、组件、电路和网络,以便不会没有必要地混淆实施例的各方面。
还将理解,虽然术语“第一”、“第二”等可在本文中用于描述各种元件,但这些元件不受这些术语限制。这些术语仅用于将一个元件与另一元件进行区分。举例来说,在不脱离本发明的范围的情况下,可将第一接触称为第二接触,且类似地,可将第二接触称为第一接触。第一接触和第二接触都是接触,但不是相同的接触。
本文中用于本发明的描述中的术语仅是出于描述特定实施例的目的且无意限制本发明。如本发明和所附权利要求书的描述中所使用,单数形式“一”和“所述”意在也包含复数形式,除非上下文另有清楚指示。还将理解,如本文中所使用的术语“和/或”指代且涵盖相关联的所列项目中的一者或一者以上的任何和所有可能的组合。将进一步理解,术语“包含”和/或“包括”当用于本说明书中时指定所述特征、整体、步骤、操作、元件和/或组件的存在,而不排除一个或一个以上其它特征、整体、步骤、操作、元件、组件和/或其群组的存在或添加。
如本文中所使用,视上下文而定,术语“如果”可解释为是指“当……时”或“在……后即刻”或“响应于确定”或“响应于检测到”。类似地,视上下文而定,短语“如果确定”或“如果检测到【规定条件或事件】”可解释为是指“在确定后即刻”或“响应于确定”或“在检测到【规定条件或事件】后即刻”或“响应于检测到【规定条件或事件】”。
如本文中所使用,术语视频内容项目(例如,视频剪辑、电影文件、串流视频等)的“分辨率”是指沿着视频内容项目的每一轴线或每一维度上的像素数目。举例来说,视频内容项目可具有640x480个像素的分辨率。也就是说,视频内容项目中的每一帧具有640像素宽和480像素高的相同分辨率。此外,如本文中所使用,术语视频内容项目的“纵横比”是指视频内容项目的宽度与其高度的比率。举例来说,640x480的视频内容项目具有4:3的纵横比。通过移除或添加像素和/或通过分辨率缩放,可将一个分辨率的视频内容项目改变为另一分辨率。举例来说,通过移除像素(例如,通过修剪)、分辨率缩放或其组合,可将一个分辨率的视频内容项目改变为较低的分辨率。作为另一实例,通过分辨率缩放、添加像素(例如,宽屏、加黑边等)以弥补任何差异,或以上两者的组合,可将一个分辨率的视频内容项目改变为较高的分辨率。
描述了电子装置、用于此些装置的用户接口和用于使用此些装置的相关联的过程的实施例。在一些实施例中,所述装置是便携式通信装置,例如移动电话,其还含有其它功能,例如PDA和/或音乐播放器功能。便携式多功能装置的示范性实施例包含(不限于)来自加利福尼亚州库比迪诺的苹果公司的iPod和装置。还可使用其它便携式电子装置,例如具有触敏表面(例如,触摸屏显示器和/或触摸板)的膝上型或平板计算机。还应理解,在一些实施例中,所述装置不是便携式通信装置,而是具有触敏表面(例如,触摸屏显示器和/或触摸板)的桌上型计算机。
在以下论述中,描述包含显示器和触敏表面的电子装置。然而,应理解,所述电子装置可包含一个或一个以上其它物理用户接口装置,例如物理键盘、鼠标和/或操纵杆。
所述装置通常支持多种应用程序,例如以下各者中的一者或一者以上:绘图应用程序、呈现应用程序、字处理应用程序、网站创建应用程序、光盘创作应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息接发应用程序、锻炼支持应用程序、照片管理应用程序、数码相机应用程序、数字视频相机应用程序、网络浏览应用程序、数字音乐播放器应用程序,和/或数字视频播放器应用程序。
可在所述装置上执行的各种应用程序可使用至少一个共同物理用户接口装置,例如触敏表面。触敏表面的一个或一个以上功能以及所述装置上所显示的对应信息可在不同应用程序中和/或在相应应用程序内受到调整和/或变化。以此方式,所述装置的共同物理体系结构(例如,触敏表面)可用对用户来说直观且透明的用户接口来支持多种应用程序。
现在将注意力转向具有触敏显示器的便携式装置的实施例。图1A是说明根据一些实施例的具有触敏显示器112的便携式多功能装置100的框图。出于便利起见,触敏显示器112有时被称为“触摸屏”,且还可被称作或称为触敏显示器系统。装置100可包含存储器102(其可包含一个或一个以上计算机可读存储媒体)、存储器控制器122、一个或一个以上处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其它输入或控制装置116和外部端口124。装置100可包含一个或一个以上光学传感器164。这些组件可经由一个或一个以上通信总线或信号线103进行通信。
应了解,装置100仅为便携式多功能装置的一个实例,且装置100可具有比所展示的组件多或少的组件,可组合两个或两个以上组件,或可具有组件的不同配置或布置。图1A中所示的各种组件可以硬件、软件或硬件和软件两者的组合来实施,包含一个或一个以上信号处理和/或专用集成电路。
存储器102可包含高速随机存取存储器且还可包含非易失性存储器,例如一个或一个以上磁盘存储装置、快闪存储器装置,或其它非易失性固态存储器装置。可通过存储器控制器122来控制装置100的其它组件(例如,CPU 120和外围设备接口118)对存储器102的存取。
外围设备接口118可用于将装置的输入和输出外围设备耦合到CPU 120和存储器102。一个或一个以上处理器120运行或执行存储于存储器102中的各种软件程序和/或指令集以执行装置100的各种功能并处理数据。
在一些实施例中,外围设备接口118、CPU 120和存储器控制器122可实施于例如芯片104等单一芯片上。在一些其它实施例中,其可实施于分开的芯片上。
RF(射频)电路108接收并发送RF信号(还称为电磁信号)。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号,且经由电磁信号与通信网络和其它通信装置通信。RF电路108可包含用于执行这些功能的众所周知的电路,包含(但不限于)天线系统、RF收发器、一个或一个以上放大器、调谐器、一个或一个以上振荡器、数字信号处理器、CODEC芯片组、订户身份模块(SIM)卡、存储器等。RF电路108可通过无线通信与网络(例如因特网(还称作万维网(WWW))、内联网和/或例如蜂窝式电话网络、无线局域网(LAN)和/或城域网(MAN)等无线网络)以及其它装置通信。无线通信可使用多种通信标准、协议和技术中的任一者,包含(但不限于)全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路包接入(HSDPA)、高速上行链路包接入(HSUPA)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE 802.11a、IEEE 802.11b、IEEE 802.11g和/或IEEE 802.11n)、因特网语音协议(VoIP)、Wi-MAX、电子邮件协议(例如,因特网消息接入协议(IMAP)和/或邮局协议(POP))、即时消息接发(例如,可扩展消息接发和状态协议(XMPP)、即时消息接发和状态利用扩展的会话起始协议(SIMPLE)、即时消息接发和状态服务(IMPS)),和/或短消息服务(SMS),或任何其它合适的通信协议,包含到本文献的申请日为止尚未开发出的通信协议。
音频电路110、扬声器111和麦克风113提供用户与装置100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将所述音频数据转换为电信号,且将所述电信号传输到扬声器111。扬声器111将电信号转换为人可听的声波。音频电路110还接收由麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据且将音频数据传输到外围设备接口118以进行处理。可从存储器102检索音频数据且/或通过外围设备接口118将音频数据传输到存储器102和/或RF电路108。在一些实施例中,音频电路110还包含耳机插孔(例如,212,图2)。耳机插孔提供音频电路110与可移除音频输入/输出外围设备(例如,只有输出的头戴式耳机或具有输出(例如,用于一个或两个耳朵的头戴式耳机)和输入(例如,麦克风)两者的耳机)之间的接口。
I/O子系统106将装置100上的输入/输出外围设备(例如,触摸屏112和其它输入控制装置116)耦合到外围设备接口118。I/O子系统106可包含显示器控制器156和用于其它输入或控制装置的一个或一个以上输入控制器160。一个或一个以上输入控制器160从其它输入或控制装置116接收电信号/将电信号发送到其它输入或控制装置116。所述其它输入控制装置116可包含物理按钮(例如,按钮、摇杆按钮等)、拨号盘、滑块开关、操纵杆、点击转盘等。在一些替代实施例中,输入控制器160可耦合到以下各者中的任一者(或不耦合到以下各者):键盘、红外端口、USB端口和例如鼠标等指针装置。所述一个或一个以上按钮(例如,208,图2)可包含用于扬声器111和/或麦克风113的音量控制的升高/降低按钮。所述一个或一个以上按钮可包含按钮(例如,206,图2)。
触敏显示器112提供装置与用户之间的输入接口和输出接口。显示器控制器156从触摸屏112接收电信号和/或将电信号发送到触摸屏112。触摸屏112将视觉输出显示给用户。视觉输出可包含图形、文本、图标、视频及其任何组合(统称为“图形”)。在一些实施例中,所述视觉输出中的一些或全部可对应于用户接口对象。
触摸屏112具有触敏表面、基于触觉和/或触觉接触而从用户接受输入的传感器或传感器组。触摸屏112和显示器控制器156(以及存储器102中的任何相关联的模块和/或指令集)检测触摸屏112上的接触(和接触的任何移动或中断),且将所检测的接触转换为与显示于触摸屏112上的用户接口对象(例如,一个或一个以上软键、图标、网页或图像)的交互。在一示范性实施例中,触摸屏112与用户之间的接触点对应于用户的手指。
触摸屏112可使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术,或LED(发光二极管)技术,但在其它实施例中可使用其它显示器技术。触摸屏112和显示器控制器156可使用现在已知或稍后开发的多个触摸感测技术中的任一者来检测接触和其任何移动或中断,所述技术包含(但不限于)电容性、电阻性、红外和表面声波技术,以及用于确定与触摸屏112的一个或一个以上接触点的其它接近度传感器阵列或其它元件。在一示范性实施例中,使用投影互电容感测技术,例如来自加利福尼亚州库比迪诺的苹果公司的iPod和中出现的技术。
触摸屏112可具有超过100dpi的视频分辨率。在一些实施例中,所述触摸屏具有约160dpi的视频分辨率。用户可使用任何合适的物体或附属物(例如,尖笔、手指等)来接触触摸屏112。在一些实施例中,用户接口经设计以主要用基于手指的接触和手势来工作,归因于手指在触摸屏上的较大接触区域,其可没有基于尖笔的输入精确。在一些实施例中,所述装置将粗糙的基于手指的输入转译为精确的指针/光标位置或命令以用于执行用户所需的动作。
在一些实施例中,除了触摸屏之外,装置100可包含用于激活或去活特定功能的触摸板(未图示)。在一些实施例中,触摸板是装置的触敏区域;不同于触摸屏,触摸板不显示视觉输出。触摸板可为与触摸屏112分开的触敏表面或由触摸屏形成的触敏表面的延伸部分。
装置100还包含用于向各种组件供电的电力系统162。电力系统162可包含电力管理系统、一个或一个以上电源(例如,电池、交变电流(AC))、再充电系统、电力故障检测电路、电力转换器或反相器、电力状态指示器(例如,发光二极管(LED))和与便携式装置中的电力的产生、管理和分布相关联的任何其它组件。
装置100还可包含一个或一个以上光学传感器164。图1A展示耦合到I/O子系统106中的光学传感器控制器158的光学传感器。光学传感器164可包含电荷耦合装置(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收光,经由一个或一个以上透镜投射,且将所述光转换为表示图像的数据。结合成像模块143(还称为相机模块),光学传感器164可俘获静态图像或视频。在一些实施例中,光学传感器位于装置100的背部上,与装置的前部上的触摸屏显示器112相反,使得可将触摸屏显示器用作静态和/或视频图像获取的取景器。在一些实施例中,另一光学传感器位于装置的前部上,使得在用户在触摸屏显示器上查看其它视频会议参与者时可获得用于视频会议的用户图像。
装置100还可包含一个或一个以上接近度传感器166。图1A展示耦合到外围设备接口118的接近度传感器166。或者,接近度传感器166可耦合到I/O子系统106中的输入控制器160。在一些实施例中,接近度传感器在多功能装置被放置在用户耳朵附近时(例如,当用户正进行电话呼叫时)关闭并停用触摸屏112。
装置100还可包含一个或一个以上加速计168。图1A展示耦合到外围设备接口118的加速计168。或者,加速计168可耦合到I/O子系统106中的输入控制器160。在一些实施例中,基于对从一个或一个以上加速计接收的数据的分析而以纵向视图或横向视图在触摸屏显示器上显示信息。装置100任选地包含(除了加速计168之外)磁力计(未图示)和GPS(或格洛纳斯(GLONASS)或其它全球导航系统)接收器(未图示),以用于获得关于装置100的位置和定向(例如,纵向或横向)的信息。
在一些实施例中,存储于存储器102中的软件组件包含操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135,和应用程序(或指令集)136。此外,在一些实施例中,存储器102存储装置/全局内部状态157,如图1A、1B和3中所示。装置/全局内部状态157包含以下各者中的一者或一者以上:活动应用程序状态,其指示哪些应用程序(如果有)当前是活动的;显示状态,其指示哪些应用程序、视图或其它信息占据触摸屏显示器112的各个区;传感器状态,其包含从装置的各种传感器和输入控制装置116获得的信息;以及位置信息,其涉及装置的位置和/或姿势。
操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS或例如VxWorks等嵌入式操作系统)包含用于控制和管理一般系统任务(例如,存储器管理、存储装置控制、电力管理等)的各种软件组件和/或驱动器,且促进各种硬件与软件组件之间的通信。
通信模块128促进经由一个或一个以上外部端口124与其它装置的通信,且还包含用于处置由RF电路108和/或外部端口124接收的数据的各种软件组件。外部端口124(例如,通用串行总线(USB)、FIREWIRE等)适于直接耦合到其它装置或间接经由网络(例如,因特网、无线LAN等)耦合到其它装置。在一些实施例中,外部端口是多引脚(例如,30个引脚)的连接器,其与iPod(苹果公司的商标)装置上所使用的30引脚连接器相同或类似和/或兼容。
接触/运动模块130可检测与触摸屏112(结合显示器控制器156)和其它触敏装置(例如,触摸板或物理点击转盘)的接触。接触/运动模块130包含用于执行与接触的检测相关的各种操作的各种软件组件,所述操作例如为确定是否已发生接触(例如,检测手指向下事件)、确定是否存在接触的移动且跟踪跨越触敏表面的移动(例如,检测一个或一个以上手指拖动事件),以及确定接触是否已停止(例如,检测手指向上事件或接触的中断)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动(其由一系列接触数据表示)可包含确定接触点的速率(量值)、速度(量值和方向),和/或加速度(量值和/或方向上的改变)。可将这些操作应用于单一接触(例如,一根手指接触)或多个同时接触(例如,“多点触摸”/多根手指接触)。在一些实施例中,接触/运动模块130和显示器控制器156检测触摸板上的接触。
接触/运动模块130可检测用户的手势输入。触敏表面上的不同手势具有不同接触模式。因此,可通过检测特定接触模式来检测手势。举例来说,检测手指点按手势包含检测手指向下事件,接着检测在与手指向下事件(例如,在图标的位置处)相同的位置(或大体上相同的位置)处的手指向上(提离)事件。作为另一实例,检测触敏表面上的手指轻扫手势包含检测手指向下事件,接着检测一个或一个以上手指拖动事件,且随后检测手指向上(提离)事件。
图形模块132包含用于在触摸屏112或其它显示器上再现和显示图形的各种已知软件组件,包含用于改变所显示的图形的亮度的组件。如本文中所使用,术语“图形”包含可向用户显示的任何对象,包含(不限于)文本、网页、图标(例如,包含软键的用户接口对象)、数字图像、视频、动画等。
在一些实施例中,图形模块132存储表示将使用的图形的数据。可向每一图形指派一对应的代码。图形模块132从应用程序等接收指定将显示的图形的一个或一个以上代码以及(在需要时)坐标数据和其它图形特性数据,且随后产生屏幕图像数据以输出到显示器控制器156。
可作为图形模块132的组件的文本输入模块134提供软键盘,以用于在各种应用程序(例如,联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其它应用程序)中键入文本。
GPS模块135确定装置的位置且提供此信息以供在各种应用程序中使用(例如,提供给电话138以供在基于位置的拨号中使用,提供给相机143以作为图片/视频元数据,且提供给提供基于位置的服务的应用程序(例如,天气小窗口部件、本地黄页小窗口部件和地图/导航小窗口部件))。
应用程序136可包含以下模块(或指令集),或其子集或超集:
·联系人模块137(有时称为地址簿或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息接发(IM)模块141;
·锻炼支持模块142;
·用于静态和/或视频图像的相机模块143;
·图像管理模块144;
·浏览器模块147;
·日历模块148;
·小窗口部件模块149,其可包含以下各者中的一者或一者以上:天气小窗口部件149-1、股票小窗口部件149-2、计算器小窗口部件149-3、闹钟小窗口部件149-4、字典小窗口部件149-5及用户所获得的其它小窗口部件,以及用户创建的小窗口部件149-6;
·用于形成用户创建的小窗口部件149-6的小窗口部件创建器模块150;
·搜索模块151;
·视频和音乐播放器/编辑器模块152,其可由视频播放器/编辑器模块和音乐播放器/编辑器模块构成;
·便笺模块153;
·地图模块154;和/或
·在线视频模块155。
可存储于存储器102中的其它应用程序136的实例包含其它字处理应用程序、其它图像编辑应用程序、绘图应用程序、呈现应用程序、具备JAVA功能的应用程序、加密、数字版权管理、语音辨识和语音复制。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,可将联系人模块137用于管理地址簿或联系人列表(例如,存储于存储器102或存储器370中的联系人模块137的应用程序内部状态192中),包含:将姓名添加到地址簿;从地址簿删除姓名;使电话号码、电子邮件地址、物理地址或其它信息与姓名相关联;使图像与姓名相关联;将姓名分类和排序;提供电话号码或电子邮件地址以起始和/或促进通过电话138、视频会议139、电子邮件140或IM 141进行的通信;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,可将电话模块138用于键入对应于电话号码的字符序列、存取地址簿137中的一个或一个以上电话号码,修改已键入的电话号码、拨打相应的电话号码、进行通话以及在通话完成时断开或挂断。如上所述,无线通信可使用多个通信标准、协议和技术中的任一者。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示器控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138,视频会议模块139包含用以进行以下操作的可执行指令:根据用户指令而起始、进行和终止用户与一个或一个以上其它参与者之间的视频会议。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包含用以进行以下操作的可执行指令:响应于用户指令而创建、发送、接收和管理电子邮件。结合图像管理模块144,电子邮件客户端模块140使得非常易于创建和发送具有通过相机模块143拍摄的静态或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,即时消息接发模块141包含用以进行以下操作的可执行指令:键入对应于即时消息的字符序列、修改先前键入的字符、传输相应的即时消息(例如,使用短消息服务(SMS)或多媒体消息服务(MMS)协议来用于基于电话的即时消息,或使用XMPP、SIMPLE或IMPS来用于基于因特网的即时消息)、接收即时消息以及查看所接收的即时消息。在一些实施例中,所传输和/或所接收的即时消息可包含MMS和/或增强型消息接发服务(EMS)中所支持的图形、照片、音频文件、视频文件和/或其它附件。如本文中所使用,“即时消息接发”涉及基于电话的消息(例如,使用SMS或MMS发送的消息)和基于因特网的消息(例如,使用XMPP、SIMPLE或IMPS发送的消息)两者。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放器模块146,锻炼支持模块142包含用以进行以下操作的可执行指令:创建锻炼(例如,用时间、距离和/或卡路里燃烧目标);与锻炼传感器(运动装置)通信;接收锻炼传感器数据;校准所使用的传感器以监视锻炼;选择并播放用于锻炼的音乐;以及显示、存储和传输锻炼数据。
结合触摸屏112、显示器控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132和图像管理模块144,相机模块143包含用以进行以下操作的可执行指令:俘获静态图像或视频(包含视频流)且将其存储到存储器102中、修改静态图像或视频的特性,或从存储器102删除静态图像或视频。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132、文本输入模块134和相机模块143,图像管理模块144包含用以进行以下操作的可执行指令:布置、修改(例如,编辑)或另外操纵、标记、删除、呈现(例如,以数字幻灯片或相册)以及存储静态和/或视频图像。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132和文本输入模块134,浏览器模块147包含用以进行以下操作的可执行指令:根据用户指令而浏览因特网,包含搜索、链接到、接收和显示网页或其部分,以及链接到网页的附件和其它文件。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134,电子邮件客户端模块140和浏览器模块147,日历模块148包含用以进行以下操作的可执行指令:根据用户指令而创建、显示、修改和存储日历和与日历相关联的数据(例如,日历条目、待办事项列表等)。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,小窗口部件模块149是可由用户下载和使用的小型应用程序(例如,天气小窗口部件149-1、股票小窗口部件149-2、计算器小窗口部件149-3、闹钟小窗口部件149-4和字典小窗口部件149-5)或由用户创建的小型应用程序(例如,用户创建的小窗口部件149-6)。在一些实施例中,小窗口部件包含HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施例中,小窗口部件包含XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!小窗口部件)。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,小窗口部件创建器模块150可由用户使用以创建小窗口部件(例如,将网页的用户指定的部分转变为小窗口部件)。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151包含用以进行以下操作的可执行指令:根据用户指令而在存储器102中搜索与一个或一个以上搜索准则(例如,一个或一个以上用户指定的搜索项)匹配的文本、音乐、声音、图像、视频和/或其它文件。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147,视频和音乐播放器/编辑器模块152包含允许用户进行以下操作的可执行指令:下载、回放和/或编辑所记录的音乐和以一种或一种以上文件格式存储的其它声音文件(例如,MP3或AAC文件),且包含用以(例如,在触摸屏112上或在外部的经由外部端口124连接的显示器上)显示、回放和/或编辑视频的可执行指令。在一些实施例中,装置100可包含MP3播放器的功能性,例如iPod(苹果公司的商标)。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132和文本输入模块134,便笺模块153包含用以进行以下操作的可执行指令:根据用户指令而创建和管理便笺、待办事项列表等。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147,地图模块154可用于根据用户指令而接收、显示、修改和存储地图以及与地图相关联的数据(例如,行驶方向;关于特定位置处或附近的商店和其它关注点的数据;以及其它基于位置的数据)。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包含允许用户进行以下操作的指令:存取、浏览、接收(例如,通过串流传输和/或下载)、回放(例如,在触摸屏上或在外部的经由外部端口124连接的显示器上)、发送具有到特定在线视频的链接的电子邮件,以及另外管理呈一种或一种以上文件格式(例如H.264)的在线视频。在一些实施例中,将即时消息接发模块141(而不是电子邮件客户端模块140)用于发送到特定在线视频的链接。
上文所识别的模块和应用程序中的每一者对应于用于执行上文所描述的一个或一个以上功能以及本申请案中所描述的方法(例如,计算机实施的方法和本文中所描述的其它信息处理方法)的可执行指令集。这些模块(即,指令集)无需实施为分离的软件程序、过程或模块,且因此,在各种实施例中,这些模块的各种子集可经组合或另外重新布置。在一些实施例中,存储器102可存储上文所识别的模块和数据结构的子集。此外,存储器102可存储未在上文描述的额外模块和数据结构。
在一些实施例中,装置100为其中专门经由触摸屏和/或触摸板执行所述装置上的预定义的功能集合的操作的装置。通过将触摸屏和/或触摸板用作主要输入控制装置来用于装置100的操作,可减少装置100上的物理输入控制装置(例如,按钮、拨号盘等)的数目。
可专门经由触摸屏和/或触摸板执行的预定义的功能集合包含在用户接口之间的导航。在一些实施例中,触摸板在由用户触摸时会将装置100从在装置100上所显示的任何用户接口导航到主菜单或根菜单。在此些实施例中,可将触摸板称作“菜单按钮”。在一些其它实施例中,菜单按钮可为物理按钮或其它物理输入控制装置,而非触摸板。
图1B是说明根据一些实施例的用于事件处置的示范性组件的框图。在一些实施例中,存储器102(图1A中)或370(图3)包含事件分类器170(例如,在操作系统126中)和相应的应用程序136-1(例如,前述应用程序137到151、155、380到390中的任一者)。
事件分类器170接收事件信息且确定将所述事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包含事件监视器171和事件分派器模块174。在一些实施例中,应用程序136-1包含应用程序内部状态192,当所述应用程序是活动的或正执行时,应用程序内部状态192指示在触敏显示器112上所显示的当前应用程序视图。在一些实施例中,装置/全局内部状态157可由事件分类器170用来确定哪一(些)应用程序当前是活动的,且应用程序内部状态192由事件分类器170用来确定将事件信息递送到的应用程序视图191。
在一些实施例中,应用程序内部状态192包含额外信息,例如以下各者中的一者或一者以上:在应用程序136-1重新开始执行时将使用的重新开始信息、指示正由应用程序136-1显示的信息或所述信息准备好由应用程序136-1显示的用户接口状态信息、使得用户能够回到应用程序136-1的先前状态或视图的状态队列,以及对由用户进行的先前动作的重做/撤消队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包含关于子事件(例如,触敏显示器112上的作为多点触摸手势的部分的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器(例如,接近度传感器166、加速计168和/或麦克风113(经由音频电路110))接收的信息。外围设备接口118从I/O子系统106接收的信息包含来自触敏显示器112或触敏表面的信息。
在一些实施例中,事件监视器171以预定间隔将请求发送到外围设备接口118。作为响应,外围设备接口118传输事件信息。在其它实施例中,外围设备接口118仅在存在重大事件(例如,接收到高于预定噪声阈值的输入和/或在多于预定持续时间的时间内接收到输入)时才传输事件信息。
在一些实施例中,事件分类器170还包含命中视图确定模块172和/或活动事件辨识器确定模块173。
命中视图确定模块172在触敏显示器112显示一个以上视图时提供用于确定子事件已在一个或一个以上视图内的何处发生的软件过程。视图由用户可在显示器上看到的控件和其它元件组成。
与应用程序相关联的用户接口的另一方面是视图集合,在本文中有时称为应用程序视图或用户接口窗口,在其中显示信息且发生基于触摸的手势。在其中检测到触摸的(相应应用程序)的应用程序视图可对应于应用程序的编程或视图体系内的编程层级。举例来说,在其中检测到触摸的最低层级视图可称为命中视图,且可至少部分基于开始基于触摸的手势的初始触摸的命中视图来确定被辨识为合适输入的事件集合。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有按体系组织的多个视图时,命中视图确定模块172将命中视图识别为体系中的应处置子事件的最低视图。在大多数情形中,命中视图是其中发生起始子事件的最低层级视图(即,形成事件或潜在事件的子事件的序列中的第一子事件)。一旦由命中视图确定模块识别出命中视图,命中视图通常接收与其被识别为命中视图所关于的相同触摸或输入源相关的所有子事件。
活动事件辨识器确定模块173确定视图体系内的哪一或哪些视图应接收子事件的特定序列。在一些实施例中,活动事件辨识器确定模块173确定仅命中视图应接收子事件的特定序列。在其它实施例中,活动事件辨识器确定模块173确定包含子事件的物理位置的所有视图是有效涉及的视图,且因此确定所有有效涉及的视图应接收子事件的特定序列。在其它实施例中,即使触摸子事件被完全限于与一个特定视图相关联的区域,体系中更高的视图将仍保持为有效涉及的视图。
事件分派器模块174将事件信息分派给事件辨识器(例如,事件辨识器180)。在包含活动事件辨识器确定模块173的实施例中,事件分派器模块174将事件信息递送到由活动事件辨识器确定模块173确定的事件辨识器。在一些实施例中,事件分派器模块174将事件信息存储于事件队列中,由相应的事件接收器模块182来检索所述事件信息。
在一些实施例中,操作系统126包含事件分类器170。或者,应用程序136-1包含事件分类器170。在又其它实施例中,事件分类器170是独立模块,或存储于存储器102中的另一模块的一部分,例如接触/运动模块130。
在一些实施例中,应用程序136-1包含多个事件处置器190和一个或一个以上应用程序视图191,事件处置器中的每一者包含用于处置在应用程序的用户接口的相应视图内发生的触摸事件的指令。应用程序136-1的每一应用程序视图191包含一个或一个以上事件辨识器180。通常,相应的应用程序视图191包含多个事件辨识器180。在其它实施例中,事件辨识器180中的一者或一者以上是单独模块(例如,用户接口套件(未图示))或应用程序136-1从其继承方法和其它特性的更高层级对象的部分。在一些实施例中,相应的事件处置器190包含以下各者中的一者或一者以上:数据更新器176、对象更新器177、GUI更新器178,和/或从事件分类器170接收的事件数据179。事件处置器190可利用或调用数据更新器176、对象更新器177或GUI更新器178以更新应用程序内部状态192。或者,应用程序视图191中的一者或一者以上包含一个或一个以上相应的事件处置器190。而且,在一些实施例中,数据更新器176、对象更新器177和GUI更新器178中的一者或一者以上包含于相应的应用程序视图191中。
相应的事件辨识器180从事件分类器170接收事件信息(例如,事件数据179),且根据所述事件信息识别事件。事件辨识器180包含事件接收器182和事件比较器184。在一些实施例中,事件辨识器180还包含以下各者的至少一子集:元数据183和事件递送指令188(其可包含子事件递送指令)。
事件接收器182从事件分类器170接收事件信息。事件信息包含关于例如触摸或触摸移动的子事件的信息。取决于子事件,所述事件信息还包含额外信息,例如子事件的位置。当子事件涉及触摸的运动时,事件信息还可包含子事件的速率和方向。在一些实施例中,事件包含装置从一个定向旋转到另一定向(例如,从纵向定向到横向定向,或反之亦然),且事件信息包含关于装置的当前定向(也称为装置姿势)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,且基于所述比较而确定事件或子事件,或者确定或更新事件或子事件的状态。在一些实施例中,事件比较器184包含事件定义186。事件定义186含有事件的定义(例如,子事件的预定义的序列),例如事件1(187-1)、事件2(187-2),和其它。在一些实施例中,事件187中的子事件包含(例如)触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个实例中,事件1(187-1)的定义为所显示对象上的双击。所述双击(例如)包括在预定阶段内在所显示对象上的第一触摸(触摸开始)、在预定阶段内的第一提离(触摸结束)、在预定阶段内在所显示对象上的第二触摸(触摸开始),以及在预定阶段内的第二提离(触摸结束)。在另一实例中,事件2(187-2)的定义为所显示对象上的拖动。所述拖动(例如)包括在预定阶段内在所显示对象上的触摸(或接触)、触摸跨越触敏显示器112的移动,以及触摸的提离(触摸结束)。在一些实施例中,事件还包含用于一个或一个以上相关联的事件处置器190的信息。
在一些实施例中,事件定义187包含用于相应的用户接口对象的事件的定义。在一些实施例中,事件比较器184执行命中测试以确定哪一用户接口对象与子事件相关联。举例来说,在其中三个用户接口对象显示于触敏显示器112上的应用程序视图中,当在触敏显示器112上检测到触摸时,事件比较器184执行命中测试以确定三个用户接口对象中的哪一者与触摸(子事件)相关联。如果每一所显示的对象都与相应的事件处置器190相关联,则事件比较器使用命中测试的结果来确定应激活哪一事件处置器190。举例来说,事件比较器184选择与触发命中测试的子事件和对象相关联的事件处置器。
在一些实施例中,相应的事件187的定义还包含被延迟的动作,其延迟事件信息的递送,直到已确定子事件的序列是对应于还是不对应于事件辨识器的事件类型之后为止。
当相应的事件辨识器180确定子事件系列不与事件定义186中的事件中的任一者匹配时,相应的事件辨识器180进入事件不可能、事件失败,或事件结束状态,其后,其忽视所述基于触摸的手势的后续子事件。在此情况下,对于所述命中视图来说仍保持活动的其它事件辨识器(如果有的话)继续跟踪并处理正在进行中的基于触摸的手势的子事件。
在一些实施例中,相应的事件辨识器180包含元数据183,元数据183具有可配置特性、旗标和/或列表,所述可配置特性、旗标和/或列表指示事件递送系统应如何执行向有效涉及的事件辨识器的子事件递送。在一些实施例中,元数据183包含指示事件辨识器可如何彼此交互的可配置特性、旗标和/或列表。在一些实施例中,元数据183包含指示是否将子事件递送到视图或编程体系中的不同层级的可配置特性、旗标和/或列表。
在一些实施例中,当辨识出事件的一个或一个以上特定子事件时,相应的事件辨识器180激活与事件相关联的事件处置器190。在一些实施例中,相应的事件辨识器180将与所述事件相关联的事件信息递送到事件处置器190。激活事件处置器190不同于将子事件发送(和延期发送)到相应的命中视图。在一些实施例中,事件辨识器180引发与所辨识的事件相关联的旗标,且与所述旗标相关联的事件处置器190捕获所述旗标且执行预定义的过程。
在一些实施例中,事件递送指令188包含子事件递送指令,所述子事件递送指令递送关于子事件的事件信息而不激活事件处置器。而是,所述子事件递送指令将事件信息递送到与子事件系列相关联的事件处置器或递送到有效涉及的视图。与子事件系列或与有效涉及的视图相关联的事件处置器接收事件信息且执行预定过程。
在一些实施例中,数据更新器176创建且更新用于应用程序136-1中的数据。举例来说,数据更新器176更新用于联系人模块137中的电话号码,或存储用于视频播放器模块145中的视频文件。在一些实施例中,对象更新器177创建且更新用于应用程序136-1中的对象。举例来说,对象更新器177创建新的用户接口对象或更新用户接口对象的位置。GUI更新器178更新GUI。举例来说,GUI更新器178准备好显示信息且将其发送到图形模块132以供在触敏显示器上显示。
在一些实施例中,事件处置器190包含数据更新器176、对象更新器177和GUI更新器178,或具有对数据更新器176、对象更新器177和GUI更新器178的存取权。在一些实施例中,数据更新器176、对象更新器177和GUI更新器178包含于相应的应用程序136-1或应用程序视图191的单一模块中。在其它实施例中,其包含于两个或两个以上软件模块中。
应理解,关于对触敏显示器上的用户触摸的事件处置的前文论述还适用于用以通过输入装置操作多功能装置100的其它形式的用户输入,所述输入并非全部都在触摸屏上起始,例如,在有或没有单一或多个键盘按压或保持的情况下的协调的鼠标移动和鼠标按钮按压、触摸板上的用户移动点按、拖动、滚动等、手写笔输入、装置的移动、口头指令、检测到的眼睛移动、生物识别输入,和/或其任何组合,其可用作对应于定义将要辨识的事件的子事件的输入。
图2说明根据一些实施例的具有触摸屏112的便携式多功能装置100。触摸屏可显示用户接口(UI)200内的一个或一个以上图形。在此实施例以及下文所描述的其它实施例中,用户可通过(例如)用一根或一根以上手指202(在图中未按比例绘制)或一个或一个以上尖笔203(在图中未按比例绘制)在图形上作出手势而选择图形中的一者或一者以上。在一些实施例中,当用户中断与一个或一个以上图形的接触时,发生对一个或一个以上图形的选择。在一些实施例中,所述手势可包含一个或一个以上点按、一个或一个以上轻扫(从左到右、从右到左、向上和/或向下)和/或已接触装置100的手指的滚转(从右到左、从左到右、向上和/或向下)。在一些实施例中,与图形的无意接触可不选择所述图形。举例来说,当对应于选择的手势是点按时,扫掠过应用程序图标的轻扫手势可不选择对应的应用程序。
装置100还可包含一个或一个以上物理按钮,例如“主页”或菜单按钮204。如先前所描述,菜单按钮204可用于导航到可在装置100上执行的应用程序集合中的任何应用程序136。或者,在一些实施例中,将菜单按钮实施为在触摸屏112上显示的GUI中的软键。
在一个实施例中,装置100包含触摸屏112、菜单按钮204、用于将装置通电/断电和锁定装置的按钮206、音量调节按钮208、订户身份模块(SIM)卡槽210、耳机插孔212和对接/充电外部端口124。按钮206可用于:通过压下按钮并使所述按钮保持于压下状态并持续预定义的时间间隔而对装置通电/断电;通过压下按钮并在预定义的时间间隔逝去之前释放所述按钮而锁定装置;和/或将所述装置解锁或起始解锁过程。在替代性实施例中,装置100还可经由麦克风113接受口头输入以用于激活或去活一些功能。
图3是根据一些实施例的具有显示器和触敏表面的示范性多功能装置的框图。装置300无需是便携式的。在一些实施例中,装置300是膝上型计算机、桌上型计算机、平板计算机、多媒体播放器装置、导航装置、教育装置(例如,儿童的学习玩具)、游戏系统或控制装置(例如,家用或工业用控制器)。装置300通常包含一个或一个以上处理单元(CPU)310、一个或一个以上网络或其它通信接口360、存储器370,和用于将这些组件互连的一个或一个以上通信总线320。通信总线320可包含将系统组件互连并控制系统组件之间的通信的电路(有时称为芯片组)。装置300包含输入/输出(I/O)接口330,I/O接口330包括显示器340,显示器340通常为触摸屏显示器。I/O接口330还可包含键盘和/或鼠标(或其它指针装置)350和触摸板355。存储器370包含高速随机存取存储器,例如DRAM、SRAM、DDR RAM或其它随机存取固态存储器装置;且可包含非易失性存储器,例如一个或一个以上磁盘存储装置、光盘存储装置、快闪存储器装置,或其它非易失性固态存储装置。存储器370可任选地包含与CPU 310相距遥远的一个或一个以上存储装置。在一些实施例中,存储器370存储类似于便携式多功能装置100(图1)的存储器102中的程序、模块和数据结构的程序、模块和数据结构,或其子集。此外,存储器370可存储便携式多功能装置100的存储器102中不存在的额外程序、模块和数据结构。举例来说,装置300的存储器370可存储绘图模块380、呈现模块382、字处理模块384、网站创建模块386、光盘创作模块388和/或电子表格模块390,而便携式多功能装置100(图1)的存储器102可不存储这些模块。
图3中的以上识别的元件中的每一者可存储于先前提及的存储器装置中的一者或一者以上中。以上所识别的模块中的每一者对应于用于执行以上所描述的功能的指令集。以上所识别的模块或程序(即,指令集)无需实施为分离的软件程序、过程或模块,且因此,在各种实施例中,这些模块的各种子集可经组合或另外重新布置。在一些实施例中,存储器370可存储上文所识别的模块和数据结构的子集。此外,存储器370可存储未在上文描述的额外模块和数据结构。
现在转向可实施于便携式多功能装置100上的用户接口(“UI”)的实施例。
图4A说明根据一些实施例的便携式多功能装置100上的应用程序的菜单的示范性用户接口。类似用户接口可实施于装置300上。在一些实施例中,用户接口400包含以下元件,或其子集或超集:
·用于例如蜂窝式和Wi-Fi信号等无线通信的信号强度指示器402;
·时间404;
·蓝牙指示器405;
·电池状态指示器406;
·具有频繁使用的应用程序的图标的任务栏408,例如:
ο电话138,其可包含未接电话或语音邮件消息的数目的指示器414;
ο电子邮件客户端140,其可包含未读电子邮件的数目的指示器410;
ο浏览器147;以及
ο视频和音乐播放器/编辑器152;以及
·用于其它应用程序的图标,例如:
οIM 141;
ο图像管理144;
ο相机143;
ο天气149-1;
ο股票149-2;
ο锻炼支持142;
ο日历148;
ο计算器149-3;
ο闹钟149-4;
ο地图154;
ο便笺153;
ο设定412,其提供对装置100及其各种应用程序136的设定的存取;以及
ο在线视频模块155,也称作YouTube(谷歌公司的商标)模块155。
图4B说明具有与显示器450(例如,触摸屏显示器112)分开的触敏表面451(例如,平板或触摸板355,图3)的装置(例如,装置300,图3)上的示范性用户接口。在一些实施例中,触敏表面(例如,图4B中的451)具有对应于显示器(例如,450)上的主轴线(例如,图4B中的453)的主轴线(例如,图4B中的452)。根据这些实施例,所述装置在对应于显示器上的相应位置的位置(例如,在图4B中,460对应于468且462对应于470)处检测与触敏表面451的接触(例如,图4B中的460和462)。以此方式,当触敏表面与显示器分开时,触敏表面(例如,图4B中的451)上的由装置检测到的用户输入(例如,接触460和462及其移动)由所述装置用以操纵多功能装置的显示器(例如,图4B中的450)上的用户接口。应理解,类似方法可用于本文中所描述的其它用户接口。
另外,虽然主要参考手指输入(例如,手指接触、手指点按手势、手指轻扫手势)来给出以下实例,但应理解,在一些实施例中,手指输入中的一者或一者以上可被来自另一输入装置的输入(例如,基于鼠标的输入或尖笔输入)取代。举例来说,轻扫手势可被鼠标点击(例如,替代接触)接着是光标沿着轻扫路径的移动(例如,替代接触的移动)来取代。作为另一实例,点按手势可被在光标位于点按手势的位置上时的鼠标点击取代(例如,替代检测接触接着停止检测接触)。类似地,当同时检测到多个用户输入时,应理解,可同时使用多个计算机鼠标,或可同时使用鼠标和手指接触。
用户接口和相关联的过程
现将注意力指向可实施于具有显示器和触敏表面的电子装置上的用户接口(“UI”)和相关联的过程的实施例,所述电子装置例如为装置300或便携式多功能装置100。
图5A到5I说明根据一些实施例的用于编辑视频的示范性用户接口。这些图中的用户接口用以说明下文描述的过程,包含图6A到6B中的过程。
图5A描绘显示于装置300的显示器340上的视频编辑器接口500。在一些实施例中,视频编辑器接口500在可显示为在处于编辑模式中时的视频应用程序(例如,来自加利福尼亚州库比迪诺的苹果公司的QuickTime播放器)的接口。装置300还包含触摸板355,触摸板355可用以按与上文参考图4B描述的触敏表面451交互的方式类似的方式与视频编辑器接口500交互。应了解,下文的描述可应用于其中在装置100的触摸屏112上显示视频编辑器接口500上且在触摸屏112上执行在触摸板355上执行的手势的实施例。
视频编辑器接口500包含正由用户编辑的视频502。视频502可由下文中称为“剪辑”的一个或一个以上视频剪辑组成。举例来说,视频502包含序列中的剪辑1到4。视频编辑器接口500包含对应于视频502中的视频剪辑的视频剪辑预览504。举例来说,剪辑预览504-1对应于剪辑1,且展示来自剪辑1的帧;剪辑预览504-2对应于剪辑2,且展示来自剪辑2的帧;依此类推。在一些实施例中,剪辑预览504按对应于视频502中对应剪辑的次序的时间线序列显示。如果存在比一次可显示的剪辑预览504多的剪辑预览504,则用户可滚动剪辑预览504的序列以查看对应于视频502中的视频剪辑的更多剪辑预览504。在一些实施例中,用户可选择剪辑预览504(例如,通过在触摸屏上的点按手势、鼠标点击,或类似输入)来打开对应的视频剪辑以进行回放和/或编辑。
在一些实施例中,剪辑1到4根据用户输入而添加到视频502。用户输入可包含(例如)选择在其初始具体化中成为视频502的剪辑(即,所选择的剪辑是视频502中的初始剪辑,用户将额外剪辑添加到所述初始剪辑)、在视频编辑器接口500中将剪辑的表示拖动到视频502中、选择菜单选项以将剪辑添加到视频502,等等。
视频502具有视频分辨率(例如,640x480)和纵横比(例如,4:3)。在一些实施例中,视频502的视频分辨率和纵横比设定为与视频502中的初始剪辑相同的视频分辨率和纵横比。在一些其它实施例中,当初次产生视频502时,由用户指定视频502的视频分辨率和纵横比。
添加到视频502的视频剪辑可具有与视频502不同的分辨率和/或纵横比(例如,与视频502中的初始剪辑不同的分辨率和/或纵横比,其中初始剪辑设定视频502的分辨率和/或纵横比)。在一些实施例中,具有与视频502不同的分辨率和/或纵横比的视频剪辑自动地被修改以符合视频502的分辨率和纵横比。所述修改可包含缩放和/或裁剪。举例来说,图5A说明对应于剪辑2的视频区域514。剪辑2具有比视频502大的视频分辨率和与视频502不同的纵横比,如在视频区域514上的视频502所展示。举例来说,为了描述的目的,下文中假设,除非另外指定,否则视频502具有640x480的分辨率和4:3的纵横比(例如,作为视频502中的初始剪辑的剪辑1的分辨率和纵横比),且剪辑2具有1280x720的分辨率和16:9的纵横比。
当将剪辑2添加到视频502时,剪辑2自动地被缩放和/或裁剪以符合视频502的分辨率和纵横比。在一些实施例中,自动缩放和/或裁剪包含第一裁剪剪辑2以产生剪辑2中的匹配视频502的纵横比的裁剪视频区域。举例来说,从视频区域514移除区域516(图中用斜黑线和白线加阴影)以产生裁剪视频区域518(图中用浅灰色加阴影),其具有960x720的分辨率(保留了视频区域514的高度)和4:3的纵横比。裁剪视频区域518与视频502具有相同的纵横比,但未必有相同的分辨率。裁剪视频518的分辨率可被缩放以符合视频502的分辨率。举例来说,裁剪视频区域518的分辨率可从960x720改变到640x480。结果是视频502包含视频区域514的一部分,如由裁剪视频区域518所定义,其包含在剪辑2中的帧中所描绘的人506。在此修改中,在视频区域514的顶部和底部处的内容保留在裁剪视频区域518中,代价是由于将裁剪视频区域518的分辨率从960x720改变到640x480而损失了一些视频质量。
一种替代性自动修改策略可以是将视频区域514裁剪到640x480,4:3的裁剪区域而不进行任何分辨率缩放。即,将视频区域514裁剪成匹配区域视频502的尺寸和分辨率的区域而不进行任何分辨率缩放。在此情况下,视频区域514的较多部分被裁剪掉。
在一些情况下,自动修改可包含缩放和/或添加像素(例如,添加宽屏、加垂直黑边、加四侧黑边)。举例来说,如果视频502改为16:9的视频,且剪辑2改为4:3的视频,且具有与视频502相同的像素高度,则可通过添加垂直黑边以弥补像素宽度的差异来修改剪辑2以符合视频502。
在一些实施例中,所使用的自动修改取决于剪辑是否在分辨率(尺寸)、纵横比或两者上与视频502不匹配。举例来说,如果纵横比和尺寸(高度和宽度两者)在剪辑与视频502之间都不同,则剪辑被裁剪且缩放。如果两种尺寸在剪辑与视频502之间都不同,但纵横比匹配,则剪辑被缩放。如果纵横比不同,但剪辑与视频502在一个维度上匹配,则剪辑被裁剪。
在一些实施例中,用户可指定关于装置300选择部署的自动修改策略的选择准则的偏好。举例来说,与内容保持相比,用户可指定质量保持的偏好,且此偏好影响装置300部署哪些策略。在一些实施例中,此偏好可在滑动尺度中表达。
在一些实施例中,自动修改是智能型的。即,执行修改以保留视频剪辑中感兴趣的对象(例如,人506、对象,等等),并且符合分辨率和纵横比。关于自动和智能地修改视频以符合分辨率和纵横比的更多细节揭示于2011年1月28日申请的标题为“智能缩放和裁剪(Smart Scaling and Cropping)”的第13/016,930号美国专利申请案中,所述专利申请案的全文以引用的方式并入本文中。
应了解,在各图中,视频区域514、被移除的区域516和裁剪视频区域518(其在图中说明为被视频502覆盖)实际并未在视频编辑器接口500中向用户显示。它们包含于图中,其中视频502覆盖在它们之上仅帮助描述对视频区域514的裁剪修改。对视频区域514的修改结果在视频502中向用户显示。此不应理解为排除在视频编辑器接口500中的其它地方显示视频区域514、被移除的区域516和裁剪视频区域518。另外,应了解,视频502、视频区域514、被移除的区域516和裁剪视频区域518未必是按比例绘制。
对视频的自动修改的结果不满意的用户可通过执行特定手势来超驰自动修改。超驰自动修改的一种方式是重新定位裁剪视频区域。图5B描绘在触摸板355上检测手势520。手势520包含在方向522上移动的手指接触520-A到520-C。手势520对应于在方向526上移动的与视频502的交互524。在一些实施例中,手势520为轻拂或轻扫手势。在一些其它实施例中,手势520为拖动手势。
响应于检测到手势520,裁剪视频区域518在视频区域514内被左对齐,如图5C中所展示。换句话说,比如,并非从视频区域514的左侧和右侧移除相等部分以自动地产生裁剪视频区域518,而是仅从视频区域514的右侧移除一区域。用户如视频剪辑2中的视图那样感知到超驰的结果,对于同一个帧,向左移动,如同电影摄影机向左移动一样,从而导致在视频502中的来自剪辑2的感兴趣的对象(例如,人506)被感知为与自动修改的结果相比向右移位(例如,图5C中所描绘的帧与图5A中所描绘的同一帧相比)。
在一些实施例中,手势520为轻拂或轻扫手势;用户可在一个方向上轻拂或轻扫以根据轻拂或轻扫的方向向左、向右、向上、向下、向拐角、向视频区域514的中心对齐裁剪视频区域518。在一些实施例中,手势520可为拖动手势;用户可使用拖动手势在任何方向上平移视频502,如同在视频区域514内拖动裁剪视频区域518以将裁剪视频区域518重新定位于视频区域514内一样。
超驰自动修改的另一方是通过调整裁剪视频区域的大小。接图5A,图5D描绘正在触摸板355上执行手势530。手势530包含以扩张手势移动分开的手指接触530-A和530-B。手势530对应于视频502上的交互532。
响应于检测到手势530,视频502从用户的角度来说被缩放,如图5E中所展示。在图5E中,剪辑2中的人506与图5D相比较大(即,被放大)。相对于裁剪视频区域514和视频区域518,手势530的效果是从视频区域514移除较大区域516,从而产生比如图5D中所描绘的裁剪视频区域518小的裁剪视频区域518。较小的裁剪视频区域518需要较小的分辨率缩小或不需要到较小分辨率的分辨率缩小(且甚至可能需要放大到较高的分辨率和/或添加宽屏/加垂直黑边/加四侧黑边)以符合视频502的分辨率。结果,当显示为视频502的部分时,与如图5D中所展示的自动裁剪视频区域518(从用户的角度来说被放大)相比,较小的裁剪视频区域518出现。
图5D描绘在触摸板355上检测扩张手势,且结果(较小的裁剪视频区域518)描绘于图5E中。反之亦然,可能在触摸板355上检测到夹捏手势。响应于检测到触摸板355上的夹捏手势,裁剪视频区域518扩大,从而使得视频502的包含裁剪视频区域518的部分从用户的角度来看被缩小了。
以上图5D和5E描述通过使得裁剪视频区域518变得较小而致使从用户角度来看视频502被放大的扩张手势530;与裁剪视频区域518上的效果相比,所述手势对应于从用户角度来看在剪辑2上所预期的直接操纵效果。相反,在一些其它实施例中,所述手势对应于对裁剪视频区域518的直接操纵。举例来说,扩张手势将扩大裁剪视频区域518,且结果从用户角度来看缩小了视频502。夹捏手势将缩减裁剪视频区域518,且结果从用户角度来看放大了视频502。
在一些实施例中,由自动修改或手动调整大小(超驰自动修改)所产生的裁剪视频区域518的大小(至少在任何缩放之前)为预定义的最小分辨率。此最小值被设定以便确保视频502的包含裁剪视频区域518的部分不会由于以低分辨率扩大视频剪辑而过度失常。在一些实施例中,最小分辨率是640x480。在一些其它实施例中,最小分辨率是相对于视频502的最小值。举例来说,最小分辨率可为视频502的分辨率的某一倍数。
在一些实施例中,裁剪视频区域518从一个分辨率到较大分辨率的缩放量限于最大水平。此也确保视频502的包含裁剪视频区域518的部分不会过度失常。在一些实施例中,最大缩放为原始分辨率(即,在所需的任何裁剪之后,但在任何缩放之前的裁剪视频区域518的分辨率)的两倍。此也实际上相对于视频502设定了裁剪视频区域518的最小分辨率。举例来说,对于视频502,裁剪视频区域518的最小分辨率为320x240;任何更小的裁剪视频区域518违背了为原始分辨率的2倍的最大缩放。
超驰自动修改的又一方式是通过旋转裁剪视频区域。接图5A,图5F描绘正在触摸板355上执行手势538。手势538包含绕着垂直于触摸板355的表面的轴线以旋转移动543绕转的手指接触538-A和538-B;手势538为旋转手势。手势538对应于在视频502上的交互540。
响应于检测到手势538,裁剪视频区域518旋转,如图5G中所展示。旋转后的裁剪视频区域518反映在视频502中,其中人506(和帧中的视图)也旋转。在一些实施例中,检测到手势538致使旋转预定义的量,例如旋转90°以将剪辑的定向从横向定向改变到纵向定向,或反之亦然。
在一些实施例中,超驰对视频502中的一个剪辑的自动修改并不延续到视频502中的其它剪辑。举例来说,接图5G,图5H描绘对应于剪辑3的视频区域508,其具有裁剪视频区域510。剪辑3中的树509展示于视频502中。裁剪视频区域518的旋转并不延续到裁剪视频区域510;裁剪视频区域510不旋转,视频502中的树509也不旋转。
当针对视频502中的剪辑超驰自动修改,且视频502在超驰的情况下被保存时,当在编辑模式之外播放时,向用户显示具有超驰的视频502。举例来说,接图5G,图5I描绘当不处于编辑模式中时显示于视频应用程序的视频播放器接口541中的视频502。在一些实施例中,视频应用程序可响应于用户命令(例如,菜单选项的激活、预定义的手势,或推动对应的虚拟按钮)而从视频接口500退出到视频播放器接口541。视频播放器接口541可包含播放/暂停按钮542、前进按钮546、后退按钮544,和进度条548以及进度指示器550。当播放视频502(例如,通过在未播放视频502时激活播放/暂停按钮542)时,视频502被播放,其中来自图5G的超驰(裁剪视频区域518的旋转)起作用,如视频502中的旋转后的人506所展示。
图6A到6B是说明根据一些实施例的编辑视频的方法600的流程图。在具有显示器和触敏表面的电子装置(例如,图3的装置300,或图1的可携式多功能装置100)处执行方法600。在一些实施例中,显示器为触摸屏显示器,且触敏表面在显示器上。在一些实施例中,显示器与触敏表面分开。可组合方法600中的一些操作,和/或可改变一些操作的次序。
如下文所述,方法600提供超驰对视频的自动裁剪和用简单手势手动地裁剪视频的直观方式。所述方法减小用户在编辑视频时的认知负担,进而产生更有效的人机接口。对于靠电池操作的电子装置,使得用户能够更快且更有效地编辑视频节省了电力且增加了电池充电之间的时间。
装置在视频应用程序的编辑模式中自动地裁剪(602)视频内容项目。举例来说,在图5A中,当将剪辑2添加到视频编辑器接口500中的视频502时,剪辑2被自动地裁剪成符合视频502的分辨率和纵横比(例如,作为视频502中的初始剪辑的剪辑1的分辨率和纵横比)的裁剪视频区域518。
装置在视频应用程序的编辑模式中在显示器上显示(604)视频内容项目的自动裁剪区域。举例来说,在图5A中,经缩放的裁剪视频区域518(例如,具有人506的帧)的结果显示于视频502中。
当在视频应用程序的编辑模式中在显示器上显示视频内容项目的裁剪区域时(606),装置检测(608)触敏表面上的手势。举例来说,在图5B中,当显示视频502时,在触摸板355上检测手势520。作为另一实例,在图5D中,当显示视频502时,在触摸板355上检测手势530。作为另一实例,在图5F中,当显示视频502时,在触摸板355上检测手势538。
在一些实施例中,所述手势为多手指手势(610)。举例来说,三根手指向上拖动手势将裁剪区域的位置向下移动;三根手指向下拖动手势将裁剪区域的位置向上移动;三根手指向右拖动手势将裁剪区域的位置向左移动;三根手指向左拖动手势将裁剪区域的位置向右移动;三根手指向右上方拖动手势将裁剪区域的位置向左下方移动;以此类推。对于用户而言,所显示的区域在与第一手势相同的方向上移动,而视频内容项目的裁剪区域相对于视频内容项目的整个区域实际上在相反方向上移动,如图5B到5C中所说明。手势520为在向右方向522上移动的多根手指手势。响应于检测到手势520,裁剪视频区域518向左移动,且视频502中的对应于裁剪视频区域518(例如,人506)的所显示内容向右移位。
响应于检测到触敏表面上的手势(612),装置通过根据手势修改视频内容项目的裁剪区域来超驰(614)对视频内容项目的自动裁剪,且在显示器上显示(624)视频内容项目的经修改的裁剪区域。举例来说,在图5B到5C中,响应于检测到手势520,裁剪视频区域518从裁剪视频区域518的如对视频区域514的自动修改所确定的位置移动。作为另一实例,响应于检测到手势530,将裁剪视频区域518的大小从裁剪视频区域518的如对视频区域514的自动修改所确定的大小进行调整。作为另一实例,响应于检测到手势538,裁剪视频区域518从裁剪视频区域518的如对视频区域514的自动修改所确定的定向旋转。
在一些实施例中,修改视频内容项目的裁剪区域包含改变视频内容项目的裁剪区域的位置(616)。改变裁剪区域的位置并不影响裁剪区域的放大/缩放水平。换句话说,在改变位置时保持裁剪区域的放大/缩放水平。举例来说,裁剪区域可自动地中心对齐,且第一手势将裁剪区域的位置改变为右、左、上或下对齐,而不改变裁剪区域的放大/缩放水平。在一些实施例中,三根手指向上拖动手势使裁剪区域的位置向下移动;三根手指向下拖动手势将裁剪区域的位置向上移动;三根手指向右拖动手势使裁剪区域的位置向左移动;三根手指向左拖动手势将裁剪区域的位置向右移动;三根手指向右上方拖动手势使裁剪区域的位置向左下方移动;等等。对于用户而言,所显示的区域在与第一手势相同的方向上移动,而视频内容项目的裁剪区域相对于视频内容项目的整个区域实际上在相反方向上移动,如图5B到5C中所说明。响应于检测到手势520,裁剪视频区域518向左移动,且视频502中的对应于裁剪视频区域518(例如,人506)的所显示内容向右移位。在一些实施例中,使用两根手指手势。
在一些实施例中,修改视频内容项目的裁剪区域包含调整视频内容项目的裁剪区域的大小(618)。举例来说,两根手指扩张手势增加裁剪区域的放大或缩放水平,如图5D到5E中所展示。响应于检测到手势530,视频502的对应于裁剪视频区域518(例如,人506)的内容被放大;裁剪视频区域518的大小被减小。相反,两根手指夹捏手势减小裁剪区域的放大或缩放水平(未展示)。
在一些实施例中,自动裁剪区域的大小或视频内容项目的经修改裁剪区域的大小至少为预定义的最小分辨率(620)。因此,举例来说,不可将裁剪视频区域518调整到低于预定义的最小分辨率的大小。在一些其它实施例中,裁剪频区域518从一个分辨率到较大分辨率的缩放量被限于最大水平。可设定最小分辨率或最大缩放量以确保视频502中的对应于裁剪视频区域518的内容满足某一阈值质量水平。最小分辨率可为绝对量或相对于视频502。最大缩放量实际上相对于视频502设定最小分辨率。
在一些实施例中,修改视频内容项目的裁剪区域包含旋转视频内容项目的裁剪区域(622)。举例来说,两根手指旋转手势538旋转裁剪视频区域518,如图5F到5G中所展示。在一些实施例中,根据两根手指手势中的移动同时调整裁剪区域的位置、大小和旋转。举例来说,如果手势538包含垂直/水平移动和/或夹捏/扩张移动以及旋转移动,则裁剪视频区域518可被重新定位和/或调整大小以及旋转。
在一些实施例中,显示视频内容项目的裁剪区域(对于自动裁剪区域和经修改的裁剪区域两者),而不显示视频内容项目的在裁剪区域之外的区域(626)。举例来说,不向用户显示视频区域514的裁剪掉的区域,例如被移除的区域516。在一些实施例中,不显示将视频项目的裁剪区域与未裁剪区域分开的裁剪矩形。用户在视觉上操纵所显示的视频内容项目,而非操纵叠置于所显示的视频内容项目上的裁剪矩形,此使得编辑对于一些用户(例如,新手用户)而言更直观且更简单。
在一些实施例中,视频内容项目为视频应用程序中的视频剪辑序列中的第一视频剪辑(628)。装置维持(630)经修改的裁剪区域直到第一视频剪辑结束,且自动地裁剪(632)在视频剪辑序列中的第一视频剪辑之后的下一视频剪辑。换句话说,超驰自动裁剪或自动修改在第一视频剪辑结束时结束。举例来说,超驰对应于剪辑2的裁剪视频区域518的旋转(如图5G中所展示)并不延续到视频502中的对应于剪辑3或视频502中的其它剪辑的内容,如图5H中所展示。
在一些实施例中,装置退出(634)视频应用程序的编辑模式;进入(636)视频应用程序的回放模式;且当处于视频应用程序的回放模式中时,用经修改的裁剪区域回放(638)视频内容项目。举例来说,视频应用程序可响应于检测到用户命令而从视频接口500退出到视频播放器接口541。视频502可在视频播放器接口541中播放,如图5I中所展示;所播放的视频502具有起作用的对自动修改的超驰(裁剪视频区域518的旋转,如从竖直位置旋转离开的人506为证)。
应理解,已描述的图6A到6B中的操作的特定次序仅仅是示范性的,且并不希望指示所描述的次序是可执行操作的唯一次序。所属领域的技术人员将认识到对本文所描述的操作进行重新排序的各种方式。
根据一些实施例,图7展示根据如上所述的本发明的原理而配置的电子装置700的功能块图。装置的功能块可以由硬件、软件或硬件与软件的组合来实施以实行本发明的原理。所属领域的技术人员将理解,图7中所描述的功能块可加以组合或分离成子块以实施如上所述的本发明的原理。因此,本文的描述可支持本文所述的功能块的任何可能组合或分离或进一步定义。
如图7中所展示,电子装置700包含显示器单元702、经配置以接收手势的触敏表面单元704和耦合到显示器单元702和触敏表面单元704的处理单元706。在一些实施例中,处理单元706包含自动裁剪单元708、显示器启用单元710、检测单元712、超驰单元714、维持单元716、退出单元718、进入单元720和播放单元722。
处理单元706经配置以:在视频应用程序的编辑模式中自动地裁剪视频内容项目(例如,借助自动裁剪单元708);使得能够在显示器单元702上显示视频内容项目的自动裁剪区域在视频应用程序的编辑模式中(例如,用显示启用单元710);以及,当在视频应用程序的编辑模式中在显示器单元702上显示视频内容项目的裁剪区域时:检测触敏表面单元704上的手势(例如,用检测单元712);以及,响应于检测到触敏表面单元704上的手势:通过根据所述手势修改视频内容项目的裁剪区域来超驰对视频内容项目的自动裁剪(例如,用超驰单元714);以及使得能够在显示器单元702上显示视频内容项目的经修改裁剪区域(例如,用显示启用单元710)。
在一些实施例中,所述视频内容项目的所述裁剪区域被显示,而不显示所述视频内容项目的在所述裁剪区域之外的区域。
在一些实施例中,修改所述视频内容项目的裁剪区域包含改变所述视频内容项目的裁剪区域的位置。
在一些实施例中,修改所述视频内容项目的裁剪区域包含调整所述视频内容项目的裁剪区域的大小。
在一些实施例中,所述视频内容项目的经修改裁剪区域的大小至少为预定义的最小分辨率。
在一些实施例中,修改所述视频内容项目的裁剪区域包含旋转所述视频内容项目的裁剪区域。
在一些实施例中,所述手势为多根手指手势。
在一些实施例中,所述视频内容项目为视频应用程序中的视频剪辑序列中的第一视频剪辑。处理单元706经配置以:维持经修改的裁剪区域直到第一视频剪辑结束(例如,用维持单元716),且自动地裁剪在所述视频剪辑序列中的第一视频剪辑之后的下一视频剪辑(例如,用自动裁剪单元708)。
在一些实施例中,处理单元706经配置以:退出视频应用程序的编辑模式(例如,用退出单元718);进入视频应用程序的回放模式(例如,用进入单元720);以及,在处于视频应用程序的回放模式时,用经修改的裁剪区域回放视频内容项目(例如,用播放单元722)。
上文所述的信息处理方法的操作可通过运行信息处理设备中的一个或一个以上功能模块(例如,通用处理器或专用芯片)来实施。这些模块、这些模块的组合和/或其与一般硬件(例如,如上文相对于图1A和3所描述)的组合都包含在本发明的保护范围内。
上文参考图6A到6B所描述的操作可由图1A到1B中所描绘的组件来实施。举例来说,检测操作608、超驰操作614和显示操作624可由事件分类器170、事件辨识器180和事件处置器190实施。事件分类器170中的事件监视器171检测触敏显示器112上的接触,且事件分派器模块174将事件信息递送到应用程序136-1。应用程序136-1的对应事件辨识器180将事件信息与对应事件定义186进行比较,并确定触敏表面上第一位置处的第一接触是否对应于预定义的事件或子事件,例如选择用户接口上的对象。当检测到对应预定义的事件或子事件时,事件辨识器180启动与检测到事件或子事件相关联的事件处置器190。事件处置器190可利用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处置器190存取相应的GUI更新器178以更新应用程序所显示的内容。类似地,所属领域的技术人员将清楚可如何基于图1A到1B中描绘的组件来实施其它处理器。
已为特定目的而参考特定实施例描述以上描述。然而,以上说明性论述不希望穷尽本发明或将本发明限于所揭示的精确形式。鉴于以上教示,许多修改及变体是可能的。选择和描述所述实施例以便最佳地解释本发明的原理及其实际应用,借此使所属领域的技术人员能够最佳地利用本发明以及具有适用于所预期的特定用途的各种修改的各种实施例。
Claims (21)
1.一种电子装置,其包括:
显示器单元;
触敏表面单元,其经配置以接收手势;以及
处理单元,其耦合到所述显示器单元和所述触敏表面单元,所述处理单元经配置以:
在视频应用程序的编辑模式中自动地裁剪视频内容项目;
使得能够在所述视频应用程序的所述编辑模式中在所述显示器单元上显示所述视频内容项目的自动裁剪区域;以及,
当在所述视频应用程序的所述编辑模式中在所述显示器单元上显示所述视频内容项目的所述裁剪区域时:
检测所述触敏表面单元上的手势;以及,
响应于检测到所述触敏表面单元上的所述手势:
通过根据所述手势修改所述视频内容项目的所述裁剪区域来超驰对所述视频内容项目的自动裁剪;以及
使得能够在所述显示器单元上显示所述视频内容项目的所述经修改的裁剪区域。
2.根据权利要求1所述的电子装置,其中所述视频内容项目的所述裁剪区域被显示,而不显示所述视频内容项目的在所述裁剪区域之外的区域。
3.根据权利要求1所述的电子装置,其中修改所述视频内容项目的所述裁剪区域包含改变所述视频内容项目的所述裁剪区域的位置。
4.根据权利要求1所述的电子装置,其中修改所述视频内容项目的所述裁剪区域包含调整所述视频内容项目的所述裁剪区域的大小。
5.根据权利要求4所述的电子装置,其中所述视频内容项目的所述经修改的裁剪区域的大小至少为预定义的最小分辨率。
6.根据权利要求1所述的电子装置,其中修改所述视频内容项目的所述裁剪区域包含旋转所述视频内容项目的所述裁剪区域。
7.根据权利要求1所述的电子装置,其中所述视频内容项目为所述视频应用程序中的视频剪辑序列中的第一视频剪辑,其中所述处理单元经配置以:
维持所述经修改的裁剪区域直到所述第一视频剪辑结束,以及
自动地裁剪在所述视频剪辑序列中的所述第一视频剪辑之后的下一视频剪辑。
8.一种用于超驰对视频内容项目的自动裁剪的方法,其包括:
在具有显示器和触敏表面的电子装置处在视频应用程序的编辑模式中自动地裁剪视频内容项目;
在所述视频应用程序的所述编辑模式中在所述显示器上显示所述视频内容项目的自动裁剪区域;以及,
当在所述视频应用程序的所述编辑模式中在所述显示器上显示所述视频内容项目的所述裁剪区域时:
检测所述触敏表面上的手势;以及,
响应于检测到所述触敏表面上的所述手势:
通过根据所述手势修改所述视频内容项目的所述裁剪区域来超驰对所述视频内容项目的自动裁剪;以及
在所述显示器上显示所述视频内容项目的所述经修改的裁剪区域。
9.根据权利要求8所述的方法,其中显示所述视频内容项目的所述裁剪区域,而不显示所述视频内容项目的在所述裁剪区域之外的区域。
10.根据权利要求8所述的方法,其中修改所述视频内容项目的所述裁剪区域包含改变所述视频内容项目的所述裁剪区域的位置。
11.根据权利要求8所述的方法,其中修改所述视频内容项目的所述裁剪区域包含调整所述视频内容项目的所述裁剪区域的大小。
12.根据权利要求11所述的方法,其中所述视频内容项目的所述经修改的裁剪区域的大小至少为预定义的最小分辨率。
13.根据权利要求8所述的方法,其中修改所述视频内容项目的所述裁剪区域包含旋转所述视频内容项目的所述裁剪区域。
14.根据权利要求8所述的方法,其中所述视频内容项目为所述视频应用程序中的视频剪辑序列中的第一视频剪辑,所述方法包含:
维持所述经修改的裁剪区域直到所述第一视频剪辑结束,以及
自动地裁剪在所述视频剪辑序列中的所述第一视频剪辑之后的下一视频剪辑。
15.一种用于超驰对视频内容项目的自动裁剪的设备,其包括:
用于在具有显示器和触敏表面的电子装置处在视频应用程序的编辑模式中自动地裁剪视频内容项目的构件;
用于在所述视频应用程序的所述编辑模式中在所述显示器上显示所述视频内容项目的自动裁剪区域的构件;以及,
当在所述视频应用程序的所述编辑模式中在所述显示器上显示所述视频内容项目的所述裁剪区域时启用的构件,其包含:
用于检测所述触敏表面上的手势的构件;以及,
响应于检测到所述触敏表面上的所述手势而启用的构件,其包含:
用于通过根据所述手势修改所述视频内容项目的所述裁剪区域来超驰对所述视频内容项目的自动裁剪的构件;以及
用于在所述显示器上显示所述视频内容项目的所述经修改的裁剪区域的构件。
16.根据权利要求15所述的设备,其中所述视频内容项目的所述裁剪区域被显示,而不显示所述视频内容项目的在所述裁剪区域之外的区域。
17.根据权利要求15所述的设备,其中修改所述视频内容项目的所述裁剪区域包含改变所述视频内容项目的所述裁剪区域的位置。
18.根据权利要求15所述的设备,其中修改所述视频内容项目的所述裁剪区域包含调整所述视频内容项目的所述裁剪区域的大小。
19.根据权利要求18所述的设备,其中所述视频内容项目的所述经修改的裁剪区域的大小至少为预定义的最小分辨率。
20.根据权利要求15所述的设备,其中修改所述视频内容项目的所述裁剪区域包含旋转所述视频内容项目的所述裁剪区域。
21.根据权利要求15所述的设备,其中所述视频内容项目为所述视频应用程序中的视频剪辑序列中的第一视频剪辑,所述方法包含:
维持所述经修改的裁剪区域直到所述第一视频剪辑结束,以及自动地裁剪在所述视频剪辑序列中的所述第一视频剪辑之后的下一视频剪辑。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201161527981P | 2011-08-26 | 2011-08-26 | |
US61/527,981 | 2011-08-26 | ||
US13/335,838 | 2011-12-22 | ||
US13/335,838 US9933935B2 (en) | 2011-08-26 | 2011-12-22 | Device, method, and graphical user interface for editing videos |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103164152A true CN103164152A (zh) | 2013-06-19 |
CN103164152B CN103164152B (zh) | 2016-08-17 |
Family
ID=46801315
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210308862.1A Active CN103164152B (zh) | 2011-08-26 | 2012-08-27 | 用于编辑视频的装置、方法和图形用户接口 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9933935B2 (zh) |
EP (1) | EP2562632B1 (zh) |
CN (1) | CN103164152B (zh) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106131628A (zh) * | 2016-07-13 | 2016-11-16 | 苏州科达科技股份有限公司 | 一种视频图像处理方法及装置 |
CN106257392A (zh) * | 2015-06-18 | 2016-12-28 | 苹果公司 | 用于导航媒体内容的设备、方法和图形用户界面 |
CN106534972A (zh) * | 2016-12-12 | 2017-03-22 | 广东威创视讯科技股份有限公司 | 一种无损缩放显示局部视频的方法及装置 |
CN107005458A (zh) * | 2014-08-18 | 2017-08-01 | 夜灯系统有限责任公司 | 未脚本化数字媒体消息生成 |
CN107809670A (zh) * | 2017-10-31 | 2018-03-16 | 长光卫星技术有限公司 | 适用于大面阵米级高分辨率卫星的视频剪辑系统及方法 |
CN108363534A (zh) * | 2018-01-30 | 2018-08-03 | 优视科技新加坡有限公司 | 可编辑对象的全局预览方法、装置及电子设备 |
US10474333B2 (en) | 2015-09-08 | 2019-11-12 | Apple Inc. | Devices, methods, and graphical user interfaces for moving a current focus using a touch-sensitive remote control |
CN110709835A (zh) * | 2017-12-12 | 2020-01-17 | 谷歌有限责任公司 | 提供搜索结果的视频预览 |
US10599394B2 (en) | 2015-09-08 | 2020-03-24 | Apple Inc. | Device, method, and graphical user interface for providing audiovisual feedback |
CN111158561A (zh) * | 2019-12-03 | 2020-05-15 | 深圳传音控股股份有限公司 | 智能终端、视图裁剪方法及计算机可读存储介质 |
US10691408B2 (en) | 2014-08-18 | 2020-06-23 | Nightlight Systems Llc | Digital media message generation |
CN111488113A (zh) * | 2014-01-23 | 2020-08-04 | 苹果公司 | 虚拟计算机键盘 |
US10735361B2 (en) | 2014-08-18 | 2020-08-04 | Nightlight Systems Llc | Scripted digital media message generation |
US10735360B2 (en) | 2014-08-18 | 2020-08-04 | Nightlight Systems Llc | Digital media messages and files |
CN114612584A (zh) * | 2021-12-31 | 2022-06-10 | 北京城市网邻信息技术有限公司 | 图像处理方法、装置、设备及存储介质 |
CN115665347A (zh) * | 2022-10-27 | 2023-01-31 | 上海幻电信息科技有限公司 | 视频裁剪方法、装置、电子设备及存储介质 |
US11914419B2 (en) | 2014-01-23 | 2024-02-27 | Apple Inc. | Systems and methods for prompting a log-in to an electronic device based on biometric information received from a user |
US11922006B2 (en) | 2018-06-03 | 2024-03-05 | Apple Inc. | Media control for screensavers on an electronic device |
Families Citing this family (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011254442A (ja) | 2010-05-06 | 2011-12-15 | Ricoh Co Ltd | 遠隔通信端末、遠隔通信方法、及び遠隔通信用プログラム |
WO2012054059A1 (en) * | 2010-10-22 | 2012-04-26 | Hewlett-Packard Development Company L.P. | Altering focus lens magnification in a video frame |
US9100685B2 (en) | 2011-12-09 | 2015-08-04 | Microsoft Technology Licensing, Llc | Determining audience state or interest using passive sensor data |
US20130159555A1 (en) * | 2011-12-20 | 2013-06-20 | Microsoft Corporation | Input commands |
CA2775700C (en) | 2012-05-04 | 2013-07-23 | Microsoft Corporation | Determining a future portion of a currently presented media program |
US10455284B2 (en) * | 2012-08-31 | 2019-10-22 | Elwha Llc | Dynamic customization and monetization of audio-visual content |
US10237613B2 (en) | 2012-08-03 | 2019-03-19 | Elwha Llc | Methods and systems for viewing dynamically customized audio-visual content |
JP6183003B2 (ja) * | 2012-11-15 | 2017-08-23 | 株式会社リコー | 伝送システム |
US8971968B2 (en) * | 2013-01-18 | 2015-03-03 | Dell Products, Lp | System and method for context aware usability management of human machine interfaces |
JP6182885B2 (ja) * | 2013-02-05 | 2017-08-23 | ノーリツプレシジョン株式会社 | 画像処理プログラム及び画像処理装置 |
KR102113683B1 (ko) * | 2013-03-06 | 2020-06-03 | 삼성전자주식회사 | 문지르기 제스처를 검출하여 미리보기를 제공하는 모바일 장치 및 그 제어 방법 |
KR20150126359A (ko) * | 2013-03-08 | 2015-11-11 | 톰슨 라이센싱 | 짧은 효과를 위한 제스춰를 이용하기 위한 방법 및 장치 |
JP2014215604A (ja) * | 2013-04-30 | 2014-11-17 | ソニー株式会社 | 画像処理装置および画像処理方法 |
US20140341527A1 (en) * | 2013-05-15 | 2014-11-20 | MixBit, Inc. | Creating, Editing, and Publishing a Video Using a Mobile Device |
US20150007031A1 (en) * | 2013-06-26 | 2015-01-01 | Lucid Global, Llc. | Medical Environment Simulation and Presentation System |
US10037129B2 (en) * | 2013-08-30 | 2018-07-31 | Google Llc | Modifying a segment of a media item on a mobile device |
US9519420B2 (en) | 2013-10-16 | 2016-12-13 | Samsung Electronics Co., Ltd. | Apparatus and method for editing synchronous media |
US9544649B2 (en) * | 2013-12-03 | 2017-01-10 | Aniya's Production Company | Device and method for capturing video |
US20150301708A1 (en) * | 2014-04-21 | 2015-10-22 | VMIX Media, Inc. | Video Editing Graphical User Interface |
US9973459B2 (en) | 2014-08-18 | 2018-05-15 | Nightlight Systems Llc | Digital media message generation |
US11743402B2 (en) * | 2015-02-13 | 2023-08-29 | Awes.Me, Inc. | System and method for photo subject display optimization |
US10770113B2 (en) * | 2016-07-22 | 2020-09-08 | Zeality Inc. | Methods and system for customizing immersive media content |
US10222958B2 (en) | 2016-07-22 | 2019-03-05 | Zeality Inc. | Customizing immersive media content with embedded discoverable elements |
GB2558868A (en) * | 2016-09-29 | 2018-07-25 | British Broadcasting Corp | Video search system & method |
US10754529B2 (en) * | 2016-10-28 | 2020-08-25 | Adobe Inc. | Facilitating editing of virtual-reality content using a virtual-reality headset |
US20180349862A1 (en) * | 2017-06-04 | 2018-12-06 | Roof Right Now, LLC | Automated Estimate Systems and Methods |
US11321857B2 (en) | 2018-09-28 | 2022-05-03 | Apple Inc. | Displaying and editing images with depth information |
US11665312B1 (en) * | 2018-12-27 | 2023-05-30 | Snap Inc. | Video reformatting recommendation |
US10887542B1 (en) | 2018-12-27 | 2021-01-05 | Snap Inc. | Video reformatting system |
US10944711B2 (en) * | 2019-03-28 | 2021-03-09 | Microsoft Technology Licensing, Llc | Paginated method to create decision tree conversation |
CN112565625A (zh) * | 2019-09-26 | 2021-03-26 | 北京小米移动软件有限公司 | 视频处理方法、装置及介质 |
USD976268S1 (en) * | 2019-10-10 | 2023-01-24 | Samsung Electronics Co., Ltd. | Display screen or portion thereof with graphical user interface |
US11621979B1 (en) | 2020-12-31 | 2023-04-04 | Benjamin Slotznick | Method and apparatus for repositioning meeting participants within a virtual space view in an online meeting user interface based on gestures made by the meeting participants |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030043207A1 (en) * | 2001-09-06 | 2003-03-06 | Matias Duarte | Method of scrolling a display window |
US20060188173A1 (en) * | 2005-02-23 | 2006-08-24 | Microsoft Corporation | Systems and methods to adjust a source image aspect ratio to match a different target aspect ratio |
WO2009076974A1 (en) * | 2007-12-14 | 2009-06-25 | Nokia Corporation | Mode control for an electronic device with touch ui |
US20110191719A1 (en) * | 2010-02-04 | 2011-08-04 | Microsoft Corporation | Cut, Punch-Out, and Rip Gestures |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2003229014A1 (en) * | 2002-05-10 | 2003-11-11 | Confoti, Inc. | Apparatus for interactive specification of manufactured products |
US7388605B2 (en) | 2002-11-12 | 2008-06-17 | Hewlett-Packard Development Company, L.P. | Still image capturing of user-selected portions of image frames |
US7339598B2 (en) * | 2003-07-11 | 2008-03-04 | Vistaprint Technologies Limited | System and method for automated product design |
US8448083B1 (en) | 2004-04-16 | 2013-05-21 | Apple Inc. | Gesture control of multimedia editing applications |
US7743348B2 (en) * | 2004-06-30 | 2010-06-22 | Microsoft Corporation | Using physical objects to adjust attributes of an interactive display application |
US7769819B2 (en) * | 2005-04-20 | 2010-08-03 | Videoegg, Inc. | Video editing with timeline representations |
US8085302B2 (en) * | 2005-11-21 | 2011-12-27 | Microsoft Corporation | Combined digital and mechanical tracking of a person or object using a single video camera |
US7403643B2 (en) * | 2006-08-11 | 2008-07-22 | Fotonation Vision Limited | Real-time face tracking in a digital image acquisition device |
JP4509081B2 (ja) | 2006-10-20 | 2010-07-21 | Sky株式会社 | デジタルカメラ及びデジタルカメラのプログラム |
US20080222530A1 (en) * | 2007-03-06 | 2008-09-11 | Microsoft Corporation | Navigating user interface controls on a two-dimensional canvas |
US8295683B2 (en) * | 2007-04-23 | 2012-10-23 | Hewlett-Packard Development Company, L.P. | Temporal occlusion costing applied to video editing |
WO2009036415A1 (en) * | 2007-09-12 | 2009-03-19 | Event Mall, Inc. | System, apparatus, software and process for integrating video images |
US8161379B2 (en) * | 2008-06-20 | 2012-04-17 | Microsoft Corporation | Fit and fill techniques for pictures |
JP4792127B2 (ja) * | 2008-07-24 | 2011-10-12 | パナソニック株式会社 | 立体視再生が可能な再生装置、再生方法、プログラム |
KR20100028344A (ko) * | 2008-09-04 | 2010-03-12 | 삼성전자주식회사 | 휴대단말의 영상 편집 방법 및 장치 |
US8957865B2 (en) * | 2009-01-05 | 2015-02-17 | Apple Inc. | Device, method, and graphical user interface for manipulating a user interface object |
US8860865B2 (en) * | 2009-03-02 | 2014-10-14 | Burning Moon, Llc | Assisted video creation utilizing a camera |
WO2010116370A1 (en) * | 2009-04-07 | 2010-10-14 | Nextvision Stabilized Systems Ltd | Camera systems having multiple image sensors combined with a single axis mechanical gimbal |
US8723988B2 (en) * | 2009-07-17 | 2014-05-13 | Sony Corporation | Using a touch sensitive display to control magnification and capture of digital images by an electronic device |
US8806331B2 (en) * | 2009-07-20 | 2014-08-12 | Interactive Memories, Inc. | System and methods for creating and editing photo-based projects on a digital network |
US9300722B2 (en) * | 2010-01-05 | 2016-03-29 | Qualcomm Incorporated | Auto-trimming of media files |
US8754961B2 (en) * | 2011-08-17 | 2014-06-17 | Nokia Corporation | Apparatus and method for generating image data from overlapping regions of images |
-
2011
- 2011-12-22 US US13/335,838 patent/US9933935B2/en active Active
-
2012
- 2012-08-23 EP EP12181460.2A patent/EP2562632B1/en active Active
- 2012-08-27 CN CN201210308862.1A patent/CN103164152B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030043207A1 (en) * | 2001-09-06 | 2003-03-06 | Matias Duarte | Method of scrolling a display window |
US20060188173A1 (en) * | 2005-02-23 | 2006-08-24 | Microsoft Corporation | Systems and methods to adjust a source image aspect ratio to match a different target aspect ratio |
WO2009076974A1 (en) * | 2007-12-14 | 2009-06-25 | Nokia Corporation | Mode control for an electronic device with touch ui |
US20110191719A1 (en) * | 2010-02-04 | 2011-08-04 | Microsoft Corporation | Cut, Punch-Out, and Rip Gestures |
Cited By (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11914419B2 (en) | 2014-01-23 | 2024-02-27 | Apple Inc. | Systems and methods for prompting a log-in to an electronic device based on biometric information received from a user |
CN111488113B (zh) * | 2014-01-23 | 2023-11-28 | 苹果公司 | 虚拟计算机键盘 |
CN111488113A (zh) * | 2014-01-23 | 2020-08-04 | 苹果公司 | 虚拟计算机键盘 |
US10691408B2 (en) | 2014-08-18 | 2020-06-23 | Nightlight Systems Llc | Digital media message generation |
CN107005458A (zh) * | 2014-08-18 | 2017-08-01 | 夜灯系统有限责任公司 | 未脚本化数字媒体消息生成 |
US11082377B2 (en) | 2014-08-18 | 2021-08-03 | Nightlight Systems Llc | Scripted digital media message generation |
US10992623B2 (en) | 2014-08-18 | 2021-04-27 | Nightlight Systems Llc | Digital media messages and files |
CN107005458B (zh) * | 2014-08-18 | 2020-08-11 | 夜灯系统有限责任公司 | 未脚本化数字媒体消息生成方法、装置、电子设备和可读介质 |
US10735360B2 (en) | 2014-08-18 | 2020-08-04 | Nightlight Systems Llc | Digital media messages and files |
US10735361B2 (en) | 2014-08-18 | 2020-08-04 | Nightlight Systems Llc | Scripted digital media message generation |
US10728197B2 (en) | 2014-08-18 | 2020-07-28 | Nightlight Systems Llc | Unscripted digital media message generation |
US10545635B2 (en) | 2015-06-18 | 2020-01-28 | Apple Inc. | Device, method, and graphical user interface for navigating media content |
CN106257392B (zh) * | 2015-06-18 | 2019-09-17 | 苹果公司 | 用于导航媒体内容的设备、方法和图形用户界面 |
CN106257392A (zh) * | 2015-06-18 | 2016-12-28 | 苹果公司 | 用于导航媒体内容的设备、方法和图形用户界面 |
US11816303B2 (en) | 2015-06-18 | 2023-11-14 | Apple Inc. | Device, method, and graphical user interface for navigating media content |
US10572109B2 (en) | 2015-06-18 | 2020-02-25 | Apple Inc. | Device, method, and graphical user interface for navigating media content |
US10474333B2 (en) | 2015-09-08 | 2019-11-12 | Apple Inc. | Devices, methods, and graphical user interfaces for moving a current focus using a touch-sensitive remote control |
US10963130B2 (en) | 2015-09-08 | 2021-03-30 | Apple Inc. | Devices, methods, and graphical user interfaces for moving a current focus using a touch-sensitive remote control |
US11960707B2 (en) | 2015-09-08 | 2024-04-16 | Apple Inc. | Devices, methods, and graphical user interfaces for moving a current focus using a touch-sensitive remote control |
US11262890B2 (en) | 2015-09-08 | 2022-03-01 | Apple Inc. | Devices, methods, and graphical user interfaces for moving a current focus using a touch-sensitive remote control |
US10599394B2 (en) | 2015-09-08 | 2020-03-24 | Apple Inc. | Device, method, and graphical user interface for providing audiovisual feedback |
US11635876B2 (en) | 2015-09-08 | 2023-04-25 | Apple Inc. | Devices, methods, and graphical user interfaces for moving a current focus using a touch-sensitive remote control |
CN106131628A (zh) * | 2016-07-13 | 2016-11-16 | 苏州科达科技股份有限公司 | 一种视频图像处理方法及装置 |
CN106534972A (zh) * | 2016-12-12 | 2017-03-22 | 广东威创视讯科技股份有限公司 | 一种无损缩放显示局部视频的方法及装置 |
CN107809670B (zh) * | 2017-10-31 | 2020-05-12 | 长光卫星技术有限公司 | 适用于大面阵米级高分辨率卫星的视频剪辑系统及方法 |
CN107809670A (zh) * | 2017-10-31 | 2018-03-16 | 长光卫星技术有限公司 | 适用于大面阵米级高分辨率卫星的视频剪辑系统及方法 |
CN110709835B (zh) * | 2017-12-12 | 2023-10-10 | 谷歌有限责任公司 | 提供搜索结果的视频预览 |
CN110709835A (zh) * | 2017-12-12 | 2020-01-17 | 谷歌有限责任公司 | 提供搜索结果的视频预览 |
US11762902B2 (en) | 2017-12-12 | 2023-09-19 | Google Llc | Providing a video preview of search results |
CN108363534B (zh) * | 2018-01-30 | 2021-06-01 | 优视科技新加坡有限公司 | 可编辑对象的全局预览方法、装置及电子设备 |
CN108363534A (zh) * | 2018-01-30 | 2018-08-03 | 优视科技新加坡有限公司 | 可编辑对象的全局预览方法、装置及电子设备 |
US11922006B2 (en) | 2018-06-03 | 2024-03-05 | Apple Inc. | Media control for screensavers on an electronic device |
CN111158561A (zh) * | 2019-12-03 | 2020-05-15 | 深圳传音控股股份有限公司 | 智能终端、视图裁剪方法及计算机可读存储介质 |
CN114612584A (zh) * | 2021-12-31 | 2022-06-10 | 北京城市网邻信息技术有限公司 | 图像处理方法、装置、设备及存储介质 |
CN115665347A (zh) * | 2022-10-27 | 2023-01-31 | 上海幻电信息科技有限公司 | 视频裁剪方法、装置、电子设备及存储介质 |
WO2024087643A1 (zh) * | 2022-10-27 | 2024-05-02 | 上海幻电信息科技有限公司 | 视频裁剪方法、装置、电子设备及存储介质 |
CN115665347B (zh) * | 2022-10-27 | 2024-12-24 | 上海幻电信息科技有限公司 | 视频裁剪方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
US20130055087A1 (en) | 2013-02-28 |
EP2562632A2 (en) | 2013-02-27 |
CN103164152B (zh) | 2016-08-17 |
US9933935B2 (en) | 2018-04-03 |
EP2562632A3 (en) | 2013-04-03 |
EP2562632B1 (en) | 2016-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103164152A (zh) | 用于编辑视频的装置、方法和图形用户接口 | |
CN103052935B (zh) | 用于对对象的前后位置进行重新排序的装置、方法和图形用户接口 | |
CN102763065B (zh) | 用于导航经过多个查看区域的装置、方法和图形用户接口 | |
CN102754071B (zh) | 具有包含具有另一设备的显示分辨率的模式的多个应用程序显示模式的设备和方法 | |
CN102763079B (zh) | 用自定义控件取代键盘的应用程序编程接口(api) | |
CN102763074B (zh) | 自动键盘布局确定 | |
US10140301B2 (en) | Device, method, and graphical user interface for selecting and using sets of media player controls | |
CN102955653B (zh) | 用于导览和预览内容项目的装置、方法和图形用户接口 | |
CN110851068B (zh) | 用于管理用户界面的方法和电子设备 | |
US9569102B2 (en) | Device, method, and graphical user interface with interactive popup views | |
US9733812B2 (en) | Device, method, and graphical user interface with content display modes and display rotation heuristics | |
CN102414755B (zh) | 用于编辑电子消息中的音频或视频附件的设备、方法和图形用户界面 | |
CN102763077A (zh) | 自动显示及隐藏屏幕上键盘 | |
CN103218148A (zh) | 用于配置与用户接口的受约束的交互的装置、方法和图形用户接口 | |
CN103186343A (zh) | 用于调整内容查看和文本输入接口的大小的装置、方法和图形用户接口 | |
CN102754061A (zh) | 用于改变电子文档中的页的装置、方法和图形用户接口 | |
US20080168365A1 (en) | Creating Digital Artwork Based on Content File Metadata | |
CN102763128A (zh) | 用于附件查看和编辑的装置、方法和图形用户接口 | |
CN102763058A (zh) | 用于存取可选键的装置、方法和图形用户接口 | |
CN117857882A (zh) | 用于导航和播放基于频道内容的用户界面 | |
CN102822788A (zh) | 用于对象的精确定位的装置、方法和图形用户接口 | |
CN102763066A (zh) | 用于导航经过一范围的值的装置、方法和图形用户接口 | |
CN103186318A (zh) | 用于使用单点触摸输入提供多点触摸输入和基于硬件的特征的装置、方法和图形用户接口 | |
CN103218154A (zh) | 用于基于手势输入在三维地图中选择视图的装置、方法和图形用户接口 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 1186266 Country of ref document: HK |
|
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: GR Ref document number: 1186266 Country of ref document: HK |