`MARC DAVIS (cid:9)
`School of Information Management and Systems (cid:9)
`School of Information Management and Systems
`University of California at Berkeley (cid:9)
`University of California at Berkeley
`
`
`P U B L I C A T I O N S
`PUBLICATIONS
`marc@sims.berkeley.edu
`marc@sims.berkeley.edu
`www.sims.berkeley.edu/~marc
`www.sims.berkeley.edui-marc
`
`
`
`
`
`Media Streams: An Iconic Visual
`Media Streams: An Iconic Visual
`Language for Video Representation
`Language for Video Representation
`
`
`
`
`
`
`
`
`
`
`
`
`
`
`
`Bibliographic Reference:
`Bibliographic Reference:
`Marc Davis. "Media Streams: An Iconic Visual Language for Video Representation." In: Readings
`Marc Davis. "Media Streams: An Iconic Visual Language for Video Representation." In: Readings
`in Human-Computer Interaction: Toward the Year 2000, eds. Ronald M. Baecker, Jonathan
`in Human-Computer Interaction: Toward the Year 2000, eds. Ronald M. Baecker, Jonathan
`Grudin, William A. S. Buxton, and Saul Greenberg. 854-866. 2nd ed., San Francisco: Morgan
`Grudin, William A. S. Buxton, and Saul Greenberg. 854-866. 2nd ed., San Francisco: Morgan
`Kaufmann Publishers, Inc., 1995.
`Kaufmann Publishers, Inc., 1995.
`
`
`
`
`Page 1 of 16
`
`MINDGEEK EXHIBIT 1011
`
`
`
`(cid:2)
`
`
`
`(cid:2)
`Page 2 of 16
`
`MINDGEEK EXHIBIT 1011
`
`Page 2 of 16
`
`MINDGEEK EXHIBIT 1011
`
`
`
`(cid:47)(cid:71)(cid:70)(cid:75)(cid:67)(cid:2)(cid:53)(cid:86)(cid:84)(cid:71)(cid:67)(cid:79)(cid:85)(cid:28)(cid:2)(cid:35)(cid:80)(cid:2)(cid:43)(cid:69)(cid:81)(cid:80)(cid:75)(cid:69)(cid:2)(cid:56)(cid:75)(cid:85)(cid:87)(cid:67)(cid:78)(cid:2)(cid:46)(cid:67)(cid:80)(cid:73)(cid:87)(cid:67)(cid:73)(cid:71)(cid:2)(cid:72)(cid:81)(cid:84)(cid:2)(cid:56)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)(cid:52)(cid:71)(cid:82)(cid:84)(cid:71)(cid:85)(cid:71)(cid:80)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2)
`Media Streams: An Iconic Visual Language for Video Representation
`(cid:2)
`(cid:47)(cid:67)(cid:84)(cid:69)(cid:2)(cid:38)(cid:67)(cid:88)(cid:75)(cid:85)(cid:2)
`Marc Davis
`(cid:43)(cid:80)(cid:86)(cid:71)(cid:84)(cid:88)(cid:67)(cid:78)(cid:2)(cid:52)(cid:71)(cid:85)(cid:71)(cid:67)(cid:84)(cid:69)(cid:74)(cid:2)(cid:37)(cid:81)(cid:84)(cid:82)(cid:81)(cid:84)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2)
`Interval Research Corporation
`(cid:19)(cid:26)(cid:18)(cid:19)(cid:15)(cid:37)(cid:2)(cid:50)(cid:67)(cid:73)(cid:71)(cid:2)(cid:47)(cid:75)(cid:78)(cid:78)(cid:2)(cid:52)(cid:81)(cid:67)(cid:70)(cid:2)
`1801-C Page Mill Road
`(cid:50)(cid:67)(cid:78)(cid:81)(cid:2)(cid:35)(cid:78)(cid:86)(cid:81)(cid:14)(cid:2)(cid:37)(cid:35)(cid:2)(cid:27)(cid:22)(cid:21)(cid:18)(cid:22)(cid:2)
`Palo Alto, CA 94304
`(cid:70)(cid:67)(cid:88)(cid:75)(cid:85)(cid:34)(cid:75)(cid:80)(cid:86)(cid:71)(cid:84)(cid:88)(cid:67)(cid:78)(cid:16)(cid:69)(cid:81)(cid:79)(cid:2)
`davis@interval.com
`
`(cid:2)
`
`(cid:2) (cid:2) (cid:35)
`
`(cid:68)(cid:85)(cid:86)(cid:84)(cid:67)(cid:69)(cid:86)(cid:2)
`Abstract
`(cid:43)(cid:80)(cid:2) (cid:81)(cid:84)(cid:70)(cid:71)(cid:84)(cid:2) (cid:86)(cid:81)(cid:2) (cid:71)(cid:80)(cid:67)(cid:68)(cid:78)(cid:71)(cid:2) (cid:86)(cid:74)(cid:71)(cid:2) (cid:85)(cid:71)(cid:67)(cid:84)(cid:69)(cid:74)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:84)(cid:71)(cid:86)(cid:84)(cid:75)(cid:71)(cid:88)(cid:67)(cid:78)(cid:2) (cid:81)(cid:72)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2) (cid:72)(cid:84)(cid:81)(cid:79)(cid:2)
`In order to enable the search and retrieval of video from
`(cid:78)(cid:67)(cid:84)(cid:73)(cid:71)(cid:2)(cid:67)(cid:84)(cid:69)(cid:74)(cid:75)(cid:88)(cid:71)(cid:85)(cid:14)(cid:2)(cid:89)(cid:71)(cid:2)(cid:80)(cid:71)(cid:71)(cid:70)(cid:2)(cid:67)(cid:2)(cid:84)(cid:71)(cid:82)(cid:84)(cid:71)(cid:85)(cid:71)(cid:80)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2)(cid:78)(cid:67)(cid:80)(cid:73)(cid:87)(cid:67)(cid:73)(cid:71)(cid:2)(cid:72)(cid:81)(cid:84)(cid:2)(cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)
`large archives, we need a representation language for video
`(cid:69)(cid:81)(cid:80)(cid:86)(cid:71)(cid:80)(cid:86)(cid:16)(cid:2)
`(cid:2) (cid:35)(cid:78)(cid:86)(cid:74)(cid:81)(cid:87)(cid:73)(cid:74)(cid:2) (cid:85)(cid:81)(cid:79)(cid:71)(cid:2) (cid:67)(cid:85)(cid:82)(cid:71)(cid:69)(cid:86)(cid:85)(cid:2) (cid:81)(cid:72)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2) (cid:69)(cid:67)(cid:80)(cid:2) (cid:68)(cid:71)(cid:2)
`content. (cid:9) Although some aspects of video can be
`(cid:67)(cid:87)(cid:86)(cid:81)(cid:79)(cid:67)(cid:86)(cid:75)(cid:69)(cid:67)(cid:78)(cid:78)(cid:91)(cid:2) (cid:82)(cid:67)(cid:84)(cid:85)(cid:71)(cid:70)(cid:14)(cid:2) (cid:67)(cid:2) (cid:85)(cid:87)(cid:72)(cid:72)(cid:75)(cid:69)(cid:75)(cid:71)(cid:80)(cid:86)(cid:2) (cid:84)(cid:71)(cid:82)(cid:84)(cid:71)(cid:85)(cid:71)(cid:80)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2) (cid:84)(cid:71)(cid:83)(cid:87)(cid:75)(cid:84)(cid:71)(cid:85)(cid:2)
`automatically parsed, a sufficient representation requires
`(cid:86)(cid:74)(cid:67)(cid:86)(cid:2)(cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)(cid:68)(cid:71)(cid:2)(cid:67)(cid:80)(cid:80)(cid:81)(cid:86)(cid:67)(cid:86)(cid:71)(cid:70)(cid:16)(cid:2)(cid:2)(cid:57)(cid:71)(cid:2)(cid:70)(cid:75)(cid:85)(cid:69)(cid:87)(cid:85)(cid:85)(cid:2)(cid:86)(cid:74)(cid:71)(cid:2)(cid:70)(cid:71)(cid:85)(cid:75)(cid:73)(cid:80)(cid:2)(cid:81)(cid:72)(cid:2)(cid:67)(cid:2)(cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)
`that video be annotated. We discuss the design of a video
`(cid:84)(cid:71)(cid:82)(cid:84)(cid:71)(cid:85)(cid:71)(cid:80)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2) (cid:78)(cid:67)(cid:80)(cid:73)(cid:87)(cid:67)(cid:73)(cid:71)(cid:2) (cid:89)(cid:75)(cid:86)(cid:74)(cid:2) (cid:85)(cid:82)(cid:71)(cid:69)(cid:75)(cid:67)(cid:78)(cid:2) (cid:67)(cid:86)(cid:86)(cid:71)(cid:80)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2) (cid:86)(cid:81)(cid:2) (cid:86)(cid:74)(cid:71)(cid:2) (cid:75)(cid:85)(cid:85)(cid:87)(cid:71)(cid:2)
`representation language with special attention to the issue
`(cid:81)(cid:72)(cid:2)(cid:69)(cid:84)(cid:71)(cid:67)(cid:86)(cid:75)(cid:80)(cid:73)(cid:2)(cid:67)(cid:2)(cid:73)(cid:78)(cid:81)(cid:68)(cid:67)(cid:78)(cid:14)(cid:2)(cid:84)(cid:71)(cid:87)(cid:85)(cid:67)(cid:68)(cid:78)(cid:71)(cid:2)(cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)(cid:67)(cid:84)(cid:69)(cid:74)(cid:75)(cid:88)(cid:71)(cid:16)(cid:2)(cid:2)(cid:49)(cid:87)(cid:84)(cid:2)(cid:82)(cid:84)(cid:81)(cid:86)(cid:81)(cid:86)(cid:91)(cid:82)(cid:71)(cid:2)
`of creating a global, reusable video archive. Our prototype
`(cid:85)(cid:91)(cid:85)(cid:86)(cid:71)(cid:79)(cid:14)(cid:2) (cid:47)(cid:71)(cid:70)(cid:75)(cid:67)(cid:2) (cid:53)(cid:86)(cid:84)(cid:71)(cid:67)(cid:79)(cid:85)(cid:14)(cid:2) (cid:71)(cid:80)(cid:67)(cid:68)(cid:78)(cid:71)(cid:85)(cid:2) (cid:87)(cid:85)(cid:71)(cid:84)(cid:85)(cid:2) (cid:86)(cid:81)(cid:2) (cid:69)(cid:84)(cid:71)(cid:67)(cid:86)(cid:71)(cid:2) (cid:79)(cid:87)(cid:78)(cid:86)(cid:75)(cid:15)(cid:78)(cid:67)(cid:91)(cid:15)
`system, Media Streams, enables users to create multi-lay-
`(cid:71)(cid:84)(cid:71)(cid:70)(cid:14)(cid:2) (cid:75)(cid:69)(cid:81)(cid:80)(cid:75)(cid:69)(cid:2) (cid:67)(cid:80)(cid:80)(cid:81)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:85)(cid:2) (cid:81)(cid:72)(cid:2) (cid:85)(cid:86)(cid:84)(cid:71)(cid:67)(cid:79)(cid:85)(cid:2) (cid:81)(cid:72)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2) (cid:70)(cid:67)(cid:86)(cid:67)(cid:16)(cid:2) (cid:2) (cid:57)(cid:75)(cid:86)(cid:74)(cid:75)(cid:80)(cid:2)
`ered, iconic annotations of streams of video data. Within
`(cid:47)(cid:71)(cid:70)(cid:75)(cid:67)(cid:2)(cid:53)(cid:86)(cid:84)(cid:71)(cid:67)(cid:79)(cid:85)(cid:14)(cid:2)(cid:86)(cid:74)(cid:71)(cid:2)(cid:81)(cid:84)(cid:73)(cid:67)(cid:80)(cid:75)(cid:92)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2)(cid:67)(cid:80)(cid:70)(cid:2)(cid:69)(cid:67)(cid:86)(cid:71)(cid:73)(cid:81)(cid:84)(cid:75)(cid:71)(cid:85)(cid:2)(cid:81)(cid:72)(cid:2)(cid:86)(cid:74)(cid:71)(cid:2)(cid:43)(cid:69)(cid:81)(cid:80)(cid:2)
`Media Streams, the organization and categories of the Icon
`(cid:53)(cid:82)(cid:67)(cid:69)(cid:71)(cid:2) (cid:67)(cid:78)(cid:78)(cid:81)(cid:89)(cid:2) (cid:87)(cid:85)(cid:71)(cid:84)(cid:85)(cid:2) (cid:86)(cid:81)(cid:2) (cid:68)(cid:84)(cid:81)(cid:89)(cid:85)(cid:71)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:69)(cid:81)(cid:79)(cid:82)(cid:81)(cid:87)(cid:80)(cid:70)(cid:2) (cid:81)(cid:88)(cid:71)(cid:84)(cid:2) (cid:21)(cid:23)(cid:18)(cid:18)(cid:2)
`Space allow users to browse and compound over 3500
`(cid:75)(cid:69)(cid:81)(cid:80)(cid:75)(cid:69)(cid:2) (cid:82)(cid:84)(cid:75)(cid:79)(cid:75)(cid:86)(cid:75)(cid:88)(cid:71)(cid:85)(cid:2) (cid:68)(cid:91)(cid:2) (cid:79)(cid:71)(cid:67)(cid:80)(cid:85)(cid:2) (cid:81)(cid:72)(cid:2) (cid:67)(cid:2) (cid:69)(cid:67)(cid:85)(cid:69)(cid:67)(cid:70)(cid:75)(cid:80)(cid:73)(cid:2) (cid:74)(cid:75)(cid:71)(cid:84)(cid:67)(cid:84)(cid:69)(cid:74)(cid:75)(cid:69)(cid:67)(cid:78)(cid:2)
`iconic primitives by means of a cascading hierarchical
`(cid:85)(cid:86)(cid:84)(cid:87)(cid:69)(cid:86)(cid:87)(cid:84)(cid:71)(cid:2)(cid:86)(cid:74)(cid:67)(cid:86)(cid:2)(cid:85)(cid:87)(cid:82)(cid:82)(cid:81)(cid:84)(cid:86)(cid:85)(cid:2)(cid:69)(cid:81)(cid:79)(cid:82)(cid:81)(cid:87)(cid:80)(cid:70)(cid:75)(cid:80)(cid:73)(cid:2)(cid:75)(cid:69)(cid:81)(cid:80)(cid:85)(cid:2)(cid:67)(cid:69)(cid:84)(cid:81)(cid:85)(cid:85)(cid:2)(cid:68)(cid:84)(cid:67)(cid:80)(cid:69)(cid:74)(cid:71)(cid:85)(cid:2)
`structure that supports compounding icons across branches
`(cid:81)(cid:72)(cid:2) (cid:86)(cid:74)(cid:71)(cid:2) (cid:74)(cid:75)(cid:71)(cid:84)(cid:67)(cid:84)(cid:69)(cid:74)(cid:91)(cid:16)(cid:2) (cid:2) (cid:35)(cid:2) (cid:47)(cid:71)(cid:70)(cid:75)(cid:67)(cid:2) (cid:54)(cid:75)(cid:79)(cid:71)(cid:2) (cid:46)(cid:75)(cid:80)(cid:71)(cid:2) (cid:71)(cid:80)(cid:67)(cid:68)(cid:78)(cid:71)(cid:85)(cid:2) (cid:87)(cid:85)(cid:71)(cid:84)(cid:85)(cid:2) (cid:86)(cid:81)(cid:2)
`of the hierarchy. A Media Time Line enables users to
`(cid:88)(cid:75)(cid:85)(cid:87)(cid:67)(cid:78)(cid:75)(cid:92)(cid:71)(cid:14)(cid:2) (cid:68)(cid:84)(cid:81)(cid:89)(cid:85)(cid:71)(cid:14)(cid:2) (cid:67)(cid:80)(cid:80)(cid:81)(cid:86)(cid:67)(cid:86)(cid:71)(cid:14)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:84)(cid:71)(cid:86)(cid:84)(cid:75)(cid:71)(cid:88)(cid:71)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2) (cid:69)(cid:81)(cid:80)(cid:86)(cid:71)(cid:80)(cid:86)(cid:16)(cid:2)(cid:2)
`visualize, browse, annotate, and retrieve video content.
`(cid:54)(cid:74)(cid:71)(cid:2)(cid:69)(cid:74)(cid:67)(cid:78)(cid:78)(cid:71)(cid:80)(cid:73)(cid:71)(cid:85)(cid:2)(cid:81)(cid:72)(cid:2)(cid:69)(cid:84)(cid:71)(cid:67)(cid:86)(cid:75)(cid:80)(cid:73)(cid:2)(cid:67)(cid:2)(cid:84)(cid:71)(cid:82)(cid:84)(cid:71)(cid:85)(cid:71)(cid:80)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2)(cid:81)(cid:72)(cid:2)(cid:74)(cid:87)(cid:79)(cid:67)(cid:80)(cid:2)(cid:67)(cid:69)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2)
`The challenges of creating a representation of human action
`(cid:75)(cid:80)(cid:2)(cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)(cid:67)(cid:84)(cid:71)(cid:2)(cid:70)(cid:75)(cid:85)(cid:69)(cid:87)(cid:85)(cid:85)(cid:71)(cid:70)(cid:2)(cid:75)(cid:80)(cid:2)(cid:70)(cid:71)(cid:86)(cid:67)(cid:75)(cid:78)(cid:14)(cid:2)(cid:89)(cid:75)(cid:86)(cid:74)(cid:2)(cid:72)(cid:81)(cid:69)(cid:87)(cid:85)(cid:2)(cid:81)(cid:80)(cid:2)(cid:86)(cid:74)(cid:71)(cid:2)(cid:71)(cid:72)(cid:72)(cid:71)(cid:69)(cid:86)(cid:2)(cid:81)(cid:72)(cid:2)
`in video are discussed in detail, with focus on the effect of
`(cid:86)(cid:74)(cid:71)(cid:2) (cid:85)(cid:91)(cid:80)(cid:86)(cid:67)(cid:90)(cid:2) (cid:81)(cid:72)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2) (cid:85)(cid:71)(cid:83)(cid:87)(cid:71)(cid:80)(cid:69)(cid:71)(cid:85)(cid:2) (cid:81)(cid:80)(cid:2) (cid:86)(cid:74)(cid:71)(cid:2) (cid:85)(cid:71)(cid:79)(cid:67)(cid:80)(cid:86)(cid:75)(cid:69)(cid:85)(cid:2) (cid:81)(cid:72)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)
`the syntax of video sequences on the semantics of video
`(cid:85)(cid:74)(cid:81)(cid:86)(cid:85)(cid:16)(cid:2)(cid:2)
`shots.
`
`(cid:19)(cid:2) (cid:43)(cid:80)(cid:86)(cid:84)(cid:81)(cid:70)(cid:87)(cid:69)(cid:86)(cid:75)(cid:81)(cid:80)(cid:28)(cid:2) (cid:54)(cid:74)(cid:71)(cid:2) (cid:48)(cid:71)(cid:71)(cid:70)(cid:2)
`(cid:72)(cid:81)(cid:84)(cid:2) (cid:56)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)
`1 Introduction: The Need for Video
`(cid:52)(cid:71)(cid:82)(cid:84)(cid:71)(cid:85)(cid:71)(cid:80)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2)
`Representation
`(cid:57)(cid:75)(cid:86)(cid:74)(cid:81)(cid:87)(cid:86)(cid:2) (cid:69)(cid:81)(cid:80)(cid:86)(cid:71)(cid:80)(cid:86)(cid:2) (cid:84)(cid:71)(cid:82)(cid:84)(cid:71)(cid:85)(cid:71)(cid:80)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:14)(cid:2) (cid:86)(cid:74)(cid:71)(cid:2) (cid:70)(cid:71)(cid:88)(cid:71)(cid:78)(cid:81)(cid:82)(cid:79)(cid:71)(cid:80)(cid:86)(cid:2) (cid:81)(cid:72)(cid:2) (cid:78)(cid:67)(cid:84)(cid:73)(cid:71)(cid:15)
`Without content representation, the development of large-
`(cid:85)(cid:69)(cid:67)(cid:78)(cid:71)(cid:2) (cid:85)(cid:91)(cid:85)(cid:86)(cid:71)(cid:79)(cid:85)(cid:2) (cid:72)(cid:81)(cid:84)(cid:2) (cid:79)(cid:67)(cid:80)(cid:75)(cid:82)(cid:87)(cid:78)(cid:67)(cid:86)(cid:75)(cid:80)(cid:73)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2) (cid:89)(cid:75)(cid:78)(cid:78)(cid:2) (cid:80)(cid:81)(cid:86)(cid:2) (cid:74)(cid:67)(cid:82)(cid:82)(cid:71)(cid:80)(cid:16)(cid:2)(cid:2)
`scale systems for manipulating video will not happen.
`(cid:37)(cid:87)(cid:84)(cid:84)(cid:71)(cid:80)(cid:86)(cid:78)(cid:91)(cid:14)(cid:2) (cid:69)(cid:81)(cid:80)(cid:86)(cid:71)(cid:80)(cid:86)(cid:2) (cid:82)(cid:84)(cid:81)(cid:88)(cid:75)(cid:70)(cid:71)(cid:84)(cid:85)(cid:2) (cid:82)(cid:81)(cid:85)(cid:85)(cid:71)(cid:85)(cid:85)(cid:2) (cid:79)(cid:67)(cid:85)(cid:85)(cid:75)(cid:88)(cid:71)(cid:2) (cid:67)(cid:84)(cid:69)(cid:74)(cid:75)(cid:88)(cid:71)(cid:85)(cid:2) (cid:81)(cid:72)(cid:2)
`Currently, content providers possess massive archives of
`(cid:72)(cid:75)(cid:78)(cid:79)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2) (cid:72)(cid:81)(cid:84)(cid:2) (cid:89)(cid:74)(cid:75)(cid:69)(cid:74)(cid:2) (cid:86)(cid:74)(cid:71)(cid:91)(cid:2) (cid:78)(cid:67)(cid:69)(cid:77)(cid:2) (cid:85)(cid:87)(cid:72)(cid:72)(cid:75)(cid:69)(cid:75)(cid:71)(cid:80)(cid:86)(cid:2) (cid:86)(cid:81)(cid:81)(cid:78)(cid:85)(cid:2) (cid:72)(cid:81)(cid:84)(cid:2)
`film and video for which they lack sufficient tools for
`(cid:85)(cid:71)(cid:67)(cid:84)(cid:69)(cid:74)(cid:2)(cid:67)(cid:80)(cid:70)(cid:2)(cid:84)(cid:71)(cid:86)(cid:84)(cid:75)(cid:71)(cid:88)(cid:67)(cid:78)(cid:16)(cid:2)(cid:2)(cid:40)(cid:81)(cid:84)(cid:2)(cid:86)(cid:74)(cid:71)(cid:2)(cid:86)(cid:91)(cid:82)(cid:71)(cid:85)(cid:2)(cid:81)(cid:72)(cid:2)(cid:67)(cid:82)(cid:82)(cid:78)(cid:75)(cid:69)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:85)(cid:2)(cid:86)(cid:74)(cid:67)(cid:86)(cid:2)(cid:89)(cid:75)(cid:78)(cid:78)(cid:2)
`search and retrieval. For the types of applications that will
`(cid:68)(cid:71)(cid:2)(cid:70)(cid:71)(cid:88)(cid:71)(cid:78)(cid:81)(cid:82)(cid:71)(cid:70)(cid:2)(cid:75)(cid:80)(cid:2)(cid:86)(cid:74)(cid:71)(cid:2)(cid:80)(cid:71)(cid:67)(cid:84)(cid:2)(cid:72)(cid:87)(cid:86)(cid:87)(cid:84)(cid:71)(cid:2)(cid:10)(cid:75)(cid:80)(cid:86)(cid:71)(cid:84)(cid:67)(cid:69)(cid:86)(cid:75)(cid:88)(cid:71)(cid:2)(cid:86)(cid:71)(cid:78)(cid:71)(cid:88)(cid:75)(cid:85)(cid:75)(cid:81)(cid:80)(cid:14)(cid:2)(cid:82)(cid:71)(cid:84)(cid:15)
`be developed in the near future (interactive television, per-
`(cid:85)(cid:81)(cid:80)(cid:67)(cid:78)(cid:75)(cid:92)(cid:71)(cid:70)(cid:2)(cid:80)(cid:71)(cid:89)(cid:85)(cid:14)(cid:2)(cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)(cid:81)(cid:80)(cid:2)(cid:70)(cid:71)(cid:79)(cid:67)(cid:80)(cid:70)(cid:14)(cid:2)(cid:71)(cid:86)(cid:69)(cid:16)(cid:11)(cid:2)(cid:86)(cid:74)(cid:71)(cid:85)(cid:71)(cid:2)(cid:67)(cid:84)(cid:69)(cid:74)(cid:75)(cid:88)(cid:71)(cid:85)(cid:2)(cid:89)(cid:75)(cid:78)(cid:78)(cid:2)
`sonalized news, video on demand, etc.) these archives will
`(cid:84)(cid:71)(cid:79)(cid:67)(cid:75)(cid:80)(cid:2) (cid:67)(cid:2) (cid:78)(cid:67)(cid:84)(cid:73)(cid:71)(cid:78)(cid:91)(cid:2) (cid:87)(cid:80)(cid:86)(cid:67)(cid:82)(cid:82)(cid:71)(cid:70)(cid:2) (cid:84)(cid:71)(cid:85)(cid:81)(cid:87)(cid:84)(cid:69)(cid:71)(cid:14)(cid:2) (cid:87)(cid:80)(cid:78)(cid:71)(cid:85)(cid:85)(cid:2) (cid:89)(cid:71)(cid:2) (cid:67)(cid:84)(cid:71)(cid:2) (cid:67)(cid:68)(cid:78)(cid:71)(cid:2) (cid:86)(cid:81)(cid:2)
`remain a largely untapped resource, unless we are able to
`(cid:67)(cid:69)(cid:69)(cid:71)(cid:85)(cid:85)(cid:2)(cid:86)(cid:74)(cid:71)(cid:75)(cid:84)(cid:2)(cid:69)(cid:81)(cid:80)(cid:86)(cid:71)(cid:80)(cid:86)(cid:85)(cid:16)(cid:2)(cid:2)(cid:57)(cid:75)(cid:86)(cid:74)(cid:81)(cid:87)(cid:86)(cid:2)(cid:67)(cid:2)(cid:89)(cid:67)(cid:91)(cid:2)(cid:81)(cid:72)(cid:2)(cid:67)(cid:69)(cid:69)(cid:71)(cid:85)(cid:85)(cid:75)(cid:80)(cid:73)(cid:2)(cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)(cid:75)(cid:80)(cid:15)
`access their contents. Without a way of accessing video in-
`(cid:72)(cid:81)(cid:84)(cid:79)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2)(cid:75)(cid:80)(cid:2)(cid:86)(cid:71)(cid:84)(cid:79)(cid:85)(cid:2)(cid:81)(cid:72)(cid:2)(cid:75)(cid:86)(cid:85)(cid:2)(cid:69)(cid:81)(cid:80)(cid:86)(cid:71)(cid:80)(cid:86)(cid:14)(cid:2)(cid:67)(cid:2)(cid:74)(cid:87)(cid:80)(cid:70)(cid:84)(cid:71)(cid:70)(cid:2)(cid:74)(cid:81)(cid:87)(cid:84)(cid:85)(cid:2)(cid:81)(cid:72)(cid:2)(cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)
`formation in terms of its content, a hundred hours of video
`(cid:75)(cid:85)(cid:2)(cid:78)(cid:71)(cid:85)(cid:85)(cid:2)(cid:87)(cid:85)(cid:71)(cid:72)(cid:87)(cid:78)(cid:2)(cid:86)(cid:74)(cid:67)(cid:80)(cid:2)(cid:81)(cid:80)(cid:71)(cid:16)(cid:2)(cid:57)(cid:75)(cid:86)(cid:74)(cid:2)(cid:81)(cid:80)(cid:71)(cid:2)(cid:74)(cid:81)(cid:87)(cid:84)(cid:2)(cid:81)(cid:72)(cid:2)(cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:14)(cid:2)(cid:75)(cid:86)(cid:85)(cid:2)(cid:69)(cid:81)(cid:80)(cid:86)(cid:71)(cid:80)(cid:86)(cid:2)
`is less useful than one. With one hour of video, its content
`(cid:69)(cid:67)(cid:80)(cid:2)(cid:68)(cid:71)(cid:2)(cid:85)(cid:86)(cid:81)(cid:84)(cid:71)(cid:70)(cid:2)(cid:75)(cid:80)(cid:2)(cid:74)(cid:87)(cid:79)(cid:67)(cid:80)(cid:2)(cid:79)(cid:71)(cid:79)(cid:81)(cid:84)(cid:91)(cid:14)(cid:2)(cid:68)(cid:87)(cid:86)(cid:2)(cid:67)(cid:85)(cid:2)(cid:89)(cid:71)(cid:2)(cid:79)(cid:81)(cid:88)(cid:71)(cid:2)(cid:87)(cid:82)(cid:2)(cid:75)(cid:80)(cid:2)(cid:81)(cid:84)(cid:15)
`can be stored in human memory, but as we move up in or-
`(cid:70)(cid:71)(cid:84)(cid:85)(cid:2) (cid:81)(cid:72)(cid:2) (cid:79)(cid:67)(cid:73)(cid:80)(cid:75)(cid:86)(cid:87)(cid:70)(cid:71)(cid:14)(cid:2) (cid:89)(cid:71)(cid:2) (cid:80)(cid:71)(cid:71)(cid:70)(cid:2) (cid:86)(cid:81)(cid:2) (cid:72)(cid:75)(cid:80)(cid:70)(cid:2) (cid:89)(cid:67)(cid:91)(cid:85)(cid:2) (cid:81)(cid:72)(cid:2) (cid:69)(cid:84)(cid:71)(cid:67)(cid:86)(cid:75)(cid:80)(cid:73)(cid:2)
`ders of magnitude, we need to find ways of creating
`(cid:79)(cid:67)(cid:69)(cid:74)(cid:75)(cid:80)(cid:71)(cid:15)(cid:84)(cid:71)(cid:67)(cid:70)(cid:67)(cid:68)(cid:78)(cid:71)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:74)(cid:87)(cid:79)(cid:67)(cid:80)(cid:15)(cid:87)(cid:85)(cid:67)(cid:68)(cid:78)(cid:71)(cid:2) (cid:84)(cid:71)(cid:82)(cid:84)(cid:71)(cid:85)(cid:71)(cid:80)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:85)(cid:2) (cid:81)(cid:72)(cid:2)
`machine-readable and human-usable representations of
`(cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2)(cid:69)(cid:81)(cid:80)(cid:86)(cid:71)(cid:80)(cid:86)(cid:16)(cid:2)(cid:2)(cid:43)(cid:86)(cid:2)(cid:75)(cid:85)(cid:2)(cid:80)(cid:81)(cid:86)(cid:2)(cid:85)(cid:75)(cid:79)(cid:82)(cid:78)(cid:91)(cid:2)(cid:67)(cid:2)(cid:79)(cid:67)(cid:86)(cid:86)(cid:71)(cid:84)(cid:2)(cid:81)(cid:72)(cid:2)(cid:69)(cid:67)(cid:86)(cid:67)(cid:78)(cid:81)(cid:73)(cid:75)(cid:80)(cid:73)(cid:2)(cid:84)(cid:71)(cid:71)(cid:78)(cid:85)(cid:2)
`video content. It is not simply a matter of cataloging reels
`(cid:81)(cid:84)(cid:2) (cid:86)(cid:67)(cid:82)(cid:71)(cid:85)(cid:14)(cid:2) (cid:68)(cid:87)(cid:86)(cid:2) (cid:81)(cid:72)(cid:2) (cid:84)(cid:71)(cid:82)(cid:84)(cid:71)(cid:85)(cid:71)(cid:80)(cid:86)(cid:75)(cid:80)(cid:73)(cid:2) (cid:86)(cid:74)(cid:71)(cid:2) (cid:69)(cid:81)(cid:80)(cid:86)(cid:71)(cid:80)(cid:86)(cid:2) (cid:81)(cid:72)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2) (cid:85)(cid:81)(cid:2) (cid:67)(cid:85)(cid:2) (cid:86)(cid:81)(cid:2)
`or tapes, but of representing the content of video so as to
`(cid:72)(cid:67)(cid:69)(cid:75)(cid:78)(cid:75)(cid:86)(cid:67)(cid:86)(cid:71)(cid:2) (cid:86)(cid:74)(cid:71)(cid:2) (cid:84)(cid:71)(cid:86)(cid:84)(cid:75)(cid:71)(cid:88)(cid:67)(cid:78)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:84)(cid:71)(cid:82)(cid:87)(cid:84)(cid:82)(cid:81)(cid:85)(cid:75)(cid:80)(cid:73)(cid:2) (cid:81)(cid:72)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2) (cid:67)(cid:69)(cid:69)(cid:81)(cid:84)(cid:70)(cid:75)(cid:80)(cid:73)(cid:2)
`facilitate the retrieval and repurposing of video according
`(cid:86)(cid:81)(cid:2)(cid:86)(cid:74)(cid:71)(cid:85)(cid:71)(cid:2)(cid:84)(cid:71)(cid:82)(cid:84)(cid:71)(cid:85)(cid:71)(cid:80)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:85)(cid:16)(cid:2)(cid:2)
`to these representations.
`(cid:41)(cid:75)(cid:88)(cid:71)(cid:80)(cid:2)(cid:86)(cid:74)(cid:71)(cid:2)(cid:69)(cid:87)(cid:84)(cid:84)(cid:71)(cid:80)(cid:86)(cid:2)(cid:85)(cid:86)(cid:67)(cid:86)(cid:71)(cid:2)(cid:81)(cid:72)(cid:2)(cid:86)(cid:74)(cid:71)(cid:2)(cid:67)(cid:84)(cid:86)(cid:2)(cid:75)(cid:80)(cid:2)(cid:79)(cid:67)(cid:69)(cid:74)(cid:75)(cid:80)(cid:71)(cid:2)(cid:88)(cid:75)(cid:85)(cid:75)(cid:81)(cid:80)(cid:2)(cid:67)(cid:80)(cid:70)(cid:2)(cid:85)(cid:75)(cid:73)(cid:15)
`Given the current state of the art in machine vision and sig-
`(cid:80)(cid:67)(cid:78)(cid:2) (cid:82)(cid:84)(cid:81)(cid:69)(cid:71)(cid:85)(cid:85)(cid:75)(cid:80)(cid:73)(cid:14)(cid:2) (cid:89)(cid:71)(cid:2) (cid:69)(cid:67)(cid:80)(cid:80)(cid:81)(cid:86)(cid:2) (cid:80)(cid:81)(cid:89)(cid:2) (cid:10)(cid:67)(cid:80)(cid:70)(cid:2) (cid:82)(cid:84)(cid:81)(cid:68)(cid:67)(cid:68)(cid:78)(cid:91)(cid:2) (cid:89)(cid:75)(cid:78)(cid:78)(cid:2) (cid:80)(cid:81)(cid:86)(cid:2) (cid:68)(cid:71)(cid:2)
`nal processing, we cannot now (and probably will not be
`(cid:67)(cid:68)(cid:78)(cid:71)(cid:2) (cid:86)(cid:81)(cid:2) (cid:72)(cid:81)(cid:84)(cid:2) (cid:67)(cid:2) (cid:78)(cid:81)(cid:80)(cid:73)(cid:2) (cid:86)(cid:75)(cid:79)(cid:71)(cid:11)(cid:2) (cid:74)(cid:67)(cid:88)(cid:71)(cid:2) (cid:79)(cid:67)(cid:69)(cid:74)(cid:75)(cid:80)(cid:71)(cid:85)(cid:2) (cid:82)(cid:67)(cid:84)(cid:85)(cid:71)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2)
`able to for a long time) have machines parse and
`(cid:87)(cid:80)(cid:70)(cid:71)(cid:84)(cid:85)(cid:86)(cid:67)(cid:80)(cid:70)(cid:2) (cid:86)(cid:74)(cid:71)(cid:2) (cid:69)(cid:81)(cid:80)(cid:86)(cid:71)(cid:80)(cid:86)(cid:2) (cid:81)(cid:72)(cid:2) (cid:70)(cid:75)(cid:73)(cid:75)(cid:86)(cid:67)(cid:78)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2) (cid:67)(cid:84)(cid:69)(cid:74)(cid:75)(cid:88)(cid:71)(cid:85)(cid:2) (cid:72)(cid:81)(cid:84)(cid:2) (cid:87)(cid:85)(cid:16)(cid:2)(cid:2)
`understand the content of digital video archives for us.
`
`(cid:19)(cid:2)
`1
`
`(cid:55)(cid:80)(cid:78)(cid:75)(cid:77)(cid:71)(cid:2) (cid:86)(cid:71)(cid:90)(cid:86)(cid:14)(cid:2) (cid:72)(cid:81)(cid:84)(cid:2) (cid:89)(cid:74)(cid:75)(cid:69)(cid:74)(cid:2) (cid:89)(cid:71)(cid:2) (cid:74)(cid:67)(cid:88)(cid:71)(cid:2) (cid:70)(cid:71)(cid:88)(cid:71)(cid:78)(cid:81)(cid:82)(cid:71)(cid:70)(cid:2) (cid:85)(cid:81)(cid:82)(cid:74)(cid:75)(cid:85)(cid:86)(cid:75)(cid:69)(cid:67)(cid:86)(cid:71)(cid:70)(cid:2)
`Unlike text, for which we have developed sophisticated
`(cid:82)(cid:67)(cid:84)(cid:85)(cid:75)(cid:80)(cid:73)(cid:2)(cid:86)(cid:71)(cid:69)(cid:74)(cid:80)(cid:81)(cid:78)(cid:81)(cid:73)(cid:75)(cid:71)(cid:85)(cid:14)(cid:2)(cid:67)(cid:80)(cid:70)(cid:2)(cid:89)(cid:74)(cid:75)(cid:69)(cid:74)(cid:2)(cid:75)(cid:85)(cid:2)(cid:67)(cid:69)(cid:69)(cid:71)(cid:85)(cid:85)(cid:75)(cid:68)(cid:78)(cid:71)(cid:2)(cid:86)(cid:81)(cid:2)(cid:82)(cid:84)(cid:81)(cid:69)(cid:71)(cid:85)(cid:85)(cid:75)(cid:80)(cid:73)(cid:2)
`parsing technologies, and which is accessible to processing
`(cid:75)(cid:80)(cid:2) (cid:88)(cid:67)(cid:84)(cid:75)(cid:81)(cid:87)(cid:85)(cid:2) (cid:85)(cid:86)(cid:84)(cid:87)(cid:69)(cid:86)(cid:87)(cid:84)(cid:71)(cid:70)(cid:2) (cid:72)(cid:81)(cid:84)(cid:79)(cid:85)(cid:2) (cid:10)(cid:35)(cid:53)(cid:37)(cid:43)(cid:43)(cid:14)(cid:2) (cid:52)(cid:54)(cid:40)(cid:14)(cid:2) (cid:50)(cid:81)(cid:85)(cid:86)(cid:53)(cid:69)(cid:84)(cid:75)(cid:82)(cid:86)(cid:14)(cid:2)
`in various structured forms (ASCII, RTF, PostScript,
`(cid:53)(cid:41)(cid:47)(cid:46)(cid:14)(cid:2) (cid:42)(cid:54)(cid:47)(cid:46)(cid:11)(cid:14)(cid:2) (cid:88)(cid:75)(cid:70)(cid:71)(cid:81)(cid:2) (cid:75)(cid:85)(cid:2) (cid:85)(cid:86)(cid:75)(cid:78)(cid:78)(cid:2) (cid:78)(cid:67)(cid:84)(cid:73)(cid:71)(cid:78)(cid:91)(cid:2) (cid:81)(cid:82)(cid:67)(cid:83)(cid:87)(cid:71)(cid:16)(cid:2) (cid:2) (cid:53)(cid:81)(cid:79)(cid:71)(cid:2)
`SGML, HTML), video is still largely opaque. Some
`(cid:74)(cid:71)(cid:67)(cid:70)(cid:89)(cid:67)(cid:91)(cid:2) (cid:74)(cid:67)(cid:85)(cid:2) (cid:68)(cid:71)(cid:71)(cid:80)(cid:2) (cid:79)(cid:67)(cid:70)(cid:71)(cid:2) (cid:75)(cid:80)(cid:2) (cid:86)(cid:74)(cid:75)(cid:85)(cid:2) (cid:67)(cid:84)(cid:71)(cid:67)(cid:16)(cid:2) (cid:2) (cid:35)(cid:78)(cid:73)(cid:81)(cid:84)(cid:75)(cid:86)(cid:74)(cid:79)(cid:85)(cid:2) (cid:72)(cid:81)(cid:84)(cid:2) (cid:86)(cid:74)(cid:71)(cid:2)
`headway has been made in this area. Algorithms for the
`(cid:67)(cid:87)(cid:86)(cid:81)(cid:79)(cid:67)(cid:86)(cid:75)(cid:69)(cid:2) (cid:67)(cid:80)(cid:80)(cid:81)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2) (cid:81)(cid:72)(cid:2) (cid:85)(cid:74)(cid:81)(cid:86)(cid:2) (cid:68)(cid:84)(cid:71)(cid:67)(cid:77)(cid:85)(cid:2) (cid:67)(cid:84)(cid:71)(cid:2) (cid:68)(cid:71)(cid:69)(cid:81)(cid:79)(cid:75)(cid:80)(cid:73)(cid:2) (cid:79)(cid:81)(cid:84)(cid:71)(cid:2)
`automatic annotation of shot breaks are becoming more
`(cid:84)(cid:81)(cid:68)(cid:87)(cid:85)(cid:86)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:71)(cid:80)(cid:74)(cid:67)(cid:80)(cid:69)(cid:71)(cid:70)(cid:2)(cid:86)(cid:81)(cid:2)(cid:74)(cid:67)(cid:80)(cid:70)(cid:78)(cid:71)(cid:2)(cid:85)(cid:82)(cid:71)(cid:69)(cid:75)(cid:67)(cid:78)(cid:2)(cid:69)(cid:67)(cid:85)(cid:71)(cid:85)(cid:2)(cid:85)(cid:87)(cid:69)(cid:74)(cid:2)(cid:67)(cid:85)(cid:2)(cid:72)(cid:67)(cid:70)(cid:71)(cid:85)(cid:2)
`robust and enhanced to handle special cases such as fades
`(cid:10)(cid:48)(cid:67)(cid:73)(cid:67)(cid:85)(cid:67)(cid:77)(cid:67)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:54)(cid:67)(cid:80)(cid:67)(cid:77)(cid:67)(cid:2) (cid:19)(cid:27)(cid:27)(cid:20)(cid:29)(cid:2) (cid:60)(cid:74)(cid:67)(cid:80)(cid:73)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:81)(cid:86)(cid:74)(cid:71)(cid:84)(cid:85)(cid:2) (cid:19)(cid:27)(cid:27)(cid:21)(cid:11)(cid:16)(cid:2)(cid:2)
`(Nagasaka and Tanaka 1992; Zhang and others 1993).
`(cid:57)(cid:81)(cid:84)(cid:77)(cid:2) (cid:81)(cid:80)(cid:2) (cid:69)(cid:67)(cid:79)(cid:71)(cid:84)(cid:67)(cid:2) (cid:79)(cid:81)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2) (cid:70)(cid:71)(cid:86)(cid:71)(cid:69)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2) (cid:75)(cid:85)(cid:2) (cid:69)(cid:78)(cid:81)(cid:85)(cid:71)(cid:2) (cid:86)(cid:81)(cid:2) (cid:71)(cid:80)(cid:67)(cid:68)(cid:78)(cid:75)(cid:80)(cid:73)(cid:2)
`Work on camera motion detection is close to enabling
`(cid:84)(cid:71)(cid:78)(cid:75)(cid:67)(cid:68)(cid:78)(cid:71)(cid:2) (cid:67)(cid:87)(cid:86)(cid:81)(cid:79)(cid:67)(cid:86)(cid:75)(cid:69)(cid:2) (cid:69)(cid:78)(cid:67)(cid:85)(cid:85)(cid:75)(cid:72)(cid:75)(cid:69)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2) (cid:81)(cid:72)(cid:2) (cid:82)(cid:67)(cid:80)(cid:85)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:92)(cid:81)(cid:81)(cid:79)(cid:85)(cid:2)
`reliable automatic classification of pans and zooms
`(cid:10)(cid:54)(cid:71)(cid:81)(cid:70)(cid:81)(cid:85)(cid:75)(cid:81)(cid:2) (cid:19)(cid:27)(cid:27)(cid:20)(cid:29)(cid:2) (cid:54)(cid:81)(cid:80)(cid:81)(cid:79)(cid:87)(cid:84)(cid:67)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:81)(cid:86)(cid:74)(cid:71)(cid:84)(cid:85)(cid:2) (cid:19)(cid:27)(cid:27)(cid:21)(cid:29)(cid:2) (cid:55)(cid:71)(cid:70)(cid:67)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2)
`(Teodosio 1992; Tonomura and others 1993; Ueda and
`(cid:81)(cid:86)(cid:74)(cid:71)(cid:84)(cid:85)(cid:2) (cid:19)(cid:27)(cid:27)(cid:21)(cid:11)(cid:16)(cid:2) (cid:2) (cid:50)(cid:84)(cid:81)(cid:68)(cid:78)(cid:71)(cid:79)(cid:85)(cid:2) (cid:89)(cid:74)(cid:75)(cid:69)(cid:74)(cid:2) (cid:67)(cid:84)(cid:71)(cid:2) (cid:85)(cid:86)(cid:75)(cid:78)(cid:78)(cid:2) (cid:83)(cid:87)(cid:75)(cid:86)(cid:71)(cid:2) (cid:70)(cid:75)(cid:72)(cid:72)(cid:75)(cid:69)(cid:87)(cid:78)(cid:86)(cid:2) (cid:68)(cid:87)(cid:86)(cid:2)
`others 1993). Problems which are still quite difficult but
`(cid:89)(cid:74)(cid:75)(cid:69)(cid:74)(cid:2) (cid:67)(cid:84)(cid:71)(cid:2) (cid:68)(cid:71)(cid:75)(cid:80)(cid:73)(cid:2) (cid:67)(cid:69)(cid:86)(cid:75)(cid:88)(cid:71)(cid:78)(cid:91)(cid:2) (cid:89)(cid:81)(cid:84)(cid:77)(cid:71)(cid:70)(cid:2) (cid:81)(cid:80)(cid:2) (cid:75)(cid:80)(cid:69)(cid:78)(cid:87)(cid:70)(cid:71)(cid:28)(cid:2) (cid:81)(cid:68)(cid:76)(cid:71)(cid:69)(cid:86)(cid:2)
`which are being actively worked on include: object
`(cid:84)(cid:71)(cid:69)(cid:81)(cid:73)(cid:80)(cid:75)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2) (cid:10)(cid:48)(cid:67)(cid:73)(cid:67)(cid:85)(cid:67)(cid:77)(cid:67)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:54)(cid:67)(cid:80)(cid:67)(cid:77)(cid:67)(cid:2) (cid:19)(cid:27)(cid:27)(cid:20)(cid:11)(cid:14)(cid:2) (cid:81)(cid:68)(cid:76)(cid:71)(cid:69)(cid:86)(cid:2) (cid:86)(cid:84)(cid:67)(cid:69)(cid:77)(cid:75)(cid:80)(cid:73)(cid:2)
`recognition (Nagasaka and Tanaka 1992), object tracking
`(cid:10)(cid:55)(cid:71)(cid:70)(cid:67)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:81)(cid:86)(cid:74)(cid:71)(cid:84)(cid:85)(cid:2) (cid:19)(cid:27)(cid:27)(cid:19)(cid:11)(cid:14)(cid:2) (cid:67)(cid:80)(cid:70)(cid:2) (cid:79)(cid:81)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2) (cid:85)(cid:71)(cid:73)(cid:79)(cid:71)(cid:80)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2) (cid:10)(cid:49)(cid:86)(cid:85)(cid:87)(cid:76)(cid:75)(cid:2)
`(Ueda and others 1991), and motion segmentation (Otsuji
`(cid:67)(cid:80)(cid:70)(cid:2)(cid:81)(cid:86)(cid:74)(cid:71)(cid:84)(cid:85)(cid:2)(cid:19)(cid:27)(cid:27)(cid:19)(cid:29)(cid:2)(cid:60)(cid:67)(cid:68)(cid:75)(cid:74)(cid:2)(cid:67)(cid:80)(cid:70)(cid:2)(cid:81)(cid:86)(cid:74)(cid:71)(cid:84)(cid:85)(cid:2)(cid:19)(cid:27)(cid:27)(cid:21)(cid:11)(cid:16)(cid:2)(cid:2)(cid:52)(cid:71)(cid:85)(cid:71)(cid:67)(cid:84)(cid:69)(cid:74)(cid:2)(cid:75)(cid:85)(cid:2)(cid:67)(cid:78)(cid:85)(cid:81)(cid:2)
`and others 1991; Zabih and others 1993). Research is also
`(cid:68)(cid:71)(cid:75)(cid:80)(cid:73)(cid:2)(cid:69)(cid:81)(cid:80)(cid:70)(cid:87)(cid:69)(cid:86)(cid:71)(cid:70)(cid:2)(cid:75)(cid:80)(cid:2)(cid:67)(cid:87)(cid:86)(cid:81)(cid:79)(cid:67)(cid:86)(cid:75)(cid:69)(cid:2)(cid:85)(cid:71)(cid:73)(cid:79)(cid:71)(cid:80)(cid:86)(cid:67)(cid:86)(cid:75)(cid:81)(cid:80)(cid:2)(cid:67)(cid:80)(cid:70)(cid:2)(cid:86)(cid:67)(cid:73)(cid:73)(cid:75)(cid:80)(cid:73)(cid:2)(cid:81)(cid:72)(cid:2)
`being conducted in automatic segmentation and tagging of
`(cid:67)(cid:87)(cid:70)(cid:75)(cid:81)(cid:2)(cid:70)(cid:67)(cid:86)(cid:67)(cid:2)(cid:68)(cid:91)(cid:2)(cid:79)(cid:71)(cid:67)(cid:80)(cid:85)(cid:2)(cid:81)(cid:72)(cid:2)(cid:82)(cid:67)(cid:84)(cid:85)(cid:75)(cid:80)(cid:73)(cid:2)(cid:86)(cid:74)(cid:71)(cid:2)(cid:67)(cid:87)(cid:70)(cid:75)(cid:81)(cid:2)(cid:86)(cid:84)(cid:67)(cid:69)(cid:77)(cid:2)(cid:72)(cid:81)(cid:84)(cid:2)(cid:82)(cid:67)(cid:87)(cid:85)(cid:71)(cid:85)(cid:2)
`audio data by means of parsing the audio track for pauses
`(cid:6