Tài liệu Cơ sở dữ liệu video pdf

Vo GD \ Gépasser les frontiéres cranabiaft vì y | Cơ sở dữ liệu video Le ThiLan MICA International Research Center MICA Multimedia, Information, Communication & Applications U

Vo GD

\ Gépasser les frontiéres

cranabiaft vì

y |

Cơ sở dữ liệu video

Le ThiLan

MICA

International Research Center MICA

Multimedia, Information, Communication & Applications

UMI 2954

Hanoi University of Technology

1 Dai Co Viet - Hanoi - Vietnam

htttk5@gmail.com

Tổng quan

* Đọc thêm bài báo

Tìm kiếm video bài giảng Tim kiém video ban tin

Hé thong “name-it”

Các bài toán của cơ sở dữ liêu video

ann

| —> Content |

Access |!

¡ —— > Data Flow

: Table of Contents : : ae

-.~ “x.« pc”

|

Video Retrieval

Phân tích video có cau trúc

Video r~

Shot Boundary Detection

Scene

Scene Construction

Group

Shot Hii tl rth L—}-{Temporal Features)

Key |Frame Extraction

Key

Phân tích video không câu trúc

3 Ễ h | | E | | | Highlight Groups

Grouping

| | Highlight

Audio-Visual Markers Association A Highlight

IHIRHIIRH II Ị | | Audiovisual

|| tithe tt | Markers

Visual Audio

Key Audio-Visual Object Detection Marker Marker u

À

Audio Track

Tìm kiêm video

Tìm kiêm toàn bộ video

® Dựa trên thông tin text xung quanh

Ví dụ: Google/YouTube

Sunset - Nitin Sawhney

4 min - Nov 17, 2006 - ww#w#ww (39 ratings) Nitin Sawhney Sunset Very best video of Nitin Sawhney Sunset http://www youtube com/watch?v=nj6JixjErT|

@ VVatch video here - Related videos

Sunset at Cafe Del Mar 2004

B min - Oct 17, 21B - ww#w#ww (80 ratings)

Mar 2004 4 realy Cool Sunset at Cafe Del Mar Ibiza.| overlaid two songs on this video, the first

is Water in Motion by sonic http: /Awww youtube com/watch?v=vs1 yzMNxhGk

Watch video here - Related videos

The Kinks - VWaterloo Sunset

3 mnn - Jul 21, 21B - ww#w#ww (429 ratings)

Waterloo Sunset video of the kinks performing live version of waterloo sunset The Kinks Waterloo Sunset water loo music

http: /Awww youtube com/watch?v=fvDoDaC YrEY

@ VVatch video here - Related videos

= Tổng quan

* Doc them bai bao

= Tim kiém video bai giang

= Tìm kiêm video bản tin

= Hệ thông “name-it”

Tìm kiêm video — tìm kiêm bài trình

bay

Tìm 1 phần của bài học

Phương pháp chỉ số hóa

Lưu thông tin về tiếng và hình

Lưu nội dung của bài học (slides)

Trích chọn từ khóa của bài học Phân đoạn video dựa trên sự thay đổi slides Tạo chỉ số cho các từ khóa của các đoạn video

Phương pháp tìm kiếm

* Tìm kiếm theo từ khóa

StainedGlass rxfp a

==" Photo Collage Web Application cee

- Collages can be emailed and showcase on the StainedGlass cr personal Web server

+ Enhances online photo sharing experience

* Integrates easily with any existing Online Print Services + Interfaces to Flickr

Applet Player started

_pbox —ÑŠ

lề

Thu nhận ảnh về slides

Thu nhận từ khóa tw slide

* Nhận dạng ký tự

Đông bộ về thời gian của bài trình bày và thiết bị thu nhận

Tìm kiêm các đoạn của bài trình bày

Nomadic Radio Nomadic Radio Nomadic Radio

More effective Scalable audio More effective

Ví dụ: tìm kiêm bài trình bày

Tìm các bài trình

bày về cách tổ

StainedGlass Photo Collages 2-22-06 4:11 PH (2

Ị h : photos ' ‘photos '

F | StainedGlass Photo Collages 2- : : © 22-06 4:11 PM (Presentation:

2/22/2006) :

® FlickR,

Slides cua bai - 2

trinh bay

¢ Click vao dé xem

* Chuyên đến

slide tiêp theo

* Chuyển đến [5n ma Mini

hợp tiêp theo

—— Photo Collage Web Application

* Creates stained-glass like photo collage automatically

- Allows summarizing an event with one photo collage

- Collage can be rearranged and adjusted by the user

- Collages can be emailed and showcase on the StainedGlass cr personal Web server

+ Enhances online photo sharing experience

* Integrates easily with any existing Online Print Services

* Interfaces to Flickr

il 4 >> “4 aw

Applet Player started / \ Ll

Slides được đánh dâu Slides phủ hợp được ký băng các đường đen hiệu băng ô màu đỏ

= Tổng quan

* Doc them bai bao

= Tim kiém video bai giang

= Tim kiém video ban tin

= Hé thong “name-it”

Tìm kiêm video- Tìm kiếm ban tin

Tìm đoạn video với chủ đề quan tâm

TRECVID

¢ Tai tro boi NIST (National Institute of

Standards)

* Co so di liệu 60 giờ của các bản tin (ABC, NBC) trong năm 2004

Ví dụ về chủ đề

¢ “Tim cac tran hockey sao cho trong video do

có ít nhất một lưới duoc nhin thay

¢ Tim video c6 nha trang cua My

¢ Tim cac doan video cé Saddam Hussein

= Tổng quan

* Doc them bai bao

= Tìm kiêm video bài giảng

= Tìm kiêm video bản tin

= Hệ thông “name-it”

Khuôn mặt và ký tự

Ye ABob Franken®

L ` Washington LIVE

ids ABTS i -

A aa ee mee aad

¥ LÍ

eee

~ :

€>

= 45 > Fine Se Se :

>_>

oe

Nhận dạng ký tự từ video

Phát hiện vùng

có ký tự

Tiên xử lý

Video

|

Nhận dạng ký tự

Mã ASCH

Cải thiện nhận dạng ký tự dựa trên tra bảng

FREEMAN BLOCK LOS

Pearce SHERIFF SHER IFF

Source Video: Time-Based Minimum Image:

SHERMAN aie `

LOS ANGELES COUNTW SHERIFF

Text

[SHERMAN BLOC

Som LOS ANGELES COUNTY SHERIFF

ro

OCR:

Mở rộng của Name-lf

CNN national correspondent John Holliman 1s at Hartsfield International Airport in Atlanta Good morning, John But there was one situation here at Hartsfield where one airplane flying from Atlanta to Newark, New Jersey yesterday hada mechanical problem and it caused a backup that spread throughout the whole system because even though there were a

lot of planes flying to the New York area from the Atlanta area

yesterday,

Thong tin quan trong: V1 tri (Place), Thoi gian (! ime),

T6 chire/ngudi (Organization Person)

OOPSPv’ DLW MEE

Tổng kết

Tìm kiếm văn bản

*_ Tìm kiễm dựa trên nhan (FlickR, FaceBook) ;

¢ Tim kiém dwa trên thông tin xung quanh

(Google)

* Tìm kiễm dựa trên nội dung

A¿ 10/13/1998 ABCa 0:56 [14:51] 0.4 “

* Dựa vào nội dung (MuscleFish, Foote) eee ae

* Dựa vào từ khóa (Google/UJTube) :_—-_._

*_ Dựa vào các dữ liệu kết hợp cùng (ví dụ M

* Tìm theo nội dung (TrecVid) ——

MediaMagic

a oe