. Với các loại dữ liệu được mô tả như trên, ứng dụng trong Hình 1.1 có thé bao gồm một số dạng câu truy vấn trên các loại dữ liệu này ví dụ như truy vấn ảnh, truy vẫn âm thanh, tài liệu,
Truy vấn anh
Trong truy vấn ảnh, hai loại truy vấn thường dùng là truy vấn ảnh dựa
trên ảnh (một loại truy vấn dựa trên nội dung ảnh) hay dựa trên từ khóa (một loại truy vấn dựa trên siêu dữ liệu - metadata). Ví dụ xét trường hợp một anh
cảnh sát đang có trước mặt một bức ảnh. Anh ta muốn tìm định danh (Identity) của người trong ảnh. Trong trường hợp này, câu truy vấn có thể
được đặt ra là ô Tỡm tắt cả cỏc bức ảnh từ CSDL ảnh mà trong đú cỏ người
trong bức ảnh xuất hiện ằ. Đõy là loại truy vẫn dựa trờn ảnh. Hay trong một
ngữ cảnh khác, anh cảnh sát này muốn xem xét các bức ảnh về Lê Văn Tình.
Trong trường hợp này, cõu truy vấn cú thể được đặt ra là ô 7m đất cả cỏc
bức ảnh từ CSDL ảnh mà trong đú Lờ Văn Tỡnh xuất hiện ằ. Đõy là cõu truy vấn dựa trên từ khóa.
Với câu truy vấn thứ nhất, anh cảnh sát cho bite ảnh truy van (query
image) vào đầu vào của câu truy vấn. Anh ta muồn có ở đầu ra một danh sách có xếp hạng các bức ảnh “ương rự (similarity) với bức ảnh truy vấn. trợ
truy vấn này:
= Ching ta cần bi
- Ching ta sự tưởng tự nghĩa là gi?
in biét xép hang la gi?
~ _ Chúng ta cần năng lực hỗ trợ hiệu quả cho các thao tác này.
Với truy vấn thứ hai, anh cộnh sat cho m@t fir khộa (key word) ôLộ
Văn Tỡnh ằ vào đầu vào. Anh ta muốn cú ở đầu ra cỏc bức ảnh cú chứa
tượng ảnh mà thuộc tính tên của đối tượng đó là Lê Văn Tình. Đề hỗ trợ cho.
truy vấn này:
~_ Chúng ta cần biết kết hợp các thuộc tính khác nhau với các bức ảnh như thế nào.
-_ Chúng ta cần biết tạo chỉ mục và tìm lại các bức ảnh dựa trên các
thuộc tính đó như thể nào.
Các vấn đề nêu ra ở đây sẽ được trình bày trong chương CSDL ảnh,
Truy vấn audio.
Các câu truy vấn audio thường dùng thuộc một trong hai dạng sau đây:
Xét trường hợp một anh cảnh sát đang nghe một băng audio. Ví dụ băng đó chứa cuộc trò chuyện giữa À (người bị giám sáo và B (người nào đó gặp A). Cõu truy vấn cú thờ được đặt ra là ô Tim nhận dạng của B, biết rằng A chính là Lê Văn Tình hoặc một nhân vật nào đó mà anh cảnh sát có thể
nhận ra ằ.
Trong một trường hợp khác, anh cảnh sát muốn duyệt lại toàn bộ audio mà trong đó có Lê Văn Tình tham gia trong một khoảng thời gian nào đó. Câu truy vấn cú thể được đặt ra là ô Tim tat ca cỏc băng audio mà trong đú Lẻ Văn Tỡnh là một người cú tham gia ằ
Truy vấn văn bản
Trong một ứng đụng dạng này, các câu truy vấn văn bản cũng thường được sử dụng. Ví dụ anh cảnh sát đang lướt qua một bộ sưu tập tư liệu dạng văn bản. Trong đó bao gồm những bài báo cũ, những tập tin văn bản trước dây của Sở cảnh sát, những hò sơ về các vụ án giết người chưa giải quyết, các lời khai của nhõn chứng .... Cõu truy van co thờ được đặt ra là ô Tim tat ed tte liệu có đề cập đến các giao dịch tài chính của tập đoàn chất gây nghiện Cali với cụng ty ABC ằ.
Truy van video
Trong một số trường hợp, truy vấn video cũng rất cần thiết. Chăng hạn
như một anh cảnh sát đang xem xét một video trong đó một người bị tắn công nguy hiểm bởi một hung thủ. Tuy nhiên gương mặt của hung thủ bị che kín và các giải thuật xử lý ảnh trả về các thông tin nghèo nản, không phát hiện đưc
hung thủ. Anh cảnh sát nghĩ kẻ tấn công là một ai đó mà nạn nhân biết. Câu
truy vấn cú thể được đặt ra là ô 7bm rất cả cỏc đoạn video mà trong đú nạn nhõn bị tấn cụng xuất hiện ằ. Bằng cỏch xem xột kết quả của truy vẫn này, anh cảnh sát hy vọng tìm thấy hung thủ trong số những người trước đây có tiếp xúc với nạn nhân có thể là hung thủ.
Truy van không đồng nhất đơn giản (Simple Heterogeneous Query) Chúng ta có thể nhận thấy rằng tất cả các câu truy vấn đã được trình bày ở trên chỉ liên quan đến một kiểu dữ liệu đa phương tiện. Ví dụ, mỗi truy.
vấn chỉ truy xuất dữ liệu ảnh hoặc dữ liệu âm thanh hoặc dữ liệu video, mà
không truy xuất đến sự tích hợp của các kiểu dữ liệu đa phương tiện. Mặc dù chúng được gọi là truy van đơn giản nhưng các truy vấn này cũng có vân đẻ của nó.
'Vớ dụ: ô Tỡn tắt cả những người bị kết ỏn tự vỡ đó tham gia giốt người ở:
Bắc Mỹ và gần đõy cụng ty ABC đó chuyển tiền vào tài khoản của họ ằ.
Trả lời cho truy vấn này là một vấn đề phức tạp,
á cả những người bị kết án tù vì những tội khác nhau có thể đòi hỏi phải truy cập nhiều cơ sở dữ liệu đa dạng, dù chỉ là các cơ sở dữ liệu quan hệ cỗ điễn. Chúng thuộc về các sở cảnh sát và các tòa án khác nhau.
-_ Công ty ABC có thể có tài khoản trong hàng trăm ngân hàng trên khắp thể giới, mỗi cái sử dụng các format và các hệ cơ sở dữ liệu khác nhau.
Truy vấn đa phương tiện không đồng nhất (Heterogeneous
Multimedia Query)
Các truy vấn đa phương tiện kết hợp và sử dụng dữ liệu từ các nguồn
tải nguyờn đa phương tiện khỏc nhau. Vớ dụ, cho cõu truy vẫn ô 7ỡ những người đã chụp hình chung với Lê Văn Tình, bị kết án từ vì đã tham gia vụ án giết người ở Bắc Mỹ và gõn đõy đó nhận tiờn chuyờn khoản từ cụng ty ABC ằ.
Câu truy vấn này yêu cầu:
~_ Tìm tất cả những người thỏa điều kiện trong truy vấn không đồng.
nhất đơn giản như trên, và
~_ Truy xuất một cơ sở dữ liệu ảnh thẻ căn cước nhân dân chứa tên và ảnh của nhiều người khác nhau,
~ _ Truy xuất một cơ sở dữ liệu ảnh tĩnh,
~__ Truy xuất một cơ sở dữ liệu video để thấy hay không một cuộc gap
mặt giữa kẻ bị tình nghỉ và Lê Văn Tình được ghi lại trên video.
~_ Truy xuất các giải thuật xử lý ảnh để xác định ai xuất hiện trong.
video và ảnh tĩnh đó.
Ngoài ra, chúng ta có thể kể ra một vài ví dụ về truy vấn đa phương tiện không đồng nhất trong một vài lĩnh vực như giáo dục, báo chí, giải trí,
~__ Về giáo dục: Một sinh viên scan một bức tranh động vật và muốn từ
đó truy tìm tất cả các thông tỉn bao gồm hình ảnh, âm thanh, văn bản mô tả về từng loài động vật.
~ _ Về báo chí: Một phóng viên viết bài báo về một người. Anh ta muốn
truy tìm bức ảnh và các thông tin tổng hợp của người đó đã xuất
hiện trên báo chí và. truyền hình 20 năm vẻ trước.
~_ Về giải trí: Một người muốn truy tìm trên một cơ sở dữ liệu video
rất lớn một đoạn băng tương tự với những cái mà anh ta đã xem.
~ _ Về đăng ký nhãn hiệu: Một người muốn đăng ký một nhãn hiệu mới nên muốn kiểm tra xem đã có cái nào giống như vậy chưa. Muốn vậy anh ta cần một cơ sở dữ liệu nhãn hiệu đẻ thực hiện việc so sánh.
15 CÁC VẤN ĐỀ NGHIÊN CỨU VỀ ĐA PHƯƠNG TIỆN
Việc gia tăng ngày cảng nhanh các nguồn dữ liệu đa phương tiện đã và đang trở thành thách thức cho các nhà nghiên cứu. Các nghiên cứu liên quan đến dữ liệu đa phương tiện thường tập trung trên các vấn đề về truy vấn dữ đa phương tiện, nội dung, và trích xuất dữ liệu da phương tiện, vẫn đề lưu trữ cũng như trình bày dữ liệu da phương tiện. Phần này giới thiệu các vấn đề nghiên cứu liên quan đến truy vấn và nội dung dữ liệu đa phương tiện.