Đề xuất đề tài thực tập 2019-2020 Phòng Thị giác máy tính

Các đề xuất đề tài Phân tích hình ảnh / video  Tương tác người – máy dựa trên hình ảnh...  Đề tài: Nhận dạng hoạt động người sử dụng thông tin khung xương... Định danh lại người không

International Research Institute MICA

Multimedia, Information, Communication & Applications

Members of Computer Vision Department

 NGUYEN Van Toi (former PhD student)

 DOAN Thi Huong Giang (former PhD student)

 PHAM Thi Thanh Thuy (former PhD student)

 LE Van Hung (former PhD student)

 7 PhD students

 NGUYEN Thi Thanh Nhan - plant identification from images of multiple organs

 PHAM Anh Tuan – abnormal events detection

 BUI Hai Phong – mathematical expression understanding

 PHAM Dinh Tan – human activity recognition

 NGUYEN Thuy Binh – person re-identification in cameras network

 NGUYEN Hong Quan (internship) – human activity recognition

 LE Trung Hieu – multimodal human activity recognition

 Objectives Allow the machine:

 “see” and “perceive ” what is present in the pictures and what is happening in the videos.

 Object detection/recognition in fix images

 Tracking moving objects in video.

 Recognition of activities in video

 “interact” with users

 Analysis of behavior of the user during

interaction with the machine

 Recognition of gestures, facial expressions

 Two main research axes:

 Interpretation of the content of images and videos

 Human-machine interaction based

on vision

 A focus on Vietnamese applications

Research topics & Projects

Hand posture& gesture

NafostedFWO project

2 CUI projects, Newtonfund project

2014

6

Industrial projects and technology transfer

VnMed: Mobile app for image-based

medicinal plant retrieval

Automatic evaluation of germination rate of rice seeds Dr.Vivi: Mobile app for medical test image analysis

Automatic monitoring the use of PPE

VnMed

Best paper at RCCIE 2018

Best presentation at ACMLC 2018 Best presentation at SoICT 2018

Best paper at MAPR 2018

2014

10

Cameras

Các đề xuất đề tài

 Phân tích hình ảnh / video

 Tương tác người – máy dựa trên hình ảnh

 Đề tài: Nhận dạng hoạt động người sử dụng thông

tin khung xương

Định danh lại người không giám sát

 Đề tài: Định danh lại

người không giám sát

 Tìm hiểu và đề xuất sử dụng các mạng học sâu trong bài toán biểu diễn người ở mức chuỗi cho bài toán định danh lại

 Cài đặt và thử nghiệm trên các cơ sở dữ liệu dùng chung

 Liên hệ:

Thi-Lan.Le@mica.edu.vn

 Đề tài: Tìm kiếm người dựa

trên cây truy vấn ngôn ngữ tiếng Việt

 Tìm hiểu về bài toán tìm kiếm người dựa trên cây mô tả ngôn ngữ tự nhiên tiếng Việt

 Tìm hiểu các mô hình mạng học

tự động mối liên hệ giữa ảnh và câu mô tả

 Đề xuất và cài đặt hệ thống tìm kiếm người dựa trên cây truy vấn ngôn ngữ tiếng Việt

 Liên hệ:

Thi-Lan.Le@mica.edu.vn

Phân tích công thức toán học trong tài liệu khoa học

 Đề tài: Xác định và

phân vùng công thức toán học trong tài liệu khoa học

 Tìm hiểu các kỹ thuật phân tích tài liệu (kỹ thuật tách dòng, tách từ, phân vùng tài liệu)

 Áp dụng và đề xuất các phương pháp xác định, phân vùng công thức toán học

 Liên hệ:

Thi-Lan.Le@mica.edu.vn

Xác định và phân vùng công thức toán học trong tài liệu khoa học

 Tìm hiểu các kỹ thuật nhận dạng ký tự toán học.

 Nghiên cứu, đề xuất các phương pháp nâng cao độ chính xác trong nhận dạng công thức

 Liên hệ: Thi-Lan.Le@mica.edu.vn

Nhận dạng ảnh công thức toán học in và biểu diễn dưới dạng Latex

Xây dựng ứng dụng hỗ trợ giảng dạy phân loại thực vật trên thiết bị di động

phân loại thực vật trên thiết bị di động

 Xây dựng một ứng dụng trên di động hỗ trợ trong giảng dạy về phân loại thực vật học và nâng cao hiểu biết về cây cối xung quanh với một số chức năng chính (1) chức năng học cho phép người dùng tìm hiểu về một cây nào đó; (2) chức năng kiểm tra cho phép người dùng tự kiểm tra kiến thức của mình qua các bài kiểm tra; (3) thách đấu bạn bè hoặc thách đấu với máy tính

 Liên hệ: Thi-Lan.Le@mica.edu.vn

Ứng dụng VnMed

 Liên hệ: Thi-Lan.Le@mica.edu.vn

Xây dựng ứng dụng tự động đánh giá tăng trưởng của cây dựa trên xử lý ảnh

trưởng của cây dựa trên xử lý ảnh

 Thiết kế hệ thống thu thập hình ảnh của cây cải thủy canh

 Thu thập dữ liệu hình ảnh của cây theo thời gian

 Xây dựng hệ thống tự động đánh giá tăng trưởng của cây dựa trên xử lý ảnh và học máy

 Liên hệ: Thi-Lan.Le@mica.edu.vn

 Sinh video nhân tạo phục vụ cho quảng cáo, thời trang, etc.

 Hướng giải quyết:

 Sử dụng VIDEO GAN (generative adversarial network)

Sinh tự động video hoạt động / cử chỉ của người

thanh-hai.tran@mica.edu.vn

Dự đoán BMI từ ảnh khuôn mặt

Sinh mô tả tự động cho video

 Phân loại khung cảnh

 Phát hiện đối tượng

 Phát hiện hoạt động

 Xây dựng end-to-end net

2014

24

Nhận dạng cử chỉ tay từ cảm biến mang

Phân lớp kết cấu động (dynamic texture)

Nhận dạng cử chỉ bàn tay đa góc nhìn

Gesture label

On/Off Back Next Increase Decrease

Nhận dạng cử chỉ tay từ cảm biến mang