Một số phương pháp đồng bộ video audio trong file video

II- Một số phương pháp đồng bộ video-audio trong file video 1.. Đồng bộ theo dòng Audio tại điểm tham chiếu 2.. Đồng bộ thích nghi... ĐB theo dòng Audio tại điểm tham chiếu Con người cả

II- Một số phương pháp đồng bộ video-audio trong file

video

1 Đồng bộ theo dòng Audio tại điểm tham chiếu

2 Đồng bộ thích nghi

Mô hình chung quá trình truyền, nhận audio,video

1 ĐB theo dòng Audio tại điểm tham chiếu

 Con người cảm nhận âm thanh tốt hơn hình ảnh  chọn dòng audio làm dòng chủ (principle jet)

 Đồng bộ loại bỏ frame : tại điểm ĐB, nếu nhãn thời gian của gói tin video bị trễ so với gói tin audio  loại bỏ frame trễ

 Không thể so sánh 2 nhãn này trực tiếp

 giải pháp khôi phục đồng hồ nơi gửi tại nơi nhận dựa trên các nhãn thời gian  thực hiện tính toán điểm tham chiếu

ĐB theo dòng Audio tại điểm tham chiếu

 Dòng dữ liệu audio có vai trò làm chủ, theo nghiên cứu về cảm thụ độ lệch giữa video

và audio Có 3 vùng:

- Vùng đồng bộ : độ lệch từ -80 ms đến +80ms

- Vùng mất đồng bộ: độ lệch từ -160 ms đến 160 ms

- Vùng trung gian: độ lệch từ -160 ms đến -80 ms và từ 80 ms đến 160 ms

 Một số tham số: độ trễ rung ‘jitter’, độ lệch dòng ‘skew’

 Nguyên tắc: tại các điểm đồng bộ nếu kết quả tính độ lệch ‘skew’ vượt quá giới hạn thì xử lý loại bỏ một số frame của dòng video

Nguyên tắc đồng bộ theo dòng Audio

ĐB theo dòng Audio tại điểm tham chiếu

 Thuật toán đồng bộ

2 Đồng bộ thích nghi

• Nguyên tắc: Các khối dữ liệu(frame) đối tượng có độ trễ khác nhau được chuẩn hóa thời gian thích nghi khi trình diễn lại, sao cho các đối tượng có độ trễ như

nhau.

Click to edit Master text styles

Second level

Third level

Fourth level

Fifth level

Đồng bộ thích nghi

• Bi,w = ti,g

• Bi,d = Bi,w + Emaximum = ti,g + Emaximum

•

Đồng bộ thích nghi

- Sau quá trình khởi động, khi nhận được gói RTCP đầu tiên , đồng hồ thời gian là:

t0=Ts_NTP

- Độ lệch thời gian được tính: ∆tsi=ts_RTPi - Ts_ref RTP

- Cập nhật đồng hồ thời gian:

ti+1=ti+delta_tsi; với i=1,2, N

- Khi nhận được gói tin RTP thứ N, đồng hồ được tính:

tN=t1+S_delta_tsj

- Quá trình tiếp tục cho đến khi nhận được gói tin mới