using hadoop for video streaming

Michaelpassion · **註冊時間:** 2013-12-20, 19:48 **文章:** 3

jazz大大，之前看到你和一位同学讨论的云视频点播平台，http://forum.hadoop.tw/viewtopic.php?f=7&t=35412。我不是很明白最后他用你的方法，是做成了视频转码还是视频点播。
另外，我最近在做一个hadoop for video streaming 的作业,思路很不明确,希望你可以指导一下

jazz · **註冊時間:** 2009-11-09, 19:52 **文章:** 2897

Michaelpassion 寫:

jazz大大，之前看到你和一位同学讨论的云视频点播平台，http://forum.hadoop.tw/viewtopic.php?f=7&t=35412。我不是很明白最后他用你的方法，是做成了视频转码还是视频点播。
另外，我最近在做一个hadoop for video streaming 的作业,思路很不明确,希望你可以指导一下

我在台灣有看過兩個成品，一個是視訊轉碼，一個是視訊點播。
實作上牽涉很廣，所以可能要先聚焦一下目前卡住的位置

至少先描述一下您心中的目標(Use Case，站在使用者的情境)

- Jazz

jazz · **註冊時間:** 2009-11-09, 19:52 **文章:** 2897

Michaelpassion 寫:

是這樣，我想要實現基於hadoop的視頻點播系統，利用分佈式系統實現用戶在隨進進行進度拖放時，快速找到該時間節點的視頻所在的具體位置。可以實現減少緩衝時間的需求。目前只是搭建了hadoop偽分佈系統，對網上的一些基礎教程進行了練習，我是否應該將視頻先進過分割再上傳到hadoop節點，但是怎麼實現視頻點播呢？我的意思是用瀏覽器訪問嗎？用戶拖放的進度該怎麼和namenode做交互？抱歉，水平很低，還請多多指教

1. 這個情境水平不會很低啊，還蠻有挑戰性的。
2. 這一類問題「Realtime Video Transcoding」在一些論文還蠻常見的，只是現實生活中，多半還是靠 CDN 還有事先轉碼過的影片片段來解決。(也就是先將影片切割成幾個片段，先完成影片轉碼，然後根據快轉的位置去找到合適的影片片段，進行快轉、緩衝跟串流播放)
3. Hadoop 無法處理 Realtime 問題，因為涉及排程(Scheduling)。所以如果對即時的需求很高，可能要靠 HBase Co-processor 的方式來觸發 Transcoding (影片轉碼)。(只是這樣做，時間差還是很大的。要快就一定得借助前處理。)
4. 影片進度拖放進度，得看是 Flash Player 還是 HTML5 Video Player，兩者很可能必須透過 AJAX 註冊事件，透過 PHP or JSP 去呼叫背後的 Java 程式。
5. 如果純粹只想用 Hadoop 的 HDFS 檔案系統，那也只有用到 WebHDFS 了。

- Jazz

Michaelpassion · **註冊時間:** 2013-12-20, 19:48 **文章:** 3

jazz 寫:

Michaelpassion 寫:

是這樣，我想要實現基於hadoop的視頻點播系統，利用分佈式系統實現用戶在隨進進行進度拖放時，快速找到該時間節點的視頻所在的具體位置。可以實現減少緩衝時間的需求。目前只是搭建了hadoop偽分佈系統，對網上的一些基礎教程進行了練習，我是否應該將視頻先進過分割再上傳到hadoop節點，但是怎麼實現視頻點播呢？我的意思是用瀏覽器訪問嗎？用戶拖放的進度該怎麼和namenode做交互？抱歉，水平很低，還請多多指教

1. 這個情境水平不會很低啊，還蠻有挑戰性的。
2. 這一類問題「Realtime Video Transcoding」在一些論文還蠻常見的，只是現實生活中，多半還是靠 CDN 還有事先轉碼過的影片片段來解決。(也就是先將影片切割成幾個片段，先完成影片轉碼，然後根據快轉的位置去找到合適的影片片段，進行快轉、緩衝跟串流播放)
3. Hadoop 無法處理 Realtime 問題，因為涉及排程(Scheduling)。所以如果對即時的需求很高，可能要靠 HBase Co-processor 的方式來觸發 Transcoding (影片轉碼)。(只是這樣做，時間差還是很大的。要快就一定得借助前處理。)
4. 影片進度拖放進度，得看是 Flash Player 還是 HTML5 Video Player，兩者很可能必須透過 AJAX 註冊事件，透過 PHP or JSP 去呼叫背後的 Java 程式。
5. 如果純粹只想用 Hadoop 的 HDFS 檔案系統，那也只有用到 WebHDFS 了。

- Jazz

这个是学习一门课程的作业,最后使用FUSE将HDFS上的文件挂载到本地硬盘上,通过搭建Apache服务器,使用网络直接访问了.只是网页上不能显示内容,是否和FUSE挂载到本地的硬盘的权限有关呢?

jazz · **註冊時間:** 2009-11-09, 19:52 **文章:** 2897

Michaelpassion 寫:

這個是學習一門課程的作業,最後使用FUSE將HDFS上的文件掛載到本地硬盤上,通過搭建Apache服務器,使用網絡直接訪問了.只是網頁上不能顯示內容,是否和FUSE掛載到本地的硬盤的權限有關呢?

不能顯示內容有很多可能性耶~
如果出現 Forbin 的話，是權限問題。
如果 Apache 的執行身份是 www-data 那就必須把 FUSE 掛載的 HDFS 路徑，開權限給 www-data。

- Jazz

Taiwan Hadoop Forum

using hadoop for video streaming

誰在線上