內(nèi)容供應(yīng)裝置、內(nèi)容供應(yīng)方法、程序以及內(nèi)容供應(yīng)系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001 ] 本公開(kāi)涉及一種內(nèi)容供應(yīng)裝置、一種內(nèi)容供應(yīng)方法、一種程序以及一種內(nèi)容供應(yīng)系統(tǒng)，并且更具體而言，涉及一種內(nèi)容供應(yīng)裝置、一種內(nèi)容供應(yīng)方法、一種程序以及一種內(nèi)容供應(yīng)系統(tǒng)，在超文本發(fā)送協(xié)議(HTTP)通過(guò)互聯(lián)網(wǎng)單播發(fā)送內(nèi)容時(shí)，其能夠由作為替換路徑的實(shí)時(shí)發(fā)送協(xié)議(RTP)通過(guò)廣播網(wǎng)絡(luò)多播發(fā)送或廣播發(fā)送內(nèi)容。
【背景技術(shù)】
[0002]近年來(lái)，超過(guò)限度視頻(OTT-V)通過(guò)互聯(lián)網(wǎng)變成流服務(wù)的主流，并且作為其基本技術(shù)，眾所周知使用HTTP的通過(guò)HTTP的活動(dòng)圖像專(zhuān)家組-動(dòng)態(tài)自適應(yīng)流媒體(在后文中稱(chēng)為“DASH”)(MPEG-DASH)，其中，供應(yīng)側(cè)通過(guò)點(diǎn)對(duì)點(diǎn)的方式與接收側(cè)連接，與網(wǎng)站等的瀏覽相似(例如，參照非專(zhuān)利文獻(xiàn)I)。
[0003]在DASH內(nèi)，實(shí)現(xiàn)自適應(yīng)流媒體技術(shù)。換言之，內(nèi)容供應(yīng)側(cè)具有能夠供應(yīng)多個(gè)流的系統(tǒng)，所述多個(gè)流包括相同主體的內(nèi)容，但是具有不同的圖像質(zhì)量或視角尺寸，并且接收側(cè)被配置為根據(jù)互聯(lián)網(wǎng)的通信環(huán)境或接收側(cè)的能力或狀態(tài)，切換和觀看最佳流。
[0004]在DASH內(nèi)，作為使接收側(cè)能夠自適應(yīng)地切換流的信息，將稱(chēng)為媒體呈現(xiàn)描述(MPD)的圖元文件從供應(yīng)側(cè)中供應(yīng)給接收側(cè)。在MPD中描述表示分成大塊的流數(shù)據(jù)(媒體數(shù)據(jù)，例如，音頻/視頻/副標(biāo)題)的供應(yīng)源的服務(wù)器的地址(url信息)。
[0005]接收側(cè)可以基于url信息訪問(wèn)服務(wù)器，并且獲取和再現(xiàn)HTTP發(fā)送的流數(shù)據(jù)。
[0006]圖1示出了基于DASH通過(guò)流媒體方式傳送內(nèi)容的內(nèi)容供應(yīng)系統(tǒng)的配置的一個(gè)實(shí)例性。
[0007]內(nèi)容供應(yīng)系統(tǒng)20包括設(shè)置在供應(yīng)內(nèi)容的側(cè)邊上的內(nèi)容管理服務(wù)器21、DASH段流轉(zhuǎn)化器22以及DASH MPD服務(wù)器23、以及設(shè)置在接收和觀看內(nèi)容的側(cè)邊上的DASH客戶(hù)端30。雖然未顯示，但是假設(shè)具有多個(gè)DASH客戶(hù)端30。
[0008]內(nèi)容管理服務(wù)器21管理要供應(yīng)給接收側(cè)的內(nèi)容，生成具有與相同主體的內(nèi)容不同的比特率的多塊流數(shù)據(jù)，并且將所生成的流數(shù)據(jù)輸出給DASH段流轉(zhuǎn)化器22。
[0009]DASH段流轉(zhuǎn)化器22將內(nèi)容的流數(shù)據(jù)在時(shí)間上分成幾段，保持每個(gè)段，作為文件，并且通知DASH MPD服務(wù)器23文件的地址。進(jìn)一步，DASH段流轉(zhuǎn)化器22作為HTTP服務(wù)器通過(guò)互聯(lián)網(wǎng)11響應(yīng)于接收側(cè)的DASH客戶(hù)端30的請(qǐng)求，單播傳送分段的流數(shù)據(jù)的文件。
[0010]DASH MPD服務(wù)器23生成MPD，其中，例如，描述了用作分段的流數(shù)據(jù)的文件的供應(yīng)源的DASH段流轉(zhuǎn)化器22的地址。DASH MPD服務(wù)器23作為HTTP服務(wù)器通過(guò)互聯(lián)網(wǎng)11響應(yīng)于接收側(cè)的DASH客戶(hù)端30的請(qǐng)求，將MPD單播傳送給DASH客戶(hù)端30。
[0011]接收側(cè)的DASH客戶(hù)端30接收和再現(xiàn)內(nèi)容，并且基于從DASH MPD服務(wù)器23中獲取的MPD，訪問(wèn)用作HTTP服務(wù)器的DASH段流轉(zhuǎn)化器22，并且接收和再現(xiàn)分段的流數(shù)據(jù)的文件。
[0012]具有以下情況，高速緩存服務(wù)器安裝在互聯(lián)網(wǎng)11上，以高速緩存單播傳送的MPD、分段的流數(shù)據(jù)的文件等，并且進(jìn)行DASH段流轉(zhuǎn)化器22或DASH MPD服務(wù)器23的操作。
[0013]引用列表
[0014]非專(zhuān)利文獻(xiàn)
[0015]非專(zhuān)利文獻(xiàn)1:Mitsuhiro Hirabayashi/‘Achieving Uninterrupted VideoStreaming Using Existing Web Servers，，、NIKKEI ELECTRONICS、2012 年 3 月 19 日

【發(fā)明內(nèi)容】

[0016]技術(shù)問(wèn)題
[0017]如上所述，在DASH中，實(shí)現(xiàn)根據(jù)HTTP通過(guò)單播發(fā)送供應(yīng)內(nèi)容的自適應(yīng)流媒體技術(shù)。
[0018]例如，在多個(gè)DASH客戶(hù)端30可能同時(shí)獲取和再現(xiàn)的內(nèi)容(例如，實(shí)時(shí)體育廣播的內(nèi)容)通過(guò)DASH供應(yīng)給多個(gè)裝置時(shí)，由于使用HTTP，所以需要由內(nèi)容輸送網(wǎng)絡(luò)(CDN)支持。然而，雖然由CDN支持，但是由于成本限制，所以難以獲得與在現(xiàn)有廣播傳送中一樣高的可擴(kuò)展性。
[0019]順便提一下，為了將內(nèi)容同時(shí)供應(yīng)給多個(gè)接收側(cè)，具有使用通過(guò)電視廣播網(wǎng)絡(luò)或移動(dòng)網(wǎng)絡(luò)的多播承載或廣播承載的方法，并且在該方法中，通常使用RTP。
[0020]因此，在接收側(cè)可以接收再現(xiàn)多播發(fā)送的或廣播傳送的內(nèi)容時(shí)，接收側(cè)可以可取地在DASH中使用多播發(fā)送或廣播發(fā)送自適應(yīng)地選擇流，作為替換路徑。
[0021]然而，在DASH的現(xiàn)有說(shuō)明書(shū)中，僅僅考慮根據(jù)HTTP的內(nèi)容的流數(shù)據(jù)的單播傳送，并且不考慮使用多播承載或廣播承載。
[0022]因此，在DASH的MPD中，在對(duì)應(yīng)于段間隔的多播承載或廣播承載上，難以描述在根據(jù)HTTP單播發(fā)送的DASH段與根據(jù)RTP流動(dòng)的內(nèi)容間隔之間的對(duì)應(yīng)關(guān)系。
[0023]進(jìn)一步，目前，未規(guī)定可以?xún)?chǔ)存在RTP數(shù)據(jù)包內(nèi)的不改變、不破壞作為用作DASH的控制目標(biāo)的內(nèi)容流塊的片段MP4的箱體結(jié)構(gòu)的有效載荷格式。
[0024]因此，在DASH的現(xiàn)有標(biāo)準(zhǔn)中，難以在單播傳送與多播發(fā)送和廣播發(fā)送中的任一個(gè)之間實(shí)現(xiàn)內(nèi)容的無(wú)縫切換。
[0025]鑒于上述內(nèi)容，構(gòu)造本公開(kāi)，并且可取地在根據(jù)HTTP的單播發(fā)送與根據(jù)RTP的多播發(fā)送和廣播發(fā)送中的任一個(gè)之間實(shí)現(xiàn)內(nèi)容的無(wú)縫切換。
[0026]問(wèn)題的解決方案
[0027]根據(jù)本公開(kāi)的第一方面，提供了一種內(nèi)容供應(yīng)裝置，其根據(jù)MPEG-DASH供應(yīng)內(nèi)容的流數(shù)據(jù)，所述內(nèi)容供應(yīng)裝置包括:HTTP發(fā)送單元，被配置為將所述流數(shù)據(jù)轉(zhuǎn)換成以段為單位的文件，并且根據(jù)HTTP單播發(fā)送所產(chǎn)生的段文件；RTP發(fā)送單元，被配置為在RTP數(shù)據(jù)包內(nèi)無(wú)變化地儲(chǔ)存段文件，并且根據(jù)RTP通過(guò)多播和廣播中的至少一個(gè)發(fā)送RTP數(shù)據(jù)包；以及圖元文件生成單元，被配置為生成圖元文件并且將所述圖元文件供應(yīng)給接收側(cè)，在圖元文件中描述在根據(jù)HTTP單播發(fā)送的段文件與根據(jù)RTP，通過(guò)多播和廣播中的至少一個(gè)發(fā)送的段文件之間的時(shí)間對(duì)應(yīng)關(guān)系。
[0028]所述內(nèi)容的流數(shù)據(jù)可以是片段MP4。所述RTP發(fā)送單元可以在RTP數(shù)據(jù)包內(nèi)儲(chǔ)存所述段文件，同時(shí)保持所述片段MP4的箱體結(jié)構(gòu)，并且根據(jù)RTP，通過(guò)多播和廣播中的至少一個(gè)發(fā)送所述RTP數(shù)據(jù)包。
[0029]所述RTP發(fā)送單元可以在所述RTP數(shù)據(jù)包的RTP報(bào)頭的時(shí)間戳字段內(nèi)描述在發(fā)送所述RTP數(shù)據(jù)包時(shí)第一位的發(fā)送時(shí)間。
[0030]所述RTP發(fā)送單元可以在RTP數(shù)據(jù)包的所述RTP有效載荷內(nèi)描述表示RTP有效載荷的模式的信息以及表示段邊界的信息，并且在有效載荷數(shù)據(jù)內(nèi)設(shè)置NAL單元。
[0031]所述RTP發(fā)送單元可以在所述RTP數(shù)據(jù)包的RTP有效載荷內(nèi)設(shè)置在MPEG-DASH內(nèi)規(guī)定的初始化段的元數(shù)據(jù)以及媒體段的元數(shù)據(jù)，或者在所述RTP數(shù)據(jù)包的RTP有效載荷內(nèi)設(shè)置所述媒體段的元數(shù)據(jù)，或者在所述RTP數(shù)據(jù)包的RTP有效載荷內(nèi)不設(shè)置初始化段的元數(shù)據(jù)和所述媒體段的元數(shù)據(jù)。
[0032]根據(jù)本公開(kāi)的第一方面，提供了一種內(nèi)容供應(yīng)裝置的內(nèi)容供應(yīng)方法，所述內(nèi)容供應(yīng)裝置根據(jù)MPEG-DASH供應(yīng)內(nèi)容的流數(shù)據(jù)，所述內(nèi)容供應(yīng)方法包括:HTTP發(fā)送步驟，用于通過(guò)所述內(nèi)容供應(yīng)裝置，將所述流數(shù)據(jù)轉(zhuǎn)換成以段為單位的文件，并且根據(jù)HTTP單播發(fā)送所產(chǎn)生的段文件；RTP發(fā)送步驟，用于通過(guò)所述內(nèi)容供應(yīng)裝置，在RTP數(shù)據(jù)包內(nèi)無(wú)變化地儲(chǔ)存段文件，并且根據(jù)RTP，通過(guò)多播和廣播中的至少一個(gè)發(fā)送RTP數(shù)據(jù)包；以及圖元文件生成步驟，用于通過(guò)所述內(nèi)容供應(yīng)裝置，生成圖元文件并且將所述圖元文件供應(yīng)給接收側(cè)，在圖元文件中描述在根據(jù)HTTP單播發(fā)送的段文件與根據(jù)RTP通過(guò)多播和廣播中的至少一個(gè)發(fā)送的段文件之間的時(shí)間對(duì)應(yīng)關(guān)系。
[0033]根據(jù)本公開(kāi)的第一方面，提供了一種使計(jì)算機(jī)用作以下單元的程序，所述計(jì)算機(jī)根據(jù)MPEG-DASH供應(yīng)內(nèi)容的流數(shù)據(jù):HTTP發(fā)送單元，其被配置為將所述流數(shù)據(jù)轉(zhuǎn)換成以段為單位的文件，并且根據(jù)HTTP單播發(fā)送所產(chǎn)生的段文件；RTP發(fā)送單元，被配置為在RTP數(shù)據(jù)包內(nèi)無(wú)變化地儲(chǔ)存段文件，并且根據(jù)RTP通過(guò)多播和廣播中的至少一個(gè)發(fā)送RTP數(shù)據(jù)包；以及圖元文件生成單元，被配置為生成圖元文件并且將所述圖元文件供應(yīng)給接收側(cè)，在圖元文件中描述在根據(jù)HTTP單播發(fā)送的段文件與根據(jù)RTP通過(guò)多播和廣播中的至少一個(gè)發(fā)送的段文件之間的時(shí)間對(duì)應(yīng)關(guān)系。
[0034]在本公開(kāi)的第一方面，將流數(shù)據(jù)轉(zhuǎn)換成以段為單位的文件，并且根據(jù)HTTP單播發(fā)送所產(chǎn)生的段文件。在RTP數(shù)據(jù)包內(nèi)無(wú)變化地儲(chǔ)存段文件，并且根據(jù)RTP通過(guò)多播和廣播中的至少一個(gè)發(fā)送RTP數(shù)據(jù)包。生成圖元文件并且將所述圖元文件供應(yīng)給接收側(cè)，在圖元文件中描述在根據(jù)HTTP單播發(fā)送的段文件與根據(jù)RTP通過(guò)多播和廣播中的至少一個(gè)發(fā)送的段文件之間的時(shí)間對(duì)應(yīng)關(guān)系，。
[0035]根據(jù)本公開(kāi)的第二方面，提供了一種內(nèi)容供應(yīng)系統(tǒng)，包括:內(nèi)容供應(yīng)裝置，被配置為根據(jù)MPEG-DASH供應(yīng)內(nèi)容的流數(shù)據(jù)；以及客戶(hù)裝置，被配置為接收所述流數(shù)據(jù)。所述內(nèi)容供應(yīng)裝置包括=HTTP發(fā)送單元，被配置為將所述流數(shù)據(jù)轉(zhuǎn)換成以段為單位的文件，并且根據(jù)HTTP單播發(fā)送所產(chǎn)生的段文件；RTP發(fā)送單元，被配置為在RTP數(shù)據(jù)包內(nèi)無(wú)變化地儲(chǔ)存段文件，并且根據(jù)RTP通過(guò)多播和廣播中的至少一個(gè)發(fā)送RTP數(shù)據(jù)包；以及圖元文件生成單元，被配置為生成圖元文件并且將所述圖元文件供應(yīng)給接收側(cè)，其中，描述在根據(jù)HTTP單播發(fā)送的段文件與根據(jù)RTP通過(guò)多播和廣播中的至少一個(gè)發(fā)送的段文件之間的時(shí)間對(duì)應(yīng)關(guān)系。客戶(hù)裝置基于所獲取的圖元文件，在根據(jù)HTTP單播發(fā)送的段文件與根據(jù)RTP通過(guò)多播和廣播中的至少一個(gè)發(fā)送的段文件之間切換，并且接收和再現(xiàn)所述段文件。
[0036]發(fā)明的有利效應(yīng)
[0037]根據(jù)本公開(kāi)的第一和第二方面，能夠在根據(jù)HTTP的單播發(fā)送與根據(jù)RTP的多播發(fā)送和廣播發(fā)送中的任一個(gè)之間實(shí)現(xiàn)內(nèi)容的無(wú)縫切換。
【附圖說(shuō)明】
[0038]圖1是示出使用DASH的相關(guān)技術(shù)的內(nèi)容供應(yīng)系統(tǒng)的配置的一個(gè)實(shí)例的方框圖；
[0039]圖2是示出應(yīng)用本公開(kāi)的內(nèi)容供應(yīng)系統(tǒng)的一個(gè)示例性配置的方框圖；
[0040]圖3是用于描述內(nèi)容的時(shí)間限定的示圖；
[0041]圖4是示出MPD的配置的示圖；
[0042]圖5是示出在MPD中的周期之下的分層結(jié)構(gòu)的示圖；
[0043]圖6是示出MPD的配置設(shè)置在時(shí)間軸上的狀態(tài)的示圖；
[0044]圖7是示出在MPD的表示之下的詳細(xì)結(jié)構(gòu)的示圖；
[0045]圖8是示出MPD的實(shí)例的示圖；
[0046]圖9是示出變型MPD的實(shí)例的示圖；
[0047]圖10是示出ServiceLocat1n元素的XML模式的實(shí)例的示圖；
[0048]圖11是示出ServiceLocat1n元素的數(shù)據(jù)結(jié)構(gòu)的示圖；
[0049]圖12是示出用戶(hù)服務(wù)描述的實(shí)例的示圖；
[0050]圖13是示出協(xié)議的分層結(jié)構(gòu)的示圖；
[0051 ]圖14是示出RTP數(shù)據(jù)包的數(shù)據(jù)結(jié)構(gòu)的示圖；
[0052]圖15是在AVC片段MP4儲(chǔ)存在RTP數(shù)據(jù)包內(nèi)時(shí)的示圖；
[0053]圖16是在HEVC分段MP4儲(chǔ)存在RTP數(shù)據(jù)包內(nèi)時(shí)的示圖；
[0054]圖17是示出RTP有效載荷的格式的組合模式的實(shí)例的示圖；
[0055]圖18是用于描述內(nèi)容供應(yīng)系統(tǒng)的第一操作的流程圖；
[0056]圖19是用于描述內(nèi)容供應(yīng)系統(tǒng)的第二操作的流程圖；
[0057]圖20是示出計(jì)算機(jī)的一個(gè)示例性配置的方框圖。