——專訪未來(lái)電(diàn)視(shì)刁蔚玲女士和(hé)創新科徐永鋒先生(shēng)
當前,互聯網電(diàn)視(shì)在我國已成為(wèi)有(yǒu)線電(diàn)視(shì)、網絡視(shì)頻、IPTV之外的重要新型媒體(tǐ)之一,具有(yǒu)內(nèi)容資源巨量和(hé)交互方式個(gè)性的顯著特征,相關業務産生(shēng)的數(shù)據量極為(wèi)龐大(dà),對行(xíng)業企業的媒資管理(lǐ)平台帶來(lái)了嚴峻的挑戰。未來(lái)電(diàn)視(shì)有(yǒu)限公司是中國互聯網電(diàn)視(shì)的領軍企業,截至目前,已擁有(yǒu)超過5500萬的互聯網電(diàn)視(shì)用戶,150萬小(xiǎo)時(shí)的優質點播節目。公司對媒資存儲的管理(lǐ)需求在業界具有(yǒu)非常典型的代表性。創新科存儲技(jì)術(shù)有(yǒu)限公司(UIT)作(zuò)為(wèi)國內(nèi)互聯網電(diàn)視(shì)媒資存儲領域的領軍企業,率先在行(xíng)業內(nèi)成功研發了UFS海量雲存儲系統,并在“中國互聯網電(diàn)視(shì)”得(de)到成功應用。系統一期上(shàng)線運行(xíng)快兩年,二期擴容運行(xíng)兩個(gè)多(duō)月以來(lái),一直運行(xíng)穩定、安全可(kě)靠,表現出了優異的性能。本刊今日有(yǒu)幸對未來(lái)電(diàn)視(shì)有(yǒu)限公司 CTO刁蔚玲女士和(hé)UIT創新科 總工程師(shī)徐永鋒先生(shēng)進行(xíng)了專訪,聆聽(tīng)雲計(jì)算(suàn)和(hé)大(dà)數(shù)據時(shí)代下來(lái)自媒體(tǐ)和(hé)企業的心聲。
互聯網電(diàn)視(shì)媒資管理(lǐ)的需求
近年來(lái),互聯網電(diàn)視(shì)的發展産生(shēng)了龐大(dà)的數(shù)據量。千萬級的用戶規模、百萬級的用戶并發數(shù)量、數(shù)十PB級的數(shù)據量(1PB=1024TB=1024×1024GB=1024×1024×1024MB)、每年翻番的增長率,對媒資平台存儲系統的容量、帶寬、擴容能力提出了嚴苛的要求。傳統的基于控制(zhì)器(qì)+磁盤陣列架構的網絡連接式存儲(NAS)或者存儲網絡(SAN),控制(zhì)器(qì)成為(wèi)整個(gè)系統容量和(hé)性能的瓶頸,無法滿足PB級的存儲容量已經高(gāo)性能的數(shù)據存儲,也無法做(zuò)到在線無縫擴容。對于互聯網電(diàn)視(shì)的媒資管理(lǐ)系統來(lái)講,高(gāo)速發展的互聯網電(diàn)視(shì)在媒資存儲雲化方面的主要有(yǒu)形成了以下幾方面的需求。
1.視(shì)頻等非結構化數(shù)據增長迅速,需要海量的存儲空(kōng)間(jiān),可(kě)實現在線替換和(hé)大(dà)容量的擴容;
2.需要較高(gāo)的I/O響應速度,穩定、高(gāo)效的帶寬;
3.數(shù)據的價值大(dà),需要考慮容災備份和(hé)冗餘,要求系統高(gāo)安全、高(gāo)可(kě)靠;
4.并發用戶多(duō),需要數(shù)據易被共享。
為(wèi)了滿足這些(xiē)需求,刁蔚玲女士談到,未來(lái)電(diàn)視(shì)在前期對包括UIT的UFS海量雲存儲系統在內(nèi)的多(duō)個(gè)系統進行(xíng)了充分的論證和(hé)比較。之所以選擇這套系統,除了因為(wèi)這套系統能夠充分滿足未來(lái)電(diàn)視(shì)的實際雲化需求之外,還(hái)有(yǒu)的是,這套系統在提升生(shēng)産效率的同時(shí),上(shàng)述需求指标都得(de)到了一定程度的提升和(hé)改善。
UIT UFS海量雲存儲系統完美解決了海量媒資管理(lǐ)雲化的迫切需求
關于UIT UFS海量雲存儲系統,徐永鋒先生(shēng)談到:“做(zuò)為(wèi)一家(jiā)以‘自主創新、雲領未來(lái)’為(wèi)理(lǐ)念的高(gāo)新技(jì)術(shù)企業,UIT創新科近年來(lái)緊密圍繞用戶需求,利用雲計(jì)算(suàn)、大(dà)數(shù)據等先進技(jì)術(shù)開(kāi)發了衆多(duō)行(xíng)業領先的存儲解決方案,塑造了行(xíng)業先行(xíng)者的角色。UIT UFS海量雲存儲系統,是UIT創新科針對廣電(diàn)客戶的需求專門(mén)研制(zhì)的超大(dà)規模雲存儲系統。
首先,這套系統采用了非對稱的分布式、橫向擴展架構(Scale-out),可(kě)支持上(shàng)千個(gè)存儲節點,可(kě)實現在線、無縫的分級擴容,具有(yǒu)超高(gāo)的聚合帶寬,能夠非常好地滿足媒資系統在EB(1EB=1024PB)級存儲、擴容能力和(hé)帶寬的嚴苛要求。
在這種架構下,控制(zhì)路徑和(hé)數(shù)據路徑分離,數(shù)據存儲由客戶端直接與存儲節點集群交互完成,整個(gè)業務流程扁平化處理(lǐ),沒有(yǒu)性能瓶頸和(hé)訪問熱點,在線增删存儲節點即可(kě)做(zuò)到容量和(hé)性能的線性增長。
其次,UIT UFS海量雲存儲系統的擴展節點和(hé)存儲節點均采用了集群式部署,節點故障對業務透明(míng),非常可(kě)靠安全。一旦發生(shēng)故障,故障節點可(kě)自動由其他節點接管,對業務完全沒有(yǒu)影(yǐng)響。系統采取了雙副本數(shù)據保護方式,提供節點級的數(shù)據冗餘保護,硬盤或節點損壞,副本數(shù)據将自動重建,最大(dà)程度地保證了數(shù)據的安全性。此外,UIT UFS海量雲存儲系統還(hái)支持多(duō)級别的數(shù)據保護方式,可(kě)根據數(shù)據的重要性設置不同的保護級别,達到冗餘度和(hé)容量的最佳效率。UIT創新科研發的這款系統的可(kě)靠性均遠遠高(gāo)于傳統的存儲系統。
此外,UIT UFS海量雲存儲系統基于可(kě)移植操作(zuò)系統接口(POSIX),可(kě)提供全局統一的命名空(kōng)間(jiān),客戶端隻需挂載UFS集群,即可(kě)按授權共享共同的存儲空(kōng)間(jiān),無需部署任何文件系統或者共享軟件即可(kě)做(zuò)到資源共享,充分滿足媒資系統多(duō)用戶共享的需求。
總體(tǐ)來(lái)講,UIT創新科提供的基于UFS海量雲存儲系統的媒資管理(lǐ)解決方案,是采用非對稱式雲計(jì)算(suàn)架構,天然具有(yǒu)雲計(jì)算(suàn)彈性伸縮、按需擴容的特點,容量和(hé)性能均能随集群規模的擴展而線性提升,能夠非常好地滿足iCNTV現在和(hé)将來(lái)的業務發展需求。”
UIT UFS海量雲存儲系統在未來(lái)電(diàn)視(shì)的部署和(hé)應用情況
刁蔚玲女士談到,UIT UFS海量雲存儲管理(lǐ)系統一期主要包括了3個(gè)擴展節點和(hé)7個(gè)存儲節點,為(wèi)未來(lái)電(diàn)視(shì)提供了較大(dà)的集中存儲空(kōng)間(jiān)和(hé)聚合帶寬。據未來(lái)電(diàn)視(shì)估計(jì),到2015年,視(shì)頻源文件的容量還(hái)會(huì)翻番,還(hái)要繼續擴容多(duō)個(gè)存儲節點。
目前UIT UFS海量雲存儲管理(lǐ)系統已在未來(lái)電(diàn)視(shì)業務系統上(shàng)線使用兩個(gè)月,初步改變了未來(lái)電(diàn)視(shì)媒資孤島式存放的狀況,對現有(yǒu)的業務系統進行(xíng)了整合,使整個(gè)業務系統建立在單一IP網絡上(shàng)進行(xíng)統一管理(lǐ)和(hé)維護,大(dà)大(dà)降低(dī)了維護的複雜度,同時(shí)也提高(gāo)了業務的運行(xíng)效率。系統運行(xíng)表現非常穩定,在使用過程中得(de)到了業務部門(mén)和(hé)領導的認可(kě),很(hěn)好地滿足了未來(lái)電(diàn)視(shì)現有(yǒu)和(hé)未來(lái)的業務發展需求。
未來(lái)電(diàn)視(shì)對互聯網電(diàn)視(shì)發展的展望
在雲計(jì)算(suàn)和(hé)大(dà)數(shù)據技(jì)術(shù)對傳統行(xíng)業發展産生(shēng)深遠影(yǐng)響的背景下,未來(lái)電(diàn)視(shì)将如何更好的開(kāi)展互聯網電(diàn)視(shì)業務?刁蔚玲女士談到:與美國等發達國家(jiā)相比,我國的互聯網電(diàn)視(shì)發展還(hái)顯得(de)相對不夠完善,這主要體(tǐ)現在我們用戶的付費習慣、對知識産權的尊重、豐富的內(nèi)容源以及大(dà)的政策環境的改善,這些(xiē)都需要一個(gè)不斷演進的過程,包括我們對大(dà)數(shù)據技(jì)術(shù)的應用,都需要随着業務的發展進程,通(tōng)過對用戶需求的挖掘來(lái)逐步實現,最終達到用于指導決策分析、産生(shēng)經濟效益的目标。未來(lái)電(diàn)視(shì)非常願意與業界企業在雲計(jì)算(suàn)和(hé)大(dà)數(shù)據應用上(shàng)開(kāi)展合作(zuò),實現共同的成長進步。未來(lái)電(diàn)視(shì)采用新的媒資雲存儲架構,體(tǐ)現了與互聯網技(jì)術(shù)的擁抱和(hé)融合。
雲計(jì)算(suàn)和(hé)大(dà)數(shù)據對媒資管理(lǐ)系統技(jì)術(shù)演進産生(shēng)的影(yǐng)響
媒資管理(lǐ)系統集音(yīn)像資料的收集、整理(lǐ)、存儲、編目、檢索、交換和(hé)服務諸功能于一體(tǐ),是廣電(diàn)業務的核心系統。新興業務的發展、節目質量的提升,都使得(de)媒資管理(lǐ)系統存儲和(hé)處理(lǐ)的數(shù)據量成PB級增長。
基于雲計(jì)算(suàn)的共享數(shù)據中心将成為(wèi)集成廣電(diàn)各業務系統、實現各系統間(jiān)數(shù)據共享的媒資管理(lǐ)信息平台。雲計(jì)算(suàn)天然具有(yǒu)的彈性伸縮、按需使用、快速上(shàng)線等特性,将能很(hěn)好地滿足媒資管理(lǐ)應用系統多(duō)、數(shù)據模型複雜的應用場(chǎng)景,可(kě)以在存放和(hé)管理(lǐ)海量數(shù)據的同時(shí),結合大(dà)數(shù)據分析工具,有(yǒu)效地挖掘海量數(shù)據的潛在價值,為(wèi)廣電(diàn)行(xíng)業提供有(yǒu)效的決策支持數(shù)據。
同時(shí),基于分布式、橫向方式擴展的雲存儲系統将會(huì)取代傳統的存儲設備,将成為(wèi)媒資管理(lǐ)系統未來(lái)主要的存儲平台。隻要增加相應的存儲節點就可(kě)達到容量和(hé)性能線性增長的目的,能夠輕松滿足海量數(shù)據的存儲以及不斷增長的擴容需求。
UIT創新科未來(lái)媒資管理(lǐ)系統的發展計(jì)劃
不過,徐永鋒先生(shēng)談到:在未來(lái),數(shù)據規模的爆炸性增長将始終是媒資管理(lǐ)系統的一大(dà)挑戰。UIT創新科為(wèi)此推出了全新一代大(dà)規模分布式雲存儲系統——NS9000雲存儲系統。這套系統采用了元數(shù)據控制(zhì)路徑與數(shù)據路徑分離的非對稱分布式架構,支持橫向無縫擴展,在統一命名空(kōng)間(jiān)下提供上(shàng)百PB的超大(dà)容量及超高(gāo)聚合帶寬。這套系統可(kě)同時(shí)支持POSIX和(hé)NFS文件協議,可(kě)充分滿足視(shì)頻應用、媒資分析、文件歸檔等以文件處理(lǐ)為(wèi)主的應用存儲需求。
不僅是解決了海量存儲,還(hái)要考慮如何有(yǒu)效、經濟地管理(lǐ)這些(xiē)大(dà)數(shù)據,這是未來(lái)UIT創新科媒資管理(lǐ)系統進一步考慮的問題。今後,UIT創新科将着重在提高(gāo)存儲系統的效率和(hé)經濟性方面進一步完善,比如數(shù)據自動分級存儲,即根據媒資資源訪問頻次等因素将數(shù)據分成熱數(shù)據、溫數(shù)據、冷數(shù)據等,分别采用不同的存儲方式和(hé)存儲介質進行(xíng)自動的存儲和(hé)管理(lǐ),以降低(dī)客戶成本壓力,獲得(de)最優的性價比。
此外,UIT創新科還(hái)将依托雲計(jì)算(suàn)平台開(kāi)展大(dà)數(shù)據分析。目前,UIT創新科自主研發了新一代的雲計(jì)算(suàn)數(shù)據中心核心管理(lǐ)系統——UCP雲計(jì)算(suàn)平台。該平台構建在雲計(jì)算(suàn)系統資源池之上(shàng),內(nèi)置了豐富的資源管理(lǐ)與交付功能,将原來(lái)靜态分配的IT基礎設施抽象為(wèi)可(kě)管理(lǐ)、易于調度、按需分配的資源。可(kě)為(wèi)業務部署和(hé)管理(lǐ)提供基于雲計(jì)算(suàn)的底層支撐,還(hái)可(kě)為(wèi)用戶提供簡單、統一的管理(lǐ)平台,使用這個(gè)平台,将大(dà)大(dà)降低(dī)部署數(shù)據中心的複雜度,簡化數(shù)據中心管理(lǐ)。
在大(dà)數(shù)據的研發方面,UIT創新科希望将來(lái)能夠通(tōng)過雲平台把客戶的業務系統、媒資管理(lǐ)系統等整合起來(lái),為(wèi)客戶提供一攬子的解決方案。真正的大(dà)數(shù)據分析,不光體(tǐ)量要大(dà),還(hái)要速度快、時(shí)效性強、分析的結果有(yǒu)價值,能夠作(zuò)為(wèi)業務決策依據或者形成個(gè)性化的推送方案等,我相信UIT創新科的新技(jì)術(shù)在大(dà)數(shù)據上(shàng)會(huì)做(zuò)的很(hěn)好。我們可(kě)以預見的是,UIT創新科研發的産品有(yǒu)着廣泛的應用空(kōng)間(jiān),不僅可(kě)以服務于互聯網電(diàn)視(shì)內(nèi)容提供商,而且在全國各級各地的傳統媒資機構均有(yǒu)可(kě)觀的應用前景。未來(lái)幾年,UIT創新科将始終以客戶需求為(wèi)導向,自主安全可(kě)控為(wèi)契機,智慧城市應用為(wèi)主戰場(chǎng),在上(shàng)述産品和(hé)技(jì)術(shù)的基礎上(shàng),提供圍繞雲計(jì)算(suàn)、雲存儲和(hé)大(dà)數(shù)據分析的雲計(jì)算(suàn)統一管理(lǐ)平台方案或定制(zhì)的解決方案。
廣電(diàn)的發展要融合互聯網的創新思維
在專訪的過程中,小(xiǎo)編感覺到:面對新形勢,廣電(diàn)傳統業務的發展迫切需要一種創新性的、革命性的思維模式來(lái)推動,這是不可(kě)抗拒的,再用廣電(diàn)的思維去做(zuò)廣電(diàn)的業務是不可(kě)持續的。未來(lái)電(diàn)視(shì)和(hé)UIT創新科兩家(jiā)企業的文化都體(tǐ)現出了明(míng)顯的創新特征和(hé)互聯網基因,或許這正是當前許多(duō)傳統廣電(diàn)機構和(hé)企業所亟需的。正是由于兩家(jiā)企業對創新發展的執着追求而達成了這次合作(zuò),也成為(wèi)了雙方互相贊許的亮點,并為(wèi)業界做(zuò)出了榜樣。事情雖小(xiǎo),意義卻大(dà)。我們相信,互聯網的創新思維與廣電(diàn)業務的融合,必将産生(shēng)出更多(duō)絢爛多(duō)彩的風景。