助企業(yè)撬動數(shù)據(jù)價值,青云存儲QingStor解決企業(yè)數(shù)據(jù)管理難題
“新應用層出不窮,隨之而來就是不斷產(chǎn)生新的數(shù)據(jù)形態(tài),數(shù)據(jù)分析的需求也在不斷變化。存儲作為數(shù)據(jù)管理的核心,其重要性也越來越明顯。另外,計算單位的密度越來越高,計算的敏捷性越來越強,所以算力的演變對存儲的變革也起到一個非常明顯的推動作用。”青云 科技 如此描述。
在場景和算力推動整個存儲形態(tài)向前變革的基礎上,如何讓數(shù)據(jù)更好地流動起來,這與存儲技術(shù)能力緊密相關。
在數(shù)據(jù)流動的完整鏈條里,從最初的采集、處理到歸檔、再利用、銷毀,都會涉及到存儲與大數(shù)據(jù)技術(shù)、存儲與?AI?計算技術(shù)的結(jié)合,這能讓數(shù)據(jù)更高效地被捕獲、被索引、被分析和被加工,從而實現(xiàn)數(shù)據(jù)層面的點石成金,這也是青云存儲這些年一直在努力研究的方向。
比如,QingStor U10000的一個重要特點就是多協(xié)議無損互通,從而實現(xiàn)數(shù)據(jù)的訪問和流通的高效。
U10000在技術(shù)層面提供了統(tǒng)一的索引架構(gòu),并且基于此提供多種層次的能力。它為應用帶來的好處很明顯,即:存儲和讀取數(shù)據(jù)中間不需要經(jīng)過格式轉(zhuǎn)化,從而避免了性能和語義的損失。
其次,U10000提供多協(xié)議存儲接口供企業(yè)選擇。U10000在文件、對象、HDFS等語義里,每種存儲形態(tài)里都提供了多種存儲接口,比如POSIX、SMB、NFS、FTP、HDFS、S3、SDK等多種接口的支持,滿足常見應用。另外,協(xié)議互通讓數(shù)據(jù)分析更高效。這在自動駕駛、基因測序等場景下比較常見。
U10000的另一大特點就是算力的無縫對接,它能讓數(shù)據(jù)“點石成金”。得益于多年的積累,U10000?具備豐富的數(shù)據(jù)處理的功能特性,能夠提供一系列完善的API、SDK,可以輕松地對接大數(shù)據(jù)平臺、數(shù)據(jù)處理的框架和服務,實現(xiàn)數(shù)據(jù)和算力的高效結(jié)合,最終讓數(shù)據(jù)實現(xiàn)點石成金。
以我們常見的圖片處理、音視頻轉(zhuǎn)碼、AI大數(shù)據(jù)分析、HPC超算平臺為例,在數(shù)據(jù)生命周期流轉(zhuǎn)中,經(jīng)常會用到的數(shù)據(jù)備份歸檔的技術(shù),QingStor U10000都有一整套完善的對接機制,能對接算力和計算生態(tài)。
青云科技產(chǎn)品技術(shù)解決方案總監(jiān)張忠華也談到:“U10000?是以業(yè)務場景為驅(qū)動,我們將文件、對象整合統(tǒng)一起來,其價值是比較明顯的,這大大提升了客戶體驗。”
拋開文件在基因測序這類對性能極致追求的場景,大多數(shù)文件還是應用在非結(jié)構(gòu)化場景中,這一點也得到了青云科技大部分客戶肯定性的反饋。
張忠華認為,對象和文件存儲各有特點,產(chǎn)品優(yōu)化即使很好,也會存在一些技術(shù)瓶頸。以文件存儲為例,目錄深度、小文件的性能,這是文件系統(tǒng)繞不開的話題,同樣對象存儲的接口適配也是繞不過去的問題。所以U10000的產(chǎn)品架構(gòu)可以很好地取兩者之間的優(yōu)勢,結(jié)合協(xié)議互通,用戶就可以很好地把數(shù)據(jù)做接駁,然后在文件和對象之間流轉(zhuǎn)。
目前U10000在很多領域得到了廣泛應用,比如,在醫(yī)療體檢、智能駕駛、智慧工廠的IoT場景和多元化的超算場景等等。