站長(zhǎng)之家(ChinaZ.com) 3月25日 消息:在2024全球開(kāi)發(fā)者先鋒大會(huì)上,魔搭社區(qū)推出了 “ModelScope-Sora 開(kāi)源計(jì)劃”,旨在通過(guò)開(kāi)源力量促進(jìn)中國(guó)類 Sora 模型的探索與創(chuàng)新。
該計(jì)劃提供一站式工具鏈,包括數(shù)據(jù)處理工具、多模態(tài)數(shù)據(jù)集、類 Sora 基礎(chǔ)模型、訓(xùn)練推理工具等。
魔搭發(fā)布了多模態(tài)數(shù)據(jù)處理系統(tǒng) Data-Juicer,內(nèi)含100多種高效算子,可大幅提升視頻數(shù)據(jù)處理效率和質(zhì)量。Data-Juicer 支持文本、圖片、音頻、視頻處理,開(kāi)發(fā)者可自由組合算子,如剪輯視頻、增強(qiáng)分辨率等。
此外,魔搭還推出基礎(chǔ)類 Sora 模型 lite-Sora,并將舉辦 “ModelScope-Sora 挑戰(zhàn)賽” 鼓勵(lì)開(kāi)發(fā)者參與類 Sora 模型開(kāi)發(fā)。
未來(lái),魔搭計(jì)劃構(gòu)建開(kāi)放的中文高質(zhì)量多模態(tài)數(shù)據(jù)集,助力中國(guó)多模態(tài)大模型的發(fā)展。
Data-Juicer頁(yè)面:https://github.com/modelscope/data-juicer
lite-Sora頁(yè)面:https://github.com/modelscope/lite-sora
(舉報(bào))