(資料圖片僅供參考)
7月27日,新壹科技發布首款聚焦視頻的大模型“新壹視頻大模型”,以及AIGC視頻生成平臺“秒創視頻創作平臺”,首款基于商用的數字人平臺“新壹數字人平臺”,此外,還發布了首款明星數字人祝福視頻制作產品“秒祝”。
新壹科技表示,目前其AI生成能力已覆蓋文本、圖像、音視頻等內容模態,實現了從大模型到平臺服務再到產品服務落地的AIGC業務全鏈路打通。
新壹科技創始人、董事長韓坤表示,由于沒有從實際場景出發,導致大部分通用大模型的實用性并不強,難以真正重塑實際的生產。“我們需要建立一個連接AI技術能力和垂直場景需求的大模型,能夠提供釋放生產力的能力,并創造更多實際價值的垂直場景大模型。”
據介紹,新壹視頻大模型是以視頻生成為核心的多模態AIGC模型。基于深度學習海量視頻樣本,新壹視頻大模型擁有了從腳本生成、素材匹配、智能剪輯配音到數字人播報的AI全流程視頻生產能力。
據介紹,新壹視頻大模型具備多模態感知、實時學習、自迭代及多場景交叉推理的核心能力。能夠處理多模態的輸入信息,可以理解文字的含義,識別圖像的內容,感知音樂的情緒,基于對內容深度準確的理解,生成視頻。
新壹視頻大模型采用了自監督學習方案,會觀察和學習大量的視頻數據,通過分析視頻的結構、內容、風格等多個維度,自我理解和把握視頻制作的規則和邏輯。
同時,新壹科技還現場演示了秒創視頻創作平臺的操作全過程。秒創是基于新壹科技視頻大模型的智能AI內容生成平臺。通過秒創平臺,創作者可以把一篇文章甚至是一個想法制作為視頻,5分鐘即可從文案到視頻成品。為了達到這樣的效果,秒創除了提供圖片生成、視頻生成、聲音生成、數字人生成等AIGC功能外,還提供了一個千萬級的結構化視頻庫位用戶提供匹配。據悉,秒創試運營半年多以來,已經積累了200多萬的用戶,每天產出超過10萬分鐘視頻。
新壹科技還發布了數字人平臺。通過多模態合成AI技術,該平臺可以將真人錄制的視頻和音頻素材,生成2D寫實數字人。基于新壹視頻大模型, 24小時內可完成一個數字人的訓練。新壹數字人平臺也可以驅動各種風格的3D數字人形象。新壹科技預計今年中國將至少新增100萬個數字人。
秒祝通過對明星視頻進行訓練,將明星的形象和聲音還原出來,生成對應的明星數字人形象。最終呈現給客戶的是以明星數字人為主角的個性化定制祝福視頻。
韓坤表示,在過去將近20年的時間里,新壹科技都在深耕視頻行業,接下來,將推出更多的垂直場景服務平臺和產品,比如為政府政務、金融保險、適老養老、智能交互數字人以及游戲等垂直場景提供服務,目前已經有解決方案和產品正在落地。