生成AIラボ：AIdeaLab VideoJPをいじってみた…01 | I tried playing around with AIdeaLab VideoJP…01

無償で公開された…日本初の商用利用可能な日本語動画生成AI基盤モデル…「AIdeaLab VideoJP」を… https://huggingface.co/spaces/aidealab/AIdeaLab-VideoJP からいじってみた…。

I took a look at “AIdeaLab VideoJP” Japan’s first commercially available Japanese video generation AI platform model, which has been released for free at https://huggingface.co/spaces/aidealab/AIdeaLab-VideoJP.

Hugging Face からだと…固定のプロンプトからしか生成できないみたい…

From Hugging Face … it seems that it can only be generated from a fixed prompt…

ん…な出来栄え…

まだまだこれから…なんでしょうね！？

今後に期待します！！！

Such a…finished product…

There’s still a lot more to come… I wonder!?

I look forward to seeing more in the future!!!

モデルの概要

• 開発背景: AIdeaLab VideoJPは、経済産業省と国立研究開発法人新エネルギー・産業技術総合開発機構（NEDO）が実施する「GENIAC（Generative AI Accelerator Challenge）」プロジェクトの成果として開発されました。このプロジェクトは、国内の生成AI技術の開発力を強化することを目的としています
• 言語対応: このモデルは、日本語と英語の両方のテキストを直接入力できるため、クリエイターが使いやすい設計になっています。特に、日本語の自然な処理が可能であり、翻訳ツールを介さずに日本人の感覚に即した動画生成が実現されています

特徴

• 著作権とライセンスの配慮: AIdeaLab VideoJPは、学習に使用する動画に対して高い透明性を持っています。具体的には、以下の条件を満たす動画のみを使用しています
  • 改変が許可されているライセンス（例：CC-BY-4.0、CC-0）
  • 商用利用が可能であること
  • ライセンスの変更が許可されていること
• 高品質な動画生成: モデルは、入力されたテキストに基づいて高品質な動画を生成します。例えば、自然な日本語の文章をそのまま入力することで、視覚的に美しい映像を作成することができます
• 技術的な基盤: AIdeaLab VideoJPは、大規模言語モデル（LLM）を使用しており、これにより複雑な指示や長い説明文も自然な形で処理できます。具体的には、llm-jp-3-1.8bというモデルが使用されています

Model Overview

Development Background: AIdeaLab VideoJP was developed as a result of the “GENIAC (Generative AI Accelerator Challenge)” project implemented by the Ministry of Economy, Trade and Industry and the New Energy and Industrial Technology Development Organization (NEDO). This project aims to strengthen the development capabilities of generative AI technology in Japan.

Language Support: This model is designed to be easy for creators to use, as both Japanese and English text can be directly input. In particular, it is capable of natural processing of Japanese language, and realizes video generation that conforms to the sensibilities of Japanese people without the use of translation tools.

Features

Copyright and License Consideration: AIdeaLab VideoJP is highly transparent about the videos used for learning. Specifically, we only use videos that meet the following conditions:Licenses that allow modification (e.g. CC-BY-4.0, CC-0)Commercial use is possibleChanges to the license are permitted

High-quality video generation: The model generates high-quality videos based on the input text. For example, you can create visually beautiful videos by inputting natural Japanese sentences as they are.

Technical foundation: AIdeaLab VideoJP uses a large-scale language model (LLM), which allows complex instructions and long explanatory texts to be processed in a natural way. Specifically, the model used is llm-jp-3-1.8b.

利用方法

AIdeaLab VideoJPは、以下のURLから無料で利用可能です

• AIdeaLab VideoJP 利用ページ
• AIdeaLab VideoJP ダウンロードページ

How to use

AIdeaLab VideoJP is available for free from the following URL

・AIdeaLab VideoJP usage page
・AIdeaLab VideoJP download page