![](https://blogimg.goo.ne.jp/thumbnail/47/34/507778819fcc14963fa3e55143926c5a_s.jpg)
マルチモーダルAIという。Multimodal Artificial Intelligence
AI用語によると、マルチモーダルAIとシングルモーダルAIとがある。
multimodal AI 複数のモダリティーから学習することはマルチモーダル学習 Multimodal Learning
異なるモダリティの情報、データ種別を組み合わせるというのがメリットになるらしい。
>テキスト情報を元に画像を編集・生成したり、人が話している映像と音声からテキストに変換したり、センサ情報を用いて環境の状態を推定すること
>テキスト、音声、画像、動画、センサ情報など、2つ以上の異なるモダリティ(データの種類)から情報を収集し、それらを統合して処理する人工知能(AI)システム
https://www.softbank.jp/biz/solutions/generative-ai/ai-glossary/multimodal-ai/
> マルチモーダルAIの代表例としては、例えば大規模言語モデル(LLM)に画像の入力を追加してマルチモーダルLLMへと進化したOpenAIのGPT-4などが挙げられる。このような、特に自然言語とコンピュータビジョンのモダリティーを取り扱うマルチモーダルAIが2021年頃から盛り上がってきており、次々と革新が生まれるホットな分野となっている。
https://atmarkit.itmedia.co.jp/ait/articles/2207/04/news016.html
マルチモーダルAIとは?身近な事例やビジネスでの活用事例を ...
ai-market.jp
https://ai-market.jp › AI技術
2024/01/16 — マルチモーダルAIは、テキストや画像、音声、動画など複数の種類のデータを一度に処理できるAIの技術です。AIの研究が急速に進められ、多くの業界で ...
マルチモーダルAIとは? · マルチモーダルAIの歴史 · マルチモーダルAIの活用事例7選
マルチモーダルAIとは?身近な事例で解説します!
NTT Data
https://www.nttdata.com › trends › data-insight
2021/11/01 — AIを人間の脳に例えると「視覚のみ」を使って迷惑行為などを検出していることに相当するのですが、この「映像のみ(視覚のみ)」という制約によって、一般 ...
https://www.youtube.com/watch?v=1XzBd410ZBI
986回 中国全人代から見る今の中国状況
回視聴 2024/03/13 高橋洋一 チャンネル
![](https://blogimg.goo.ne.jp/thumbnail/6d/46/8d49be90766310b35880585f96f140a9_s.jpg)