マルチモーダルＡＩという。Multimodal Artificial Intelligence
AＩ用語によると、マルチモーダルAＩとシングルモーダルAＩとがある。
multimodal AI 複数のモダリティーから学習することはマルチモーダル学習 Multimodal Learning
異なるモダリティの情報、データ種別を組み合わせるというのがメリットになるらしい。
＞テキスト情報を元に画像を編集・生成したり、人が話している映像と音声からテキストに変換したり、センサ情報を用いて環境の状態を推定すること
＞テキスト、音声、画像、動画、センサ情報など、2つ以上の異なるモダリティ（データの種類）から情報を収集し、それらを統合して処理する人工知能（AI）システム
https://www.softbank.jp/biz/solutions/generative-ai/ai-glossary/multimodal-ai/
＞ マルチモーダルAIの代表例としては、例えば大規模言語モデル（LLM）に画像の入力を追加してマルチモーダルLLMへと進化したOpenAIのGPT-4などが挙げられる。このような、特に自然言語とコンピュータビジョンのモダリティーを取り扱うマルチモーダルAIが2021年頃から盛り上がってきており、次々と革新が生まれるホットな分野となっている。
https://atmarkit.itmedia.co.jp/ait/articles/2207/04/news016.html
マルチモーダルAIとは？身近な事例やビジネスでの活用事例を ...
ai-market.jp
https://ai-market.jp › AI技術
2024/01/16 — マルチモーダルAIは、テキストや画像、音声、動画など複数の種類のデータを一度に処理できるAIの技術です。AIの研究が急速に進められ、多くの業界で ...
マルチモーダルAIとは？ · マルチモーダルAIの歴史 · マルチモーダルAIの活用事例7選
マルチモーダルAIとは？身近な事例で解説します！
NTT Data
https://www.nttdata.com › trends › data-insight
2021/11/01 — AIを人間の脳に例えると「視覚のみ」を使って迷惑行為などを検出していることに相当するのですが、この「映像のみ（視覚のみ）」という制約によって、一般 ...
https://www.youtube.com/watch?v=1XzBd410ZBI
986回 中国全人代から見る今の中国状況
回視聴 2024/03/13 高橋洋一 チャンネル
