Vision(画像認識)
この記事は約7分で読めます
ざっくり言うと
生成AIでいうVision(ビジョン)とは、画像を受け取って、写っているもの、文字、図表などを説明したり質問に答えたりする能力のことです。
AIに目が付いた、と考えると分かりやすいです。ただし、見間違いや読み違いもあります。
ChatGPT・Claude・Geminiなどにも、画像入力に対応したモデルや画面があります。使える形式・上限・出力・プランは、製品やモデル、APIによってさまざまです。
手元の紙やスマホの画面を、わざわざ言葉で説明しなおさなくてよくなります。画像を見せるだけで会話が始められる、これがVisionの核心です。
イメージ
目のよいアシスタントが隣に座って、資料を一緒にのぞき込んでくれる感じです。これまでは、手元の資料の中身を電話口で読み上げるように説明するしかありませんでした。今は、その資料そのものを見せて「これどう思う?」と聞けます。
正確には
コンピュータービジョンという言葉は、画像や映像を扱うAI技術全体を指します。生成AIのサービスでVisionというときは、マルチモーダルモデルが画像を入力として扱う能力を指すことが多いです。
マルチモーダルとは、文字・画像・音声など複数の形式をまとめて扱えることをいいます(関連:マルチモーダル)。
主要3社のAPI公式ドキュメントに書かれた画像入力形式は、次のとおりです(2026年7月27日確認)。一般向けアプリで添付できる条件とは別なので、実際に使う画面の公式ヘルプもあわせて確認してください。
| API | 公式ガイド | 入力画像形式 |
|---|---|---|
| OpenAI API | Images and vision | PNG, JPEG, WEBP, 非アニメーションGIF |
| Claude API | Vision | JPEG, PNG, GIF, WEBP。アニメーションは処理せず、先頭フレームのみ |
| Gemini API | Image understanding | PNG, JPEG, WEBP, HEIC, HEIF |
使うときは、画像と指示文(プロンプト)を一緒に渡します。モデルはその画像を入力として処理し、返ってくるのはテキストが代表的です。ただし出力の形は、使うモデルや機能によって異なります。
Visionでできること
3社の公式ドキュメントを総合すると、代表的な用途は次のとおりです。すべてのモデルが同じ精度・機能を持つ、という意味ではありません。
- 画像の内容説明(写っているもの、その場の様子を説明する)
- 画像内の文字の読み取り(看板・書類・スクリーンショットの文字を抜き出す)
- 図表・グラフの読み解き(棒グラフ・表・チャートを要約する)
- 複数画像の比較(2枚の画像の違いを答える)
- 画像をきっかけにした分類・整理(レシートを項目ごとに仕分ける、など)
VisionとOCRは、目的が違います
画像に対応したモデルは、画像の中の文字を読むOCRのような作業もこなせます。ただし、専用のOCRと同じ仕組みで動くとは限らず、同じ精度も保証されません。
OCR
写っている文字を、そのまま書き写す道具です。手書きのホワイトボードを撮った写真なら、文字をそのまま書き起こしたいときに向いています。
Vision
写っているものが何かを見て、質問に答える能力です。同じ写真でも、「この図は結局なにを言っているの?」と聞きたいときはVisionの出番になります。
文字を1字も間違えずに写し取りたい場面では、原本と照らし合わせるか、専用OCRの結果と見比べてください。文字をそのまま写すならOCR、意味や文脈をたずねるならVisionです。
画像を読むことと、画像を作ることは別の仕事です
画像を読み取る「画像理解」と、新しい画像を作る「画像生成」は、別のタスクです。ただし、同じサービスやAPIが両方を備えている場合もありますし、画像を入力して編集後の画像を出力する場合もあります。OpenAIの現行ガイドでも、画像の解析と生成・編集は同じ画像関連の機能群として案内されています。
| 機能 | 入力 | 出力 |
|---|---|---|
| 画像理解 | 画像 + 指示 | 主に説明・回答・抽出結果 |
| 画像生成・編集 | テキスト、または画像 + 指示 | 画像 |
読む仕事と作る仕事は別物です。ただし製品によっては、一つの画面のなかで両方を使えます。
使う場面
個人事業主の活用例
どれも、必要な画像だけを選び、機密情報を伏せてから渡すのが安全な使い方です。
注意点
先に知っておきたいクセ
特にお金が絡む書類、たとえば請求書や確定申告の領収書は、出てきた結果をそのまま使わないでください。金額と日付だけでも目で見て確かめておくと、事故はかなり防げます。
確認のコツは、「AIに読ませる前」と「出てきたあと」を分けて見ることです。読ませる前に見るのは、画像が明るいか、ピントが合っているか、必要な範囲が切れていないかの3点です。出てきたあとは、数字・日付・固有名詞だけを現物と照らし合わせます。
画像の説明や整理は代表的な用途ですが、精度は画像・課題・モデルによって変わります。数字、固有名詞、影響の大きい判断は、最後に人が確認する前提で使ってください。
関連用語
- マルチモーダル — 文字・画像・音声など、複数の種類の情報をまとめて扱えるAIの性質です。
- OCR(文字認識) — 画像やPDFに写っている文字を、検索もコピペもできるテキストに変える技術です。
- テキストから画像生成(Text-to-Image) — ほしい絵の中身を文章で伝えると、AIがその条件に合う画像を作ってくれる技術です。
やってみよう
よくある質問
- Q. 生成AIでいうVision(画像認識)とは何ですか?
- A. 画像を受け取って、写っているもの、文字、図表などを説明したり、質問に答えたりする能力のことです。AIに目が付いた、と考えると分かりやすいです。
- Q. OCRとは何が違いますか?
- A. 目的が違います。文字をそのまま写し取りたいならOCR、写っているものの意味や文脈をたずねたいならVisionです。画像に対応したモデルも文字は読めますが、専用OCRと同じ精度が保証されるわけではありません。
- Q. 仕事ではどんなことに使えますか?
- A. 紙で持っている情報を、デジタルへ移す場面に向きます。機密情報を伏せた伝票から日付や金額を抜き出す、手書きメモを箇条書きにする、商品写真から説明文の案を作る、といった使い方です。
- Q. 読み取ってもらった金額や日付は、そのまま使えますか?
- A. そのまま使わないでください。小さい文字や画質の悪い写真は誤読しやすく、数字の正確さは保証されません。請求書や領収書は、金額と日付だけでも現物と照らし合わせてください。
公開: 更新: ✓ 公式情報と照合:
参考ソース
判断クイズ
領収書の写真をAIに読ませた結果を、どこまで信じてよいか決められますか?
3問です。答えるとその場で解説が出ます。全問終えたら、「回答を記録する」で学習の記録に残せます。
全問に答えると、回答を記録できます。
残るのは「答えたかどうか」だけで、正解数は保存されません。この端末の中だけに残り、別の端末には引き継がれません。
この教科書は無料で全文公開しています。仕事で使えるところまで進みたい方は、実習と資料がそろった生徒プランをどうぞ。
あわせて読みたい
- AI基礎 | 用語集約6分
マルチモーダル
マルチモーダルとは、AIが文字・画像・音声・動画など複数の種類の情報をまとめて扱える性質のことです。言葉の意味と、対応表を見るときのコツを短くまとめました。内容を見る - AI基礎 | AIってそもそも何?約9分
生成AI(GenAI)とは何か?
生成AIは、学習した例の特徴と渡した材料をもとに、文章・画像・音声・動画を作るAIです。分類や検索との違い、マルチモーダル、ChatGPTとClaudeの画像対応の差を、公式情報に沿って身近な例で整理しました。内容を見る - Grok | 便利な機能・小ワザ約9分
Grokに画像を読み込ませて中身を聞く
スマホの写真も、パソコンのスクリーンショットも、Grokに添付して「これ何?」と聞くだけで中身を説明してもらえます。文字やグラフの読み取りから、Xで流れてきた画像をWeb検索と突き合わせて確かめる使い方まで、初心者向けにやさしく解説します。内容を見る - Gemini | 便利な機能・小ワザ約9分
Geminiに画像を読み込ませて中身を聞く
スマホで撮った写真やPCのスクリーンショットをGeminiに渡すと、写っているものや書かれた文字を読み取って説明してくれます。備品の型番調べ・掲示物の書き起こし・請求書の一覧化まで解説します。内容を見る