Grokに画像を読み込ませて中身を聞く
この記事は約9分で読めます
ざっくり言うと
Grokは、渡した画像の中身を読み取って説明できます。スマホのカメラで撮った写真でも、パソコンの画面を写したスクリーンショットでもかまいません。
やることは1つです。画像を添付して、「これ何?」「書いてある文字を読んで」と聞く。すると、写っているものを言葉にして返してくれます。
xAIの製品ページには、画像を見て理解する働き(※原文:Vision understanding)として、スクリーンショット・写真・図の分析が挙げられています。
イメージ
文字だけで「英語の画像があって、たぶん料金の話で…」と伝えるのは骨が折れますよね。画像そのものを渡してしまえば、その説明はまるごといりません。
正確には
xAIの製品ページと公式ドキュメントによると、Grokはスクリーンショット・写真・図を分析できます。文章と画像を一緒に渡しての質問も可能です。文字と画像をまとめて扱えるこうした性質を、マルチモーダルと呼びます。
昔のモデル名を覚えておく必要はありません。grok.comや公式アプリで画像を添えて、ふだんの言葉で聞けば大丈夫です。
画像の渡し方
2026年7月27日時点の公式FAQには、次のように書かれています。
- Web・iOS・Androidのチャットでは、入力欄横の「+アイコン」から画像を選ぶ
- Webではドラッグ&ドロップでも添付でき、同じメッセージへ複数のファイルを追加することもできる
対応形式や上限は、端末やプランで変わります。エラーが出たときは、画面の表示と、記事の最後の「参考ソース」の公式FAQを確かめてください。
「読んでもらう」と「描いてもらう」は別の機能
Grokには、渡した画像を読み解く機能(※原文:Image Understanding / Vision)と、画像を新しく作る機能(※原文:Image Generation / Imagine)があります。
この記事で扱うのは前者、つまり手元にある画像の中身を説明してもらう使い方です。「こんな絵を描いて」と頼むほうはImagineで、別の機能にあたります。ここは分けて覚えてください。
Xで見かけた画像は、検索と突き合わせる
Grokは、必要に応じてX(旧Twitter)の公開投稿やWebをその場で検索して答えられます。画像を読ませたあと、同じ会話の流れで「これ、本当?」と続けて聞けます。
タイムラインには、出どころの分からないスクリーンショットやグラフがよく流れてきます。「拡散希望」と付いた画像もあります。まず画像の中身を文章にしてもらい、そのうえで同じ内容の公式発表や報道があるかを探してもらってください。
ただし、検索するかどうかを決めるのはGrokです。確実に調べてほしいときは、「Xの公開投稿を検索して」「Webでも確認して」と質問に書き添えてください。検索の仕組みはGrokのX(旧Twitter)連携でリアルタイム情報を聞くでくわしく説明しています。
X投稿には、個人の意見も未確認の話も混ざります。誤情報・憶測・冗談・なりすましが、同じタイムラインに並んでいます。Grokが「Xにはこう書かれています」とまとめても、その中身が本当かどうかまでは分かりません。答えにX投稿のリンクが添えられていたら、1つずつ開いて自分で読んでください。
なお、検索が届くのは公開されている投稿だけです。非公開の投稿は対象になりません。
込み入った図表は、Expertモードでじっくり読ませる
決算資料のグラフや、契約書に付いている仕組み図。こうした図は、ぱっと見の説明だけでは足りないことがあります。
2026年7月29日時点のGrokでは、入力欄にモードセレクター(いま選ばれているモード名が出ている部分)があり、Auto / Fast / Expert / Heavyの4つから選びます。じっくり考えてほしいときに選ぶのがExpertです。画像を添えてExpertで送ると、数十秒〜数分かけて検討してから答えが返ってきます。
Autoのままでも、難しい質問ならGrokが自分でExpertに切り替えます。無料プランでもExpertは試せますが、使える回数には上限つきです。モードの詳しい使い分けはGrokのExpertモードで深く考えさせるにまとめてあります。
時間をかけたからといって、答えが正しいとは限りません。丁寧に書かれた説明ほど、正しそうに見えてしまいます。金額・日付・契約の条件は、元の画像と突き合わせて自分で確かめてください。
注意点
学習に使わせたくないときの設定
個人向けのgrok.com・公式アプリでは、SettingsのData Controlsから、新しい会話をモデル学習に使わない設定を選べます。Private Chatの内容は、モデル学習に使われません。
X上のGrokは、設定の場所も適用されるポリシーも別です。こちらはX公式ヘルプで確認してください。どの設定にしていても、不要な個人情報や機密情報は渡さないのが基本です。
読み取った文字は、元の画像でも確かめる
画像の中の文字や数字を、Grokが読み違えることがあります。手書き、かすれた印刷、斜めから撮った写真では特に起きやすいです。
金額・固有名詞・契約の条件は、元の画像を自分の目で見て確かめてください。頼むときに「読めなかった部分は[?]と書いて」と添えておくと、勝手な推測が混ざりにくくなります。
やってみよう
コピーして使える、聞き方の例4つ
パターン1:英語のスクリーンショットを訳してもらう
海外アカウントの投稿を撮ったスクリーンショットを、1枚添付します。
このスクリーンショットに書かれている英文を日本語に訳して。
そのうえで、要点を3行にまとめて。
訳と要点がそろって返ってきます。「価格の話だけ抜き出して」「日付が出てくる部分を教えて」と、続けて絞り込むこともできます。
パターン2:ホワイトボードや手書きメモを書き起こす
打ち合わせで撮ったホワイトボードの写真や、自分の手書きメモを添付します。
この手書きメモを文字起こしして、議事録の形に整えて。
だれが・いつまでに・何をやるかも表にして。
読み取れなかった文字は[?]と書いて。
くずした字も拾って、担当と期限まで並べてくれます。効くのは最後の1行です。これを入れておかないと、読めない部分を勝手に埋められることがあります。
パターン3:Xで流れてきた画像を、そのまま信じない
「拡散希望」と付いた画像や、出どころの分からないグラフのスクリーンショットを添付します。
この画像に書かれている内容を、そのまま文字にして。
そのうえで、同じ内容の公式発表や報道があるか、
Xの公開投稿とWebを検索して確かめて。
根拠にしたリンクも並べて。
画像の中身と、裏が取れたかどうかを分けて答えてもらう頼み方です。リンクが返ってきたら、必ず開いて自分の目で読んでください。ここまでやって、はじめて「確かめた」と言えます。
パターン4:込み入った図表をExpertモードで読ませる
決算資料のグラフや、契約書の仕組み図のスクリーンショットを添付します。入力欄のモードセレクターをExpertに切り替えてから送ってください。
この図が何を表しているか、順番に整理して説明して。
数字の根拠が図のどこにあるかも示して。
読み取れない部分は、推測せずに読み取れないと書いて。
Expertは数十秒〜数分かけて考えます。画面が止まったように見えても、そのまましばらく待ってみてください。返ってきた説明は、元の画像と見比べながら読みましょう。
締めに
画像を1枚貼って、ふだんの言葉で聞く。これだけで、読み取りも翻訳も要約もひととおり返ってきます。
そこにもうひと手間を足してください。Xで見かけた画像は、読ませたあとに「Webでも確認して」と続ける。信じる前に確かめる流れができると、画像の使い道はぐっと広がります。
まずは身近な写真を1枚渡して、「これ何?」と聞くところから始めてみてください!
よくある質問
- Q. Grokは、写真やスクリーンショットの中身を読み取れますか?
- A. 読み取れます。写っているものの説明、画像に入っている文字の読み取り、英語の画面の翻訳、グラフや図表の読み解きまで頼めます。画像を添えて、ふだんの言葉で聞くだけです。
- Q. Grokが画像の文字を読み違えることはありますか?
- A. あります。手書き、かすれた印刷、斜めから撮った写真では特に起きやすいです。「読み取れない部分は、推測せずに読み取れないと書いて」と添え、金額や固有名詞は元の画像で確かめてください。
- Q. Xで流れてきた画像は、Grokでどう確かめればよいですか?
- A. まず画像の中身をそのまま文字にしてもらい、続けて同じ内容の公式発表や報道があるかを探してもらいます。「Xの公開投稿とWebを検索して」と書き添え、返ってきたリンクは1つずつ開いて自分で読んでください。
- Q. 人が写った写真や社外秘の資料を、Grokに読ませてもよいですか?
- A. 他人の顔や名前が入った写真は、本人の同意なく渡さないでください。保険証や免許証のような書類は必要な部分だけ残し、社外秘の資料や業務システムの画面は、勤務先のAI利用ルールを先に確かめます。
公開: 更新: ✓ 公式情報と照合:
参考ソース
- xAI公式 - Grok(公式情報)
- xAI Docs - Image Understanding(公式情報)
- xAI Docs - Welcome to Grok(公式情報)
- xAI Docs - FAQ for Grok Website and Apps(公式情報)
- xAI Consumer FAQs(公式情報)
- X Help Center - About Grok(公式情報)
- xAI Docs - X Search(公式情報)
- xAI Docs - Web Search(公式情報)
- xAI Docs - Reasoning(公式情報)
この教科書は無料で全文公開しています。仕事で使えるところまで進みたい方は、実習と資料がそろった生徒プランをどうぞ。
あわせて読みたい
- Gemini | 便利な機能・小ワザ約9分
Geminiに画像を読み込ませて中身を聞く
スマホで撮った写真やPCのスクリーンショットをGeminiに渡すと、写っているものや書かれた文字を読み取って説明してくれます。備品の型番調べ・掲示物の書き起こし・請求書の一覧化まで解説します。内容を見る - ChatGPT | 便利な機能・小ワザ約9分
ChatGPTに画像を読み込ませて中身を聞く
レシート・仕入伝票・手書きメモの写真をChatGPTに見せて、中身を読み取ってもらう使い方をやさしく解説します。読み取った金額をそのまま月別の集計表やグラフにつなげる流れまで、初心者向けにまとめました。内容を見る - AI基礎 | 用語集約7分
Vision(画像認識)
Vision(画像認識)とは、写真やスクリーンショットをAIに見せて、写っているものや文字について説明してもらえる能力のことです。できること、OCRとの違い、読み間違いへの備え方をやさしく説明します。内容を見る - AI基礎 | 用語集約6分
マルチモーダル
マルチモーダルとは、AIが文字・画像・音声・動画など複数の種類の情報をまとめて扱える性質のことです。言葉の意味と、対応表を見るときのコツを短くまとめました。内容を見る