ChatGPT 最近針對 ChatGPT Plus 會員開放了 GPT-4 的圖像辨識功能,有點類似以圖搜圖的感覺,你可以直接上傳圖片讓 ChatGPT 辨識,並且針對圖片中的資訊進行回答。
然後下面我就丟了 10 張不同的圖片給他,想要看看他能夠回答到哪些程度。
延伸閱讀:收費版的 ChatGPT Plus 推出!每月大約 600 元台幣可享 3 大特權
01. 從食物照片提供食譜
這應該是蠻入門的一個功能了。
我拿找了一張白酒蛤蜊義大利麵的照片,直接丟給 ChatGPT 問他要怎麼做出這道料理。
然後他就提供我食譜、所需材料以及製作的步驟,而且蠻詳細的,我還沒照著做過,但是看起來應該還算正確。
02. 辨識照片中的景點
接著我丟了幾張景點的照片給 ChatGPT,看看他是否能夠辨識出來。
第一張是這個經典的 Windows XP 桌布照,可以順利辨識成功,還會告訴你一些相關的資訊。
再來是另外一張,聽說也是很有名,但是如果沒有在觀察旅遊景點的人應該也不會知道。
ChatGPT 也是可以正確的辨識出來。
03. 辨識照片中的內容並提供協助
接著我傳了一張我之前去義大利旅遊時租車的照片,我問他要如何開啟這台車的油箱蓋,我想說看看他會不會可以辨識出這台車的品牌、型號然後給我正確的資訊。
雖然他無法正確的鎖定型號,但是品牌還是有辨識出來,然後也依照了該品牌可能的狀況提供給我開油箱蓋的方法,雖然我現在是不能驗證 ChatGPT 提供的方法可不可以成功,但是至少在我需要的時候可以提供我一些方向吧。
另外這個也是一樣,我找了之前拍的 AirBnB 民宿照片,然後問他這個髒髒的瓦斯爐該如何清洗。
雖然他的回答都蠻通用的,但至少是個可以參考的方向。
04. 查詢照片中的物品
我在網路上找了一張二戰時的飛機丟給 ChatGPT,看看以後如果有遇到有興趣,但是不知道如何查詢的物品主題時,是不是就可以用 ChatGPT 來幫忙。
雖然 ChatGPT 說他無法判定是哪一型的戰鬥機,但是他有提到 P-40 戰鬥機,而我查的時候也寫說是 P-40 戰鬥機。
以後如果在網路上看到有人分享些什麼有趣的玩意兒,但是對方沒有提供相關資料的話,就可以把圖片抓下來丟給 ChatGPT。
05. 辨識收據、醫藥單
記得之前好像有說 ChatGPT 也可以看得懂醫生開的處方,但我身邊也沒有處方,就利用健保快 e 通找了一下最近一次看牙醫時,醫生開給我的要有哪些,我打在備忘錄上用截圖的方式給 ChatGPT。
ChatGPT 也確實可以告訴我每一項藥品的功用,而且都是正確的,這樣以後如就可以直接拍下醫藥單來查詢,不用自己手動輸入了。
另外如果想要查家人在國外都亂買了些什麼,把購物明細拍照丟給 ChatGPT 看就可以了。
ChatGPT 還會把辨識的內容分析給你聽,讓你知道每個品項是什麼東西,你也不用自己去查了,很方便。
06. 無法辨識人物
無論你丟的有名的人(下面這是梅莉史翠普)還是很難查到的遠古人物,只要是人物的話,ChatGPT 一率都會說他無法幫忙,這個你就還是丟給 Google 以圖搜圖吧。
07. 要拿來做功課真的還不太行
之前有人說可以拿來做功課、解數學題目…等,而且 GPT-4 推出時還說他通過了多項的學力測驗,幾乎等同是碩士畢業了。
所以我就拿 112 年學測的數學考題來問問他。
ChatGPT 說正確答案是 4,而且連怎麼分析的方法都講出來了,但真正的答案應該是 5 …..
然後我想說….會不會是這種三角函數太難了,那我換成一個國中的題目。
這樣就算對了,果然是剛剛那個太難了。
然後我又找個美國高中的題目,想說題目是英文的….辨識起來應該會比較 OK 吧,而且這個題目真的很簡單,在台灣應該是國中就會教的東西了….
結果還是算錯….
甚至我想說,那就一步一步引導他,看看到什麼樣的程度下他會給出正確答案,結果….
才問了第一個答案就在原始題目中的問題,ChatGPT 就直接漏氣了。所以後來我就放棄了,結論就是不要想說 ChatGPT 的圖像辨識可以幫你做作業,還是自己來吧。
ChatGPT 圖像辨識好用,如果可以更深入就更好了
整體來說,我覺得 ChatGPT 的圖像辨識功能應該可以有 70 分吧,像是辨識照片中的物品、食物、動物….等都蠻不錯的,當你完全沒有頭緒的時候可以給你一個方向,如果辨識的物品很清楚明瞭的話,ChatGPT 或許還會提供更加詳細的內容,但如果要到完全精確的話可能還不太夠用,這點就大家自行斟酌了。
日後我也會再繼續試試看不同的圖片或是問法,看看 ChatGPT 的圖像辨識會不會更有進步。