アップロードした写真からGPT-4と会話できるスゴイWebサービス 『Minigpt-4』

写真を基にGPT-4と会話ができる
スゴイWebサービス。まだデモとの事ですが
実際に写真をアップロードして写真について
会話することもできます。

リンク先

Minigpt-4 リンク先はこちらから

使い方

Githubページの右上のAboutにあるリンクからMiniGPT-4のデモ版ページを開くことができます。
デモですが実際に写真をアップロードして会話も可能となっていますので使ってみます。

手持ちの写真をアップロードしてみました。
TemperatureやBeam search numbersなどAIに関する設定項目があるようですが、現在は
Temperatureしか触れないようです。

アップロードが完了して解析が終わるとチャットが可能となっています。
日本語でも問題ないので質問してみます。

ちゃんと登山している時の写真と認識しているようです。
大阪の大和葛城山に行ったときの写真ですが、写真を認識する精度がスゴイです。
続けて質問をしてみます。

人間よりもしっかりした回答です。もうAIには到底勝てないような気がします。
最近ではテレビでも多く取り上げられ多くの方がAIに触れる機会が増えてきましたが、
2，3年前はAIが写真を認識して何かを当てるぐらいの精度だけでしたが、
写真を認識して人間の質問に回答してくれる、と大きく進化しているのが分かります。

日本には数多くの桜があり、種別まで答えて欲しかった所ですが、これはまだまだのようです。
またGithubには細かな情報も記載されていてVicunaなど高機能なAIエンジンなども使用しているようです。
AIが身近になりより便利になっていくと実感できるスゴイWebサービスです。