ChatGPTのアプデで新たに出来るようになった事7選【OpenAI DevDay】
ちょっと記事化するのが遅れてしまいましたが、自分自身のためにも OpenAI DevDay で公開されたアプデ情報をまとめていきます。
- ChatGPT turbo
- GPT-4-Turbo(GPT-4.5?)の主なアップデート
- AIによるスポーツやゲーム実況
- リアルタイム認識AI
- AGIチャットボット
- AI 旅行アプリ
- ランディングページの最適化
- ラフ案からのソースコード生成
- まとめ
ChatGPT turbo
今回の目玉でもあるturbo。
処理の記憶容量がめちゃくちゃ増えまして、より長いやりとりが可能になりました。他には学習データの最新化など。
GPT-4-Turbo(GPT-4.5?)の主なアップデート
①処理できる記憶容量:128K🚀
②より洗練されたFunction Calling
③RAGの搭載と学習データのCut Offを2023年4月に更新
④DALL-E 3、GPT-4V、そしてTTSモデルのAPIを公開
⑤カスタムモデルの実装
⑥レートリミットの改善
GPT-4 TurboはGPT-4より3倍も安く、gpt-4-1106-preview モデルを渡せばすぐ使えるようになっています。
AIによるスポーツやゲーム実況
GPT-4V + TTS = AI スポーツ ナレーター🪄⚽️ OR AI ゲームナレーター
サッカービデオのすべてのフレームを gpt-4-vision-preview に渡し、簡単なプロンプトでナレーションを生成が可能になるとのことです。編集をする必要がないです。(これ凄くないですか?)
GPT-4V + TTS = AI Sports narrator 🪄⚽️
— Gonzalo Espinoza Graham 🏴☠️ (@geepytee) November 7, 2023
Passed every frame of a football video to gpt-4-vision-preview, and with some simple prompting asked to generate a narration
No edits, this is as it came out from the model (aka can be SO MUCH BETTER) pic.twitter.com/KfC2pGt02X
ゴォールゥ!!!メッシ!メッシ!メッシ!
無人でゲーム実況もできそうで、AIゲーム実況系Youtuberが爆誕する予感がします。
おそらく・・・動画ありのニュース系でも可能そうですね。
リアルタイム認識AI
カメラに写っている内容を正確にテキスト化します。手の動きや、ヘッドフォン、スマホに映る数字など。視覚障害者向けのサービスで活躍しそう。
WebcamGPT:
live.
GPT-4 Vision API recognizes what is happening in near-realtime, identifies objects and actions...
This took about 10 minutes to build. It&
Comment if you want access. pic.twitter.com/iduUyo3sWQ— Benjamin De Kraker (@BenjaminDEKR) November 7, 2023
AGIチャットボット
GPTsという独自チャットボットで柔軟で様々な用途で利用できる新機能。
- 自動保存
- 長期記憶
- スキルの再利用
- 現在のタスクを追跡
- SQLを使ってチャットにエクスポート
などなどで便利になる予感。
ここから利用できます。
https://chat.openai.com/g/g-r4ckjls47-agi-zipIntroducing:
1st custom GPT agent
Agi . zip
World&
GPT-4-turbo isn& fast enough
So I included 20 prebuilt hotkeys to GO FASTER
Automatically save
-long term memory
-reusable skills
-tracks current tasks
-export into any chat using .sql
try it yourself, link below pic.twitter.com/9brNHNZYkZ— Nick Dobos (@NickADobos) November 6, 2023
AI 旅行アプリ
地図を見ながら観光地を紹介してくれたりChatGPTがアシスタントしてくれるようになりました。
The AI assistant travel app in @OpenAI&
DevDay keynote today has got to be one of the most impressive live demos I& ever seen.
Brilliant presentation by @romainhuet + stellar design & engineering work by @simonpfish & @karoliskosas behind the scenes 👏 pic.twitter.com/1Ha0C5r1ij— Steven Tey (@steventey) November 7, 2023
ランディングページの最適化
なんとLPのURL載せるだけで、改善案を出してくれるようになりました。
これはWeb制作会社や開発者にとっては朗報で嬉しい機能なのではないでしょうか。
Here&
a demo of the gpt-4-vision API that I built in@bubble in 30 min.
It takes a URL, converts it to an image, and sends it through the Vision API to respond with custom landing page optimization suggestions. pic.twitter.com/dzRfMuJYsp— Seth Kramer (@sethjkramer) November 6, 2023
ラフ案からのソースコード生成
デザイン画像からHTMLの生成が可能になるとのことです。いやぁ・・・。この機能もえぐいっすね。デザインのソフトにもこうゆう機能はついていますが、動画のソースコードを見る限りChatGPTから生成されるHTMLは綺麗なんですよね。これは驚き。
GPT-4-Vision is a literal game changer. I was able to hack together this flow of doing low fidelity mock up -> actual html in like < 5 hours of the api being available. The future is bright. pic.twitter.com/g7GhLJS19A— Sawyer Hood (@sawyerhood) November 7, 2023
まとめ
いやあ、ChatGPTの進化の速さに正直ついていけないレベルっすね。今回APIのアプデもあったのですが、情報が多すぎになりますので省きました。
とりあえず
- 動画を投げるだけで実況が生成されるようになった
- デザインラフからソースコードが生成できるようになった
この2点だけ覚えおくだけでもかなり便利になるんじゃないでしょうか。
- 完全無料Basicはオープンソースで運営されています。誰しもが自由にBasicを利用できます。
- 超軽量化で超高速配信通常のCMSよりページ容量を70%以上を自動で圧縮を行い更に自動で静的化・圧縮化されたページが配信されます。
- SEOにつよつよ70%以上軽量化に加えて最新SEOに対応した構造で静的化・圧縮化されたページはライバルサイトより圧倒的に評価されます
ライバルサイトより一歩前にいけるCMSでサイトを構築しませんか?