💬

「ChatGPTよりも性能がいい」を謳うAIサービスを試してみた。

2023/11/22に公開

gpt

「ChatGPTよりも性能がいい」や「ChatGPTよりもはやい」
「ChatGPTに頼んでもマトモなのは出てこない！けどこのサービスならできる！」
...と謳うサービスが急増しています。
私は真実かを確かめるため、国内のとあるサービスとOpenAIの運営するChatGPTを比較してみました。

前置きしておきますが、ステマではないのでご安心ください。

検証

まず、国内のとあるサービスにある「StableDiffusionのプロンプトを作成」を試します。
「どんな絵を描きたいか、簡単に入力してください。」
とのことですので、「ニューヨークの街を歩く女の子」と入力してみました。

返答は以下の通りです:

プロンプト: 一人でニューヨークの街を歩く女の街を歩く女の子のイメージを描いてください。
ネガティブプロンプト: ニューヨークの街で迷いながら歩く女の子のイメージを描いてください

あれれ、おかしいですね。もう一度試しましょう。

プロンプト: "A young girl walking through the streets of New York City, surrounded by towering buildings and bustling crowds."

ネガティブプロンプト: "An empty and desolate street in New York City, devoid of any signs of life, with the girl feeling isolated and lost."

今度はちゃんとしたものが出たようです。

この画像が生成した結果になります。

あまりよくはありませんね。
また、ネガティブプロンプトは

low quality, bad quality

のような単語を先頭に入れることでクオリティがアップしますが、そのような単語は含まれていません。

ChatGPT(GPT-3.5)に頼んでみましょう。
GPTの場合は指示を自分で書いてあげる必要がありますが、
英語と語彙力があれば私が作った指示分は作れますのでご安心ください。

ちなみに作って欲しい画像に関しては、同じく「ニューヨークの街を歩く女の子」と入力してあります。

Girl walking in the streets of New York, cityscape, urban fashion, trendy, skyscrapers, busy streets, bustling city, street style, confident stride, sidewalk, city lights, fashionable outfit, city life, New York skyline, modern metropolis, evening stroll, city exploration, young woman, urban vibes, vibrant atmosphere, fashionista, urban landscape, New York City, cosmopolitan, chic, city adventure, street photography, cityscapes, fashion-forward, city lights at night, stylish city dwellers, Manhattan skyline, metropolitan lifestyle, urban chic, city that never sleeps, urban exploration, energetic city, city lights

NEGATIVE: low quality, bad quality, blurry, pixelated, distorted, poor resolution, grainy, artifacts, low-resolution image, bad image, not clear, unprofessional, low-quality photography, out of focus, noisy, poorly lit, subpar image quality, amateurish, unclear, unsatisfactory, low-grade picture, low-res, inferior quality

生成結果です

あまり良いとは言えませんね。

ですが、より具体的なプロンプトが生成されました。

GPTの場合、指示を変えたり、「人を増やしたい」や「NegativePromptを強化して」
と頼めることや、無料であること、カスタム性が高いことから、GPTの方が優れていたと言えるのではないでしょうか。

次に「Twitter用の文章を生成する」というものがありましたので、そちらを試してみました。

GPTの方には同様に自作の指示をしてあります。どちらがGPTか当ててみてください。(答えは最後に書いておきます。)
ちなみに指示は適当に書いた日本語の指示で、小学生でも書ける文章です。

1. 新しいAI絵描きの呼び声にお答えします！無料で使えるExampleのAI絵サービスが登場！芸術を追求したいなら、チェックしてみてください！ #AI絵 #アート #クリエイティビティ

2. アートの才能がなくても大丈夫！Exampleがあれば、簡単にAI絵を作成できます！ 趣味からプロまで、誰でも楽しめます！ #AI #アート作成 #クリエイター

3. 手描きアートが苦手な人でも、ExampleのAI絵サービスで簡単に芸術家に！どんなアイデアも形にできます！ #AI #アート #クリエイティブ

4. 絵を描くのが難しい？そんなことはありません！ExampleでAI絵を試してみてください！ あなたのアートの可能性を広げましょう！ #AI #アート作成 #クリエイティブ

5. AI技術を駆使して、誰もがアーティストになれる時代がやってきました！Exampleの無料AI絵サービスで、あなたも芸術の世界に飛び込んでみませんか？#AI #アート #クリエイター

1. AIの力で自分の絵を作ってみませんか？無料で使えるサービス「Example」がオススメです！絵心がなくても簡単にオリジナルのイラストを作成できますよ！ #AI #絵作り #無料

2. 絵が苦手でも大丈夫！AIが手助けする「Example」で自分だけのオリジナル絵を作ろう！無料で使えるから、気軽に挑戦できますよ！ #AI #イラスト #無料サービス

3. 絵を描くのが苦手な方に朗報！「Example」ならAIの力で簡単に絵が作れます！無料で使えるサービスなので、ぜひチャレンジしてみてください！ #AI #絵心不要 #無料

4. 無料でAI絵が作れるって知ってましたか？「Example」なら初心者でも簡単にオリジナルの絵を作成できます！試してみる価値ありですよ！ #AI #イラスト作成 #無料

5. 絵を描くのが苦手な人でも大丈夫！AIの力を借りてオリジナルの絵を作成できる「Example」がおすすめです！無料で使えるので、ぜひ試してみてください！ #AI #絵作り #簡単

クオリティーに差があると言えるでしょうか。
プロンプトを強化したり、指示を具体化すると、さらに良い結果がGPTの場合は得られます。
今回は「真面目に、でも人間のユーモアらしさが欲しい」と指示してあります。
もし、さらに真面目なものが欲しければそのように言えばいいのです。
もし、複数言語で欲しければ一度に頼むこともできます。

私はこれ以外にも色々な検証をして、比較して考察しました。

結論

そして辿り着いた結論があります。

「無料のChatGPTで十分じゃない？」

今回私が検証したサービスはまともに使えない無料プランと高額な有料プランがありました。

機能自体の性能は同じのようですが、「有料プランは速度が10倍になる」などとと書いてあり、
その様子を見せる動画が添付されてありました。

本音を言うと、ChatGPTの無料版と同じくらいの速度でした。
OpenAIのAPIを利用しているとの事でしたので、当然ではありますが。

「広告が表示されない」とも書いてありました。
ChatGPTは無料プランでも広告は表示されません。

お値段は月額5000円弱でした。※年間払いだと月額換算で3000円弱でした。

無料プランでは
・広告あり
・低速生成
・制限あり

有料プランでは
・広告なし
・高速生成
・制限なし

などがあります。

ChatGPTは無料プランと有料プラン(20$(記事作成時のレートで3000円弱)です)があります。

無料プランでは
・広告なし
・高速生成
・制限なし

有料プランでは
・GPT-4へのアクセス
・最新機能へ無料ユーザより早くアクセス
・画像を読み込める
・DALLE-3の画像生成(最後に「ニューヨークの街を歩く女の子」というプロンプトで生成した画像を掲載します)
・検索し、結果を要約したりできる。

などがあります。

自分で指示をするだけで十分な性能を持つ無料のChatGPT。
無料プランだと制限でとても利用できない今回検証したサービス。
しかも、有料にしてもGPTの無料プランでできるようなことができるだけ。

そんなサービスに月額5000円も払う価値はないのでは？と思ってしまいました。
ChatGPTで無料でできることに5000円を払うのは損をしていると言えます。

今回検証に利用したのはGPT-3.5(無料で利用可能)ですが、
GPT-4はさらに賢く、できることも今回検証したサービスよりも多いです。

指示を自分でするだけで、２000円(無料プランを利用するなら5000円)の節約ができます。
2000円もあれば頑張った自分にご褒美のおやつを大人買いできてしまいます。

このようなサービスはGPTよりも優れているなどと謳っていますが、
それは事実ではありませんでした。

GPTはプロンプトをちゃんと書けば今回を上回るパフォーマンスを発揮できます。

最後に

私はこれらの検証から、
「GPTよりも高性能」などを謳うサービスに惑わされず、
ChatGPTを試してからそう言ったサービスを試して、
本当にそのサービスに価値があるのかを注意深く検証してみてください。

これは業者やサービスを選ぶときには必ずするべきです。
例えば、ドメインをとる場合、一番上に出たからという理由でサービスを選んでいませんか？
Google検索ならば広告を利用して上位に乗ることは容易です。
「国内ナンバーワン」などと謳っているからと信頼していませんか？

ちゃんと調べてから選ぶべきです。
何においても利用者の声を見るべきです。

価値があるものに払う2000円と、価値がないものに払う1000円、
これは値段だけ見れば1000円の方が安く見えます。

「ナンバーワンだから」と選ぶのと「誠実な対応で有名だから」と選ぶのでは
一見すると「ナンバーワンなら誠実だろう」と思われるかもしれません。
ですが、本当のそうですか？
最大手を名乗りながら詐欺まがいの商売をする企業は国内に限らずたくさんあります。
大手ではないものの、誠実に顧客に寄り添った企業も国内に限らずたくさんあります。

価値があるものにお金を払い、無料で十分なものは無料で済ませる。
これが重要だと検証を通じて感じました。

お読みいただきありがとうございました。

(DALLE-3作の画像)

ちなみにですが、途中で出した問題の答えです: GPT-3.5が前者。

検証

結論

最後に

Discussion