Impressions of Using ChatGPT / ChatGPTを使ってみた感想

Today, I tried out the paid ChatGPT Plus and I believe it has sufficient performance to be used for style conversion of text. Particularly in Japanese, where there is a need to rewrite styles based on the “relationship between the writer and the reader” and “politeness,” I think ChatGPT handles it well.

On the other hand, I don’t think large language models like ChatGPT are suitable for tasks that require obtaining accurate information, such as using Google to search for “What is an apple?” This is because these models learn not just knowledge, but the structure of language from massive amounts of data. I understand that when we feel like ChatGPT has knowledge during a conversation, it is likely due to the expression or structure containing some underlying knowledge that presupposes a certain understanding of the language.

One of the tasks that ChatGPT struggles with is providing the latest information. I believe this is because it requires a tremendous amount of computational power for training, and the learning process cannot keep up. Additionally, as mentioned above, since the model learns the structure of language from text found on the internet, it may be slow to learn about subjects that have little information available online.

By the way, this article was created by writing the original text in Japanese, which is shown below, and then translating it into English using ChatGPT. Translation is a type of style conversion, which is a task that ChatGPT is good at. However, does this English version sound strange to you?

今日有料のChatGPT Plusに登録して触ってみたが、文章のスタイル変換に使うには十分な性能を持っていると思った。特に日本語においては「書き手と読み手の関係性」「丁寧さ」によってスタイルを書き換える必要があるが、ChatGPTはよく対応で来ていると思う。

一方で何かの正確な情報を得るための、Googleを使って「りんごとは？」と検索するようなタスクには向かないように思う。これはChatGPTなどの大規模言語モデルが大量のデータから学習しているのが知識ではなく言語の構造を学習していることによるものと私は理解している。なぜ会話の中でChatGPTに知識があるように感じるのか、それは言語の構造には一定の知識を前提にした表現や構造が含まれているからだろう。

ChatGPTが苦手なタスクとして最新の情報を提供することである。これは、私の理解では、学習に膨大な計算量が必要であり、学習が追いつかないためだと思う。また上記でも述べたとおりインターネット上にあるテキストから言語の構造を学習しているモデルである以上、インターネット上に情報の少ない内容についての学習は遅いのかもしれない。

ちなみにこの文章は下に書いてある日本語で原文を書いてそれをChatGPTによって英語に翻訳させているものだ。翻訳はChatGPTが得意なタスクであるスタイル変換の一種なんだけどこの英語はおかしくないかい？