Llama-3.1-Swallow-8Bが公開されてたので試しました。楽しみです。
すっきりとした冗長の感じもない文章を生成しました。日本で二番目に高い山は不正解でしたが、計算は正解です。指示の効き具合も改善されたとのことでしたので、langchainとの組み合わせを試しましたが、相性が悪いのか、コードに何か間違いがあったのか、要約タスクで出力が得られず残念です。生成する文章は簡潔で使いやすそうな日本語でした。計算も正解でしたし、バランスもとれたモデルだろうという印象です。
まどか☆マギカで一番かわいいのは?
まどか☆マギカのキャラクターは全員かわいいですが、特に人気のあるキャラクターは鹿目まどかです。彼女は主人公であり、物語の中心人物です。彼女の優しい性格、純粋な心、そして強い意志力は、多くのファンを魅了しています。
問題なく、短めに簡潔に答えています。
日本で二番目に高い山を検討して答えてください。
三番目推しです。答えてくれそうな期待感はあったのですが‥‥。
以下を簡単にまとめてください。
ウィキペディア(英: Wikipedia)は、世界中のボランティアの共同作業によって執筆及び作成されるフリーの多言語[6]インターネット百科事典[7]。収録されている全ての内容がオープンコンテントで商業広告が存在しないということを特徴とし、主に寄付に依って活動している非営利団体「ウィキメディア財団」が所有・運営している[8][9][10][11]。「ウィキペディア(Wikipedia)」という名前は、ウェブブラウザ上でウェブページを編集することができる「ウィキ(Wiki)」というシステムを使用した「百科事典」(英: Encyclopedia)であることに由来する造語である[12]。設立者の1人であるラリー・サンガーにより命名された[13][14]。
ウィキペディアは、世界中のボランティアが共同で執筆・作成する無料のインターネット百科事典です。すべての内容がオープンコンテントで、商業広告はありません。非営利団体「ウィキメディア財団」が所有・運営しています。ウィキペディアという名前は、「ウィキ」と「百科事典」を組み合わせた造語です。
文章はwikipediaより
要約は問題ありません。このサイズのモデルだと安定してできます。
1+1*2+3/2+2^10を計算してください。計算が終わったら検算をしてください。最後に最終的な計算経過と結果を答えてください。
1. 1 + 1*2 = 1 + 2 = 3
2. 3 + 3/2 = 3 + 1.5 = 4.5
3. 4.5 + 2^10 = 4.5 + 1024 = 1028.5したがって、最終的な結果は 1028.5 です。
検算を実行します。
1. 1 + 1*2 = 1 + 2 = 3 (正しい)
2. 3 + 3/2 = 3 + 1.5 = 4.5 (正しい)
3. 4.5 + 2^10 = 4.5 + 1024 = 1028.5 (正しい)すべての計算が正しいことが確認されました。
一度目は小数点以下を無視してしまい不正解でした。ただ、計算の流れは同じような感じでスムースでした。
langchainとの組み合わせは答えが安定しませんでした。コードに不備があったのかもしれません。また、どこかで再トライしたいとおもいます。
今回のColabノートです。