自然言語処理
スマホでも動くくらい高速だと謳われているMicrosoftの小規模言語モデルPhi-3を要約と和訳について試してみました。 環境・前提 モデル 環境 コード 要約させてみる 推論時間 日本語に翻訳させてみる Lambdaでの生成速度 まとめ 環境・前提 モデル 4bit量子…
スマホでも動くくらい高速だと謳われているMicrosoftの小規模言語モデルPhi-3を要約と和訳について試してみました。 環境・前提 モデル 環境 コード 要約させてみる 推論時間 日本語に翻訳させてみる Lambdaでの生成速度 まとめ 環境・前提 モデル 4bit量子…