2024
6
月号

もっとじっくり AWS CDK のコンセプト 第7回 トークン

AWS CDK アプリを開発していると、ふいに ${Token[TOKEN.101]} のようなちょっと変わった見た目の値を目にすることがあります。それが今回とり上げるトークンです。いえ、正確にはエンコードされたトークンです。
トークンはあちこち見えないところで、いつのまにか使っているものです。普段はあまり気にする必要のないその仕組みについて、背景にある課題や関連する概念とともにじっくり見ていきましょう。

はじめての自然言語処理 第31回 OpenAI text-embedding-3-large と Cohere Rerank 3 の精度評価

今回は OpenAI text-embedding-3-large と Cohere Rerank 3 の精度評価を行います。OpenAI の既存のテキスト埋込モデルの text-embedding-ada-002 に対し、どの程度精度が向上するか（しないか）を見ていきます。