Random posts

AI / ML JavaScript LangChain.js LLM Node.js

外部APIを利用したRAGをLangChain.jsのLCELだけで作る2 – 部分的なベクトル検索を採用する

LangChain.jsを使用して、RAGやテキスト生成機能を実装するシリーズが続いています。前回はWordPressのREST APIを使用して、RAGの検索部分に挑戦しました。今回はエラーが発生した記事本文や複数記事をLLMに渡す試みについて説明されています。MemoryVectorStoreを利用することで、記事の関連性の高い文章を取得し、記事の検索結果をさらに深掘りする方法も紹介されています。WordPressから取得した記事情報の検索結果をMemoryVectorStoreに保存する方法や、RAGのインデックスと検索処理を実装する手順も示されています。Cloudflare Workers AIを使用して生成された日本語の回答に関する内容や、AWS Lambdaのアプリケーションをアップデートする手順についても触れられています。LLMのトークン数上限に対処する方法や、回答を生成する際に必要な文章の抽出方法についても言及されています。ベクターインデックスを利用した検索についての知見が共有されています。

公開日: 2024/04/03

最終更新日: 2024/04/03

SaaS / FaaS Supabase

SupabaseのHeadless vector search試してみた

Supabaseの勉強も兼ねてGitHubのデモアプリを試しています。今回はベクトル検索のデモを触りました。プロジェクトをローカルにダウンロードし、Supabaseのアカウントでプロジェクトを作成。CLIコマンドでプロジェクトとサンプルアプリを紐付け、データベースのプッシュやAPIキーの設定、エッジファンクションのデプロイを行いました。最後にデプロイされたAPIを呼び出した結果も確認しました。このデモアプリは自動生成されたドキュメントなどからRAGを作る際に使えるようです。

公開日: 2023/12/28

最終更新日: 2023/12/28

AWS JavaScript

AWS SDK js v3 環境変数からアクセスキーなどを取得する方法

LangChainなどでAWS SDKを利用する際、process.envから環境変数を取得する必要がありましたが、JavaScript SDK(v3)では@aws-sdk/credential-provider-nodeというライブラリが利用できます。@aws-sdk/credential-provider-nodeをインストールし、defaultProviderを使ってアクセスキーやシークレットキーを取得することができます。また、任意のプロファイルを指定することも可能です。これにより、複数のAWSアカウントに接続することもできます。読み取り順序は環境変数、credentialsファイル、インスタンスメタデータとなっており、EC2やLambdaの明示的な指定にも利用できます。

公開日: 2023/12/20

最終更新日: 2023/12/20

AWS

Amazon Personalizeのデータをチューニングしてみる

ワークショップに参加した時に気になっていたところがあったので、いろいろ触ってみました。利用したデータデータはチュートリアルで用意されているものを使用します。この入門ガイドでは、600 人のユーザーによる 9700 […]

公開日: 2019/08/25

最終更新日: 2019/08/25

Amazon Alexa AWS

Alexa Skills KitのAMAZON.RepeatIntentをためす

元記事：Alexa Skill Recipe: Using Session Attributes to Enable Repeat Responses 面白そうだったので試してみました。 AMAZON.RepeatInt […]

公開日: 2018/05/21

最終更新日: 2022/08/19

API

Netlify REST APIでNetlifyにサイトをデプロイ・更新・削除する

注意公開するサービスに組み込む場合は、パブリックアクセストークンでの認証ではなくoAuth2を使ってくれとのことです。 https://www.netlify.com/docs/api/#authenticating […]

公開日: 2017/02/20

最終更新日: 2017/01/31

AWS

Serverless Framework + IBM WatsonでAMIMOTOマネージドのプランレコメンドAPIを作る

「Tradeoff AnalyticsでAMIMOTOマネージドの最適プランを調べる」というところまでは前回やりました。 https://wp-kyoto.cdn.rabify.me/check-amimoto-mana […]

公開日: 2017/02/06

最終更新日: 2017/01/31

WordPress

KiyomizuにWP REST APIを追加してVersion1.5をリリースしました。

「公式ディレクトリのテーマにWP REST APIは使える」という話をWordBash Kyotoで言ってたんですが、本当にOKなのか気になって試してみました。追加してみたテーマ KiyomizuというTwenty F […]

公開日: 2016/01/31

最終更新日: 2016/01/31

WordPress

WordPressのブラウザ判定に使える便利なGlobal変数についての覚書

一部ですがユーザーが使用しているブラウザ・端末について、WordPress本体側で判定が行われているのをご存知でしょうか？ HTML5/CSS3辺りのブラウザ対応の差を埋めるためくらいしかちょっと想像がつかないのですが、 […]

公開日: 2015/03/31

最終更新日: 2015/03/29

Frontend Web Component

PolymerにWP-APIで取得したHTMLコンテンツを表示させる覚書

WP-APIのJSONはHTMLタグがエンコードされた状態になっています。そのためデコードしないとHTMLタグとして認識されず、タグがそのまま出てくる状態となります。こんな感じということでPolymerでHTMLタ […]

公開日: 2015/03/25

最終更新日: 2015/12/16