New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Jump to bottom

精度改善、パフォーマンス改善のアプローチをオプションで学習できるようなノートブックを作成する #3

Open

shukawam opened this issue Jul 10, 2024 · 1 comment

Member

shukawam commented Jul 10, 2024

No description provided.

shukawam changed the title ~~精度改善のアプローチをオプションで学習できるようなノートブックを作成する~~ 精度改善、パフォーマンス改善のアプローチをオプションで学習できるようなノートブックを作成する

Member Author

shukawam commented Jul 10, 2024

パッと思いつくのは、

PDF に含まれるテーブル構造をどうにかする
チャンカーの再検討
- 現状は単純に文字数ベースで分割しているが、もう少しスマートにできないか？（項目ごとに分けるとか）
ハイブリッドサーチの導入
（直接的な精度改善の仕組みではないが）オブザーバビリティの検討
- OpenLLMetry + OCI APM or Langfuse or LangSmith
Embeddingsに使用しているモデルを軽量モデルに変更する

とかかなあ...

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment