README.ja.md

エンジニア向けに構築された、ML アプリケーションを観察するためのオープンソース フレームワーク

ドキュメンテーション - やってみて - サポートコミュニティ - バグレポート - 機能リクエスト

これを他の言語で読む:

UpTrain は、ML 実践者がパフォーマンスを監視し、(データ) 分布シフトをチェックし、エッジ ケースを収集して再トレーニングすることで、ML モデルを観察および改良するためのオープンソースでデータ保護されたツールです。既存の本番パイプラインとシームレスに統合され、数分で開始できます⚡。

主な機能 💡

• データドリフトチェック - モデル入力の分布シフトを特定します。
• パフォーマンス監視 - モデルのパフォーマンスをリアルタイムで追跡し、劣化アラートを取得します。
• 埋め込みのサポート - モデルによって推測された埋め込みを理解するための専用ダッシュボード。
• エッジ ケース シグナル - 分布外のデータポイントを検出するためのユーザー定義の信号と統計手法。
• データ整合性チェック - データの欠落または矛盾、重複レコード、データ品質などをチェックします。
• カスタマイズ可能な指標 - ユース ケースに適したカスタム メトリックを定義します。
• 自動再トレーニング - トレーニング パイプラインと推論パイプラインを接続して、モデルの再トレーニングを自動化します。
• モデルバイアス - ML モデルの予測における偏りを追跡します。
• AIの説明可能性 - 予測における複数の機能の相対的な重要性を理解します。
• データセキュリティ - あなたのデータはあなたのマシンの外に出ることはありません。
• Slack インテグレーション - Slack でアラートを受け取ります。
• リアルタイム ダッシュボード - モデルの健康状態をライブで視覚化します。

🚨近日公開🚨

• ラベル シフト - 予測のドリフトを特定します。グラウンド トゥルースが利用できない場合に特に役立ちます。
• モデルの信頼区間 - モデル予測の信頼区間
• 高度なドリフト検出技術 - 外れ値ベースのドリフト検出方法
• 高度な機能スライス - 統計プロパティをスライスする機能
• コルモゴロフ・スミルノフ検定 - 分布シフトの検出用
• 予測の安定性 - モデル予測が安定していないケースをフィルタリングします。
• 敵対的チェック - 敵対的攻撃と戦う

もっと。

始めましょう🙌

すぐに始められますGoogle Colab はこちら。

マシンで実行するには、次の手順に従います。

pip を使用してパッケージをインストールします。

pip install uptrain

最初の例を実行します。

git clone git@github.com:uptrain-ai/uptrain.git
cd uptrain/examples
pip install jupyterlab
jupyter lab

UpTrain の仕組みの簡単なチュートリアルについては、こちらをご覧くださいクイックスタート チュートリアル。

UpTrainインアクション🎬

今日の ML の最も一般的な使用例の 1 つは言語モデルで、テキスト要約、NER、チャットボット、言語翻訳などがあります。UpTrain は、テキスト埋め込みの UMAP クラスタリング （BERTから推測 。以下は、UpTrain ダッシュボードからのリプレイです。

すぐに使える AI 説明可能性

ライブ モデル パフォーマンス モニタリングとデータ整合性チェック

UMAP の次元削減と可視化

後でモデルを微調整するためのエッジ ケース コレクション

UpTrainを選ぶ理由 🤔?

機械学習 (ML) モデルは、重要なビジネス上の意思決定を行うために広く使用されています。それでも、100% 正確な ML モデルはなく、さらに、時間の経過とともに精度が低下します😣.たとえば、消費者の購買習慣の変化により、売上予測は時間の経過とともに不正確になります。さらに、ML モデルのブラック ボックスの性質により、問題を特定して修正することは困難です。

UpTrain はこれを解決します。データ サイエンティストと ML エンジニアがモデルのどこに問題があるかを簡単に理解し、他の人が文句を言う前に修正​​できるようにします🗣️。

UpTrain は、LLM、推奨モデル、予測モデル、コンピューター ビジョン モデルなど、さまざまな機械学習モデルに使用できます。

私たちは、UpTrain をより良くするために常に取り組んでいます。新しい機能が必要ですか、または統合が必要ですか?お気軽に問題を作成するまた助けるリポジトリに直接。

ライセンス 💻

このリポジトリは、Apache 2.0 ライセンスの下で公開されています。私たちは現在、より多くの機能を追加し、より多くのモデルに拡張することで、ほとんどのユース ケースをカバーする非エンタープライズ サービスの開発に注力しています。また、ホステッド オファリングの追加に向けて取り組んでいます - お問い合わせもし興味があれば。

最新情報を入手☎️

私たちは、数多くの機能とユースケースを継続的に追加しています。プロジェクトに星を付けて、私たちをサポートしてください⭐!

フィードバックを提供してください (厳しいほど良い 😉)

UpTrain を公開しています。フィードバックをお寄せいただき、改善にご協力ください ここ。

貢献者 🖥️

UpTrainへの貢献を歓迎します。ご覧ください 貢献ガイド 詳細については。