Hugging Facesentence-transformersでEmbeddingモデルを実行
sentence-transformersでベクトルembeddingを作成し、類似度を計算し、semantic searchを実行し、Spring Bootアプリケーションからモデルを呼び出す。
Hugging Face Trainerで小さいモデルをファインチューニング
Hugging FaceのTrainer APIを使用してDistilBERTを商品レビュー分類タスク用にファインチューニングする方法を、データ準備からinferenceまでガイドします。
Hugging FaceのDatasetsライブラリ: データ読み込みと処理
Hugging FaceのDatasetsライブラリを用いてデータセットを読み込み、探索、変換、保存し、NLPモデルの学習を準備するガイドです。
Hugging Face Hub: モデルを探して使う
Hugging Face Hubで適切なモデルを見つけ、モデルカードを確認し、PythonとSpring Bootの両方から呼び出すガイド
Hugging FaceのTokenizer: 原理とJavaでの使い方
Hugging FaceのTokenizerの仕組み、DJL経由でSpring Bootアプリケーションに統合する方法、encode/decodeの具体例とテストについて学びます。
Transformers Pipeline: わずか数行のコードでNLPモデルを実行する
Hugging Face TransformersのPipeline APIを使ってsentiment analysis、NER、summarization...をモデルアーキテクチャを深く理解せずに実行するガイド。