コンテンツにスキップ

Community

このページは、コミュニティによって開発された🤗 Transformersに関するリソースをまとめたものです。

リソース説明作者
Hugging Face Transformers Glossary FlashcardsTransformers Docs Glossaryに基づいたフラッシュカードセットです。このセットは、長期の知識定着を特に考慮して設計されたオープンソースのクロスプラットフォームアプリであるAnkiを使用して簡単に学習/復習できる形式になっています。フラッシュカードの使用方法に関する紹介ビデオはこちらをご覧ください。Darigov Research
ノートブック説明著者
事前学習済みのTransformerを微調整して歌詞を生成GPT-2モデルを微調整してお気に入りのアーティストのスタイルで歌詞を生成する方法Aleksey KorshukColabで開く
Tensorflow 2でT5をトレーニングTensorflow 2を使用して任意のタスクに対してT5をトレーニングする方法。このノートブックはTensorflow 2を使用してSQUADで実装された質問と回答タスクを示しています。Muhammad HarrisColabで開く
TPUでT5をトレーニングTransformersとNlpを使用してSQUADでT5をトレーニングする方法Suraj PatilColabで開く
分類と多肢選択のためにT5を微調整PyTorch Lightningを使用してテキスト対テキスト形式でT5を分類と多肢選択タスクに微調整する方法Suraj PatilColabで開く
新しいデータセットと言語でDialoGPTを微調整DialoGPTモデルを新しいデータセットでオープンダイアログ会話用の微調整する方法Nathan CooperColabで開く
Reformerを使用した長いシーケンスモデリングReformerを使用して500,000トークンまでのシーケンスをトレーニングする方法Patrick von PlatenColabで開く
要約のためにBARTを微調整Blurrを使用して要約のためにBARTを微調整する方法Wayde GilliamColabで開く
事前学習済みのTransformerを微調整して誰かのツイートを生成GPT-2モデルを微調整してお気に入りのTwitterアカウントのスタイルでツイートを生成する方法Boris DaymaColabで開く
🤗 Hugging FaceモデルをWeights & Biasesで最適化Hugging FaceとWeights & Biasesの統合を示す完全なチュートリアルBoris DaymaColabで開く
Longformerの事前学習既存の事前学習済みモデルの「長い」バージョンを構築する方法Iz BeltagyColabで開く
QAタスクのためにLongformerを微調整QAタスクのためにLongformerモデルを微調整する方法Suraj PatilColabで開く
🤗nlpを使用したモデルの評価nlpを使用してTriviaQAでLongformerを評価する方法Patrick von PlatenColabで開く
感情スパン抽出のためにT5を微調整PyTorch Lightningを使用して感情スパン抽出のためにT5を微調整する方法Lorenzo AmpilColabで開く
DistilBertをマルチクラス分類にファインチューニングPyTorchを使用してDistilBertをマルチクラス分類にファインチューニングする方法Abhishek Kumar MishraOpen In Colab
BERTをマルチラベル分類にファインチューニングPyTorchを使用してBERTをマルチラベル分類にファインチューニングする方法Abhishek Kumar MishraOpen In Colab
T5を要約にファインチューニングPyTorchを使用してT5を要約にファインチューニングし、WandBで実験をトラッキングする方法Abhishek Kumar MishraOpen In Colab
ダイナミックパディング/バケッティングを使用してTransformersのファインチューニングを高速化ダイナミックパディング/バケッティングを使用してファインチューニングを2倍高速化する方法Michael BenestyOpen In Colab
マスク言語モデリングのためのReformerの事前学習双方向セルフアテンションレイヤーを備えたReformerモデルのトレーニング方法Patrick von PlatenOpen In Colab
Sci-BERTを拡張してファインチューニングAllenAIのCORDデータセットで事前学習済みのSciBERTモデルの語彙を拡張し、パイプライン化する方法Tanmay ThakurOpen In Colab
Trainer APIを使用してBlenderBotSmallを要約のためにファインチューニングカスタムデータセットでBlenderBotSmallを要約のためにファインチューニングする方法、Trainer APIを使用Tanmay ThakurOpen In Colab
ElectraをファインチューニングしてCaptum Integrated Gradientsで解釈Electraを感情分析のためにファインチューニングし、Captum Integrated Gradientsで予測を解釈する方法Eliza SzczechlaOpen In Colab
Trainerクラスを使用して非英語のGPT-2モデルをファインチューニングTrainerクラスを使用して非英語のGPT-2モデルをファインチューニングする方法Philipp SchmidOpen In Colab
DistilBERTモデルをマルチラベル分類タスクのためにファインチューニングDistilBERTモデルをマルチラベル分類タスクのためにファインチューニングする方法Dhaval TaunkOpen In Colab
ALBERTを文ペア分類タスクのためにファインチューニングALBERTモデルまたは他のBERTベースのモデルを文ペア分類タスクのためにファインチューニングする方法Nadir El ManouziOpen In Colab
RoBERTaを感情分析のためにファインチューニングRoBERTaモデルを感情分析のためにファインチューニングする方法Dhaval TaunkOpen In Colab
質問生成モデルの評価seq2seqトランスフォーマーモデルによって生成された質問の回答の正確さを評価する方法Pascal ZolekoOpen In Colab
DistilBERTとTensorflowを使用してテキストを分類TensorFlowでテキスト分類のためにDistilBERTをファインチューニングする方法Peter BayerleOpen In Colab
CNN/Dailymailでのエンコーダーデコーダー要約にBERTを活用google-bert/bert-base-uncased チェックポイントを使用してCNN/Dailymailの要約のために EncoderDecoderModel をウォームスタートする方法Patrick von PlatenOpen In Colab
BBC XSumでのエンコーダーデコーダー要約にRoBERTaを活用FacebookAI/roberta-base チェックポイントを使用してBBC/XSumの要約のための共有 EncoderDecoderModel をウォームスタートする方法Patrick von PlatenOpen In Colab
TAPASをシーケンシャル質問応答(SQA)でファインチューニングシーケンシャル質問応答(SQA)データセットで tapas-base チェックポイントを使用して TapasForQuestionAnswering をファインチューニングする方法Niels RoggeOpen In Colab
TabFactでTAPASを評価tapas-base-finetuned-tabfact チェックポイントを使用してファインチューニングされた TapasForSequenceClassification を評価する方法、🤗 datasets と 🤗 transformers ライブラリを組み合わせて使用Niels RoggeOpen In Colab
翻訳のためのmBARTをファインチューニングSeq2SeqTrainerを使用してHindiからEnglishへの翻訳のためにmBARTをファインチューニングする方法Vasudev GuptaOpen In Colab
FUNSD(フォーム理解データセット)でLayoutLMをファインチューニングスキャンされたドキュメントからの情報抽出のためにFUNSDデータセットで LayoutLMForTokenClassification をファインチューニングする方法Niels RoggeOpen In Colab
DistilGPT2のファインチューニングとテキスト生成DistilGPT2のファインチューニングとテキスト生成方法Aakash TripathiColabで開く
最大8KトークンでのLEDのファインチューニングロングレンジ要約のためのpubmedでLEDをファインチューニングする方法Patrick von PlatenColabで開く
ArxivでのLEDの評価ロングレンジ要約のためのLEDの効果的な評価方法Patrick von PlatenColabで開く
RVL-CDIP(文書画像分類データセット)でのLayoutLMのファインチューニングスキャンされた文書の分類のためのRVL-CDIPデータセットでLayoutLMForSequenceClassificationをファインチューニングする方法Niels RoggeColabで開く
Wav2Vec2 CTCデコーディングとGPT2の調整言語モデルの調整を伴うCTCシーケンスのデコーディング方法Eric LamColabで開く
Trainerクラスを使用した2言語の要約用にBARTをファインチューニングトレーナークラスを使用して2つの言語での要約用にBARTをファインチューニングする方法Eliza SzczechlaColabで開く
PubMedデータセットでBigBirdの評価Trivia QAの長いドキュメント質問応答でBigBirdの評価方法Patrick von PlatenColabで開く
Wav2Vec2を使用してビデオの字幕を作成するWav2Vecでオーディオを転記して任意のビデオからYouTubeの字幕を作成する方法Niklas MuennighoffColabで開く
PyTorch Lightningを使用したCIFAR-10でのVision TransformerのファインチューニングHuggingFace Transformers、Datasets、およびPyTorch Lightningを使用してCIFAR-10でVision Transformer(ViT)をファインチューニングする方法Niels RoggeColabで開く
🤗 Trainerを使用したCIFAR-10でのVision TransformerのファインチューニングHuggingFace Transformers、Datasets、および🤗 Trainerを使用してCIFAR-10でVision Transformer(ViT)をファインチューニングする方法Niels RoggeColabで開く
Open Entity、エンティティタイピングデータセットでLUKEの評価Open EntityデータセットでLukeForEntityClassificationの評価方法Ikuya YamadaColabで開く
TACRED、関係抽出データセットでLUKEの評価TACREDデータセットでLukeForEntityPairClassificationの評価方法Ikuya YamadaColabで開く
CoNLL-2003、重要なNERベンチマークでLUKEの評価CoNLL-2003データセットでLukeForEntitySpanClassificationの評価方法Ikuya YamadaColabで開く
PubMedデータセットでBigBird-Pegasusの評価PubMedデータセットでBigBirdPegasusForConditionalGenerationの評価方法Vasudev GuptaColabで開く
Wav2Vec2を使用したスピーチエモーション分類MEGAデータセットでの感情分類のための事前学習済みWav2Vec2モデルの利用方法Mehrdad FarahaniColabで開く
DETRを使用して画像内のオブジェクトを検出するトレーニング済みDetrForObjectDetectionモデルを使用して画像内のオブジェクトを検出し、注意を可視化する方法Niels RoggeColabで開く
カスタムオブジェクト検出データセットでDETRをファインチューニングするカスタムオブジェクト検出データセットでDetrForObjectDetectionをファインチューニングする方法Niels RoggeColabで開く
Named Entity RecognitionのためにT5をファインチューニングNamed Entity RecognitionタスクでT5をファインチューニングする方法Ogundepo OdunayoColabで開く