ナード戦隊データマン

機械学習と自然言語処理についてのブログ

2019-05-19から1日間の記事一覧

bpembをkerasのEmbeddingに凍結

BPEmbとは、事前訓練済みのSentencepieceモデルです。 github.com 今回は、BPEmbをKerasのEmbedding layerに凍結する方法を書きます。 コード まず、以下のURLからBPEmbをダウンロードします。 https://github.com/bheinzerling/bpemb#downloads-for-each-la…