ほぼ日刊サービス開発日誌

5月は機械学習とReact

自然言語処理

kerasでモデルと重みを保存して再利用する方法

kerasは モデルの構造 モデルの重み を別々に保存する構造になっています。 モデルの構造はjson、もしくはyamlで保存されます。 モデルの重みは HDF5フォーマットで保存されます。これは多次元の配列を保存するのに適した形式です。 # モデルの構造を保存す…

文章類似度判定アルゴリズムとrubyでの実装例(1)n-gram, Jaccard Similarity

n-gram n-gramは、フランス語や日本語や大阪弁といった、人が自然に使う言語「自然言語」で記述された文章の特徴を定量的に分析するために開発された手法。「N文字インデックス法」ともいう。 ある文章の中に、ある文字の並びが何回出現したか、をカウントす…