木村
福井さんのお手伝い†
Memo†
- PMFを用いる理由
- モデルをトレーニングさせた期間以降で新規タグが出現した場合に対応するためでは？
- 新規タグが出現した場合の推定には，新規タグと新規タグとともにつけられているタグの行列よりPMFを使用するか，新規タグ以外で推定するか
To Do†
ユーザの回答よりタグのスコアの重複具合を調査質問タグの一番左にあるタグ（質問のメインターゲットと仮定）を抽出し，全タグのどれだけの割合を占めているか- タグの抽象度を上げてカテゴリを作り，カテゴリごとでPMFを使用し結合させた行列と丸ごとPMFを使用した行列の違いを分析
- ネットワーク分析を用いてコミュニティ検出を行い，コミュニティを1つのカテゴリと位置付けてみる．
networkxにfind_clique()というコミュニティ検出メソッドが存在するのでそれを利用予定
- 上記で抽出したクラスタごとにPMFを使った場合とクラスタ分けをせずにPMFを使った場合の比較
- 知識の影響は隣接距離が１と仮定
- クラスタの中心は質問タグの一番タグ（最左タグ）で分類
Done†
- 重複スコアのデータ分析を実施
- 重複スコアの考慮の仕方として，回答のスコアを質問に付随しているタグに均等に分配する方法を利用
- 上記で示した方法でタグごとに加算したスコアを平均し，平均スコアを算出
- 軽くタグごとに平均スコアのランキングを目視したが，重複スコアを考慮しなかった場合に比べ変動している部分有り
sotorrentの構築†
- 接続のコンフィグは木村/MemoのPythonからMySQLへのアクセスにファイルを添付しているのでそれを参照してください
- Docker-MySQL 全テーブルのインポート完了 5/7 お疲れ様でしたm(_ _)m
- Docker-MySQL インデックス貼り付け 4/25[開始] 4/27[完了]
- Docker-MySQL メインテーブルのインポート 4/19[開始] 4/25[完了]
- 大量のフラグメンテーションが見られる
- 前回のデータを大量削除したため
- sshtunnelを用いたpythonでのMySQL接続に問題あり 4/19
- 不具合の原因不明(サーバのファイアーウォールが原因？？)
サーバMySQLへのインポート完了 4/18[確認]サーバのMySQLにインポート 順調 4/16[確認]Votesテーブルのインポートのみ 4/11[中断]メインテーブルのインポート 4/9[確認]
![[PukiWiki]](image/wadanyan.png "[PukiWiki]")
