おおさわ/データ
をテンプレートにして作成
[
トップ
] [
新規
|
一覧
|
検索
|
最終更新
|
ヘルプ
]
開始行:
[[おおさわ]]
* Bugzilla のデータ取得 [#mbdda0b6]
あくまでもおおさわがデータ取得の際に利用していた方法です。
最適ではない可能性が多々あるのでご注意ください。
- cookies ファイルの作成(IEを利用する場合)
1.IEを利用して対象OSSプロジェクトのBugzillaにログイン
2.『ファイル』 -> 『インポートおよびエクスポート』 -> 『...
3.保存したファイルから必要な Cookie 情報のみを残す(※他の...
ex. eclipse bugzilla
- wget によるデータの取得
wget --load-cookies=cookies.txt https://bugs.eclipse.org...
(--load-cookies:cookiesファイルの指定)
大規模なデータ取得の際は5秒程度のインターバルを空けるこ...
ITCやプロジェクト側に怒られる可能性があります
- .sh ファイルの作成
上記のルールに従い.shファイルを作成すると以下のようになる
※改行コードは使用する環境に合わせてください
wget --no-check-certificate --load-cookies=cookies.txt h...
sleep 5;
wget --no-check-certificate --load-cookies=cookies.txt h...
sleep 5;
wget --no-check-certificate --load-cookies=cookies.txt h...
sleep 5;
・
・
・
上記.shファイルを生成するプログラム; &attachref(ordernumb...
- 大学の mac を利用する
1.putty 等を利用し大学のmacにアクセス
2.適当なディレクトリを作成し.shファイルを実行する(bash h...
3.管理できるすべてのmacでそれぞれ.shファイルを実行する
※大学管理のmacは定期的にシャットダウンがあるので注意して...
終了行:
[[おおさわ]]
* Bugzilla のデータ取得 [#mbdda0b6]
あくまでもおおさわがデータ取得の際に利用していた方法です。
最適ではない可能性が多々あるのでご注意ください。
- cookies ファイルの作成(IEを利用する場合)
1.IEを利用して対象OSSプロジェクトのBugzillaにログイン
2.『ファイル』 -> 『インポートおよびエクスポート』 -> 『...
3.保存したファイルから必要な Cookie 情報のみを残す(※他の...
ex. eclipse bugzilla
- wget によるデータの取得
wget --load-cookies=cookies.txt https://bugs.eclipse.org...
(--load-cookies:cookiesファイルの指定)
大規模なデータ取得の際は5秒程度のインターバルを空けるこ...
ITCやプロジェクト側に怒られる可能性があります
- .sh ファイルの作成
上記のルールに従い.shファイルを作成すると以下のようになる
※改行コードは使用する環境に合わせてください
wget --no-check-certificate --load-cookies=cookies.txt h...
sleep 5;
wget --no-check-certificate --load-cookies=cookies.txt h...
sleep 5;
wget --no-check-certificate --load-cookies=cookies.txt h...
sleep 5;
・
・
・
上記.shファイルを生成するプログラム; &attachref(ordernumb...
- 大学の mac を利用する
1.putty 等を利用し大学のmacにアクセス
2.適当なディレクトリを作成し.shファイルを実行する(bash h...
3.管理できるすべてのmacでそれぞれ.shファイルを実行する
※大学管理のmacは定期的にシャットダウンがあるので注意して...
ページ名:
![[PukiWiki]](image/wadanyan.png "[PukiWiki]")
