→図書館の大規模データ処理に「Google BigQuery」を使ってみよう(吉本 龍司)
47行目: | 47行目: | ||
===<span id="yoshimoto">[http://slides.com/ryuuji_y/deck-2/live 図書館の大規模データ処理に「Google BigQuery」を使ってみよう(吉本 龍司)]</span>=== | ===<span id="yoshimoto">[http://slides.com/ryuuji_y/deck-2/live 図書館の大規模データ処理に「Google BigQuery」を使ってみよう(吉本 龍司)]</span>=== | ||
::カーリルでは、日々発生するデータの統計処理にGoogleのビックデータ解析基盤である「Google BigQuery」を導入しています。これにより、スクレイピングの精度向上や、特定の地域内のラスト1を検出することなどが高速かつ低コストで実現可能になりました。実際に稼働しているプログラムをもとに、データの投入から、従来のシステムとの連携、データ活用の可能性について発表します。 | ::カーリルでは、日々発生するデータの統計処理にGoogleのビックデータ解析基盤である「Google BigQuery」を導入しています。これにより、スクレイピングの精度向上や、特定の地域内のラスト1を検出することなどが高速かつ低コストで実現可能になりました。実際に稼働しているプログラムをもとに、データの投入から、従来のシステムとの連携、データ活用の可能性について発表します。 | ||
データサンプル https://dl.dropboxusercontent.com/u/3024631/sample.tgz | |||
===<span id="kobayashii">ウィキペディアを介してまちと図書館をつなぐ試み「ウィキペディア・タウン」(小林 巌生)</span>=== | ===<span id="kobayashii">ウィキペディアを介してまちと図書館をつなぐ試み「ウィキペディア・タウン」(小林 巌生)</span>=== |