クリーンインストールしたからか、ローカルにgsutilコマンド無くなってたので、入れ直してみた。 前回はgsutilだけをインストールして使ってたけど、ドキュメントによるとGoogle Cloud SDK入れてその中のgsutilコンポーネント使ってね、って感じに変わってた…

データ入れる ストア管理画面から、アプリデータのcsvファイルを取得して、./app_data/csv/に入れる。 簡単なconfigurationをseed.ymlに書く。 in: type: file path_prefix: ./app_data/csv/ out: type: elasticsearch index: app_data index_type: android …

これはなに 前回のMysqlからESにデータを200万件くらい入れるとエラー出て5000件くらい喪失してた件。 MysqlからElasticsearchにデータを入れる - mazeltov7のweb断片 ログをチェックすると、esrejectedexecutionexception queue capacity 50とか出てて、こ…

embulkを入れる GitHub - embulk/embulk: Embulk: Pluggable Bulk Data Loader. http://www.embulk.org $ brew install embulk ドキュメントのGetting Startedやって雰囲気をつかむ。 embulkのpluginのembulk-input-mysql, embulk-output-elasticsearchを入…

node入れようとする brewで入れると最新バージョン取ってくるので、今だと以下の6.5.0を取ってくる。 まぁ、いいけどメジャーなrecommendedの方が良さそうな気がするので、バージョン切り替えしやすいようにしておくためにnvmを入れる。 （brewで入れたnode…

検索とかメインじゃなくて、データ表示がメインです。 Elasticsearchをダウンロード 公式サイトからzipをダウンロードする。 (brewで入れてもいいんだけど、plugin使うならpathが微妙だったので、そのまま入れる) Download Elasticsearch Free • Get Started…

新Win機を開封 なんだか久々のwindowsよろしく。結構本気構成 [スペック] OS：Windows10 64bit CPU：Intel Core i7-6700CPU @ 3.40GHz GPU：GeForce GTX 1070 HDD：ST2000DM001 [2TB SATA600 7200] SSD：BX200 CT480BX200SSD1 [480GB] メモリ：16G RAM Oculu…