ジョブ・スケジューラ Rundeck で高機能 cron を実現する

2016-10-18

書いた人 : バツイチ
カテゴリ : スケジューラ | タグ : Rundeck, スケジューラ

Rundeck Rundeckとは簡単にいうと高機能なcronです。 cronと言われると、「サーバにログインしてcrontabで編集して…」というのを思い浮かべますが、Rundeckは違います。 Web G …
[続きをもっと見る…]

JVMチューニング: G1GCの使いどころとCMS GCからのマイグレート

2016-09-14

書いた人 : バツイチ
カテゴリ : jvm | タグ : java

Java7 Update4 (java7u4) で正式サポートされたG1GC(ガベージ・ファーストGC)ですが、Java9ではデフォルトGCになることが確定しています。参考: JEP248 またG1GCは、CMS GC …
[続きをもっと見る…]

2016-08-17

書いた人 : バツイチ
カテゴリ : 機械学習 | タグ : TensorFlow, 分散

分散TensorFlowでロジスティック回帰 -Distributed TensorFlow- その1の続きです。前回TensorFlowでシングル・ノード版のロジスティック回帰を実装し、MNISTの分類を行いました。 …
[続きをもっと見る…]

書いた人 : バツイチ
カテゴリ : 機械学習 | タグ : TensorFlow, 分散

TensorFlow0.8から並列分散処理がサポートされるようになりました。大量のデータに対して高コストな計算を行う機械学習でも、たくさんマシンを並べれば数分〜数時間で終わらせることができるのは魅力ですよね。どうやっ …
[続きをもっと見る…]

2016-06-20

書いた人 : バツイチ
カテゴリ : Apache Flink | タグ : Apache Zeppelin, fluentd, Kafka

前回、Apache FlinkとはでFlinkの概要に触れたのですが、今回は実践的にkafkaと連携させ、Apache Zeppelinでアドホックに分析してみます。 Zeppelinを使うのは、単純に、jar作って実行 …
[続きをもっと見る…]

2016-05-26

書いた人 : バツイチ
カテゴリ : Apache Flink | タグ : Apache Spark, flink

ストリーミング処理に本気で取り組む必要があったので Apache Flink を使ってみました。 Apache Flinkとは？分散ストリーミング処理エンジンです。ストリーミングのみならずバッチ処理も行うことができま …
[続きをもっと見る…]

2016-01-30

書いた人 : バツイチ
カテゴリ : scala, 技術じゃないやつ

Scala Matsuri 2016でお話させて頂いた「あなたのScalaを爆速にする7つの方法」の日本語版です。あなたのScalaを爆速にする７つの方法(日本語版) from x1 ichi 発表の時に使った英語版は …
[続きをもっと見る…]