2016年1月19日

データ基盤選定

弊社も今後、データを活用していくのですが、その上で重要な基盤の選定があります。 もともと、AWSのEMRで進める予定でしたが運用費及び管理するためのスキル伝播を考えるとコストが高いという判断になりまし…

2015年11月16日

バックエンドを構成変更してサーバレスへ

サーバの運用というものは生産性がないけど行っていかなければならないものです。 そこにはハードの維持管理や状況を監視しておくための運用コストというものが関わってきます。 これらを抑えつつ、でもサービス状…

2015年9月16日

Hadoop構築の実践学習4(HBSE)

概要 Hadoop構築の実践学習3(HDFS)の続きになります。 ※Hadoop、Zookeeperの設定が完了していることが前提になります。 HadoopファミリーのHBaseの冗長化を進めていきま…

2015年8月25日

Hadoop構築の実践学習メモ3(HDFS)

概要 Hadoop構築学習2の続きになります。 ※Zookeeperのアンサンブルが組まれていることが前提になります。 今回はHDFSの冗長化を行っていきます。 HDFS HA エラーが起きて調査しな…

2015年8月3日

Hadoop構築の実践学習メモ1(事前準備)

仕事で使うことになり、「勉強しないとまずいな」と思ったので自宅で構築の事前確認をしました。 Zookeeper、HDFS、HBaseに関しては冗長化の設定とその確認までを目標にします。 ※つまづきなが…

2015年7月13日

Webサービス・サーバーの無停止化を試行(1)

巷で話題のビッグデータですが、裏方の作業は本当に大変です。 データベースやサーバーなどシステムと名のつくものは、必ずキャパシティ(許容限界)というのが存在し、それをクリアする事が地味ながらも非常に大変…

2015年5月28日

Webアプリ開発の作業効率を高めるために

普段なにげなく開発等で使っているターミナルの環境ですが、社内皆それぞれ違っていて面白いと思ったので自分がよく使うものを紹介したいなと思います。 概要 editerあたりの話になるとちょっと面倒なので、…

  • 1
  • 2