今週のElastic News (2018/11/25～2018/12/01)

皆さん、こんにちは。@j-yamaです。

気が付けば今年も早くも12月…アドベントカレンダーが始まる時期になってきました。

2018年、Elastic Stack関連では以下3つのアドベントカレンダーが開催されるようです。（他にもあったら教えてください！）

1. Advent Calendar - Discuss the Elastic Stack
   • 昨年から始まったElastic公式によるアドベントカレンダーです。Discuss Forumへ投稿されます。昨年通りであれば、毎週公式ブログに(こんな感じの)まとめ記事がアップロードされていくと思います。
2. Elastic stack (Elasticsearch) Advent Calendar 2018 - Qiita
   • 日本コミュニティのアドベントカレンダーです。Qiitaへ投稿されます。まだ枠が空いてますので、我こそは！という方は登録してみてはいかがでしょうか。
3. advent - Elastic 中文社区
   • 中国コミュニティのアドベントカレンダーです。elasticsearch.cnへ投稿されます。中国語が読める方はそのままで、読めない方はGoogle翻訳を活用してアレしましょう。

当ブログでも、これまでと同様リンクは張っていきますが、最速で情報を仕入れたい方は直接アドベントカレンダーをチェックしてみてはいかがでしょうか。

---

今週、Elasticについて新たにWEBで観測した情報をまとめます。 （個人的に注目だと感じた記事は太字で紹介しています。）

公式ブログ

RELEASES

1. Elastic App Search Beta Released for On-Premise Deployments | Elastic

---

ENGINEERING

1. Elastic Machine Learning Anomaly Scoring with Partition Normalization and Multi-Bucket Analysis | Elastic
2. Using Data Table and Debug Elements in Canvas within Kibana | Elastic

---

Elastic Stack Updates

1. Keeping up with Kibana: This week in Kibana for Nov 19th, 2018 | Elastic

---

USER STORIES

1. Monitoring Airport Security Operations with Canvas & Elasticsearch | Elastic

---

OTHERS(NEWS/CULTURE/...)

• なし

---

ウェビナー

1. App Search : Déployez rapidement l'expérience de recherche Elasticsearch sur n'importe quelle plateforme (French) | Elastic
2. La business intelligence appliquée au texte dans l'entreprise ou sur le web (French) | Elastic
3. Building Effective Dashboards with Kibana and Elasticsearch | Elastic

---

その他ブログ記事など

Elastic公式情報以外の記事はカテゴリ別に分類して紹介しています。分類の基準が気になる方は「このブログについて」を参照ください。

今週から「関連プロダクト」の区分は廃止し、プラグインやSaaSプロダクトについてもユースケース別に分類するようにします。目的が分かり難かったので。

初心者向け（概説、インストールなど）

1. Ubuntu16.04に全文検索エンジンElasticsearchをインストール | テクナレジ
2. Windows環境で作るElasticsearch7.0（alpha1） - Qiita
3. Introduction to the Elastic stack – ilegra – Medium
4. All You Need to Know About the Technical Perspective of Elasticsearch - TechnoInsta
5. Uses of Elasticsearch and Things to Learn – Sasho Trajkov – Medium
6. Hands-on Introduction to Elasticsearch — II – Jitendra Agrawal – Medium
7. Elastic search and Kibana in AWS with docker – Richard Parkins – Medium

---

検索、言語別クライアントの実装例

1. [レポート]ANT203:NikeはこうしてElasticsearch選んだ！ #reinvent ｜ DevelopersIO
   • [レポート] ANT203 NIKE社でのElasticsearchを使った検索技術 #reinvent ｜ DevelopersIO
2. nextcloud + Elasticsearch で日本語全文検索が動いたメモ - Qiita
3. 検索サイトの検索ページのURL体系についての考察（Elasticsearchの製品哲学？の影響を受けた版） - はてだBlog（仮称）
4. Laravel5.5 使用 Elasticsearch 做引擎，scout 全文搜索 | Laravel China 社区 - 高品质的 Laravel 和 PHP 开发者社区
5. Vue.JS Components for building Search UIs – All things #datastreams

---

ログ監視/ログ分析

1. LogstashのApache用grokフィルタ %{COMBINEDAPACHELOG} - Qiita
2. 大きくなってきたIoTプロダクトのログ活用について 〜Amazon Elasticsearch Service篇〜 - フォトシンス エンジニアブログ
3. Ingest NGINX container access logs to ElasticSearch using Fluentd and Docker

---

モニタリング/パフォーマンス監視

1. MolochのDB内の解析結果をJupyterから分析する – Black304 – Medium
2. Visualizenetworktraffic 20181126

---

セキュリティ

1. New Data Breach exposes 57 million records - HackenProof Blog
   • ElasticSearch server exposed the personal data of over 57 million US citizens | ZDNet
   • Elastic-Search-Server gibt persönliche Daten von 57 Millionen Nutzern preis | ZDNet.de
   • Elasticsearch Snafu Exposes Data on 57 Million Americans - Infosecurity Magazine
   • Data about 57 million people exposed by Elasticsearch servers - Cyberscoop
   • Misconfigured ElasticSearch server leaks records of 57M US citizens - SiliconANGLE
   • ElasticSearch server exposed data of nearly 57M U.S. residents | SC Media
   • 57 Million Personal Info Records Leaked by Unprotected ElasticSearch Server
   • Misconfigured Elasticsearch servers leaked data of 57 million Americans - TechSpot
   • Misconfigured ElasticSearch server exposes 73 GB data of 57 million US citizens | Cyware
   • Records of 114 Million US Citizen and Companies Exposed Online
   • Unprotected ElasticSearch server exposes data of 57 million Americans
   • Unprotected Elasticsearch database exposed data of 57mn people
   • 'Data & Leads' Site Disappears After Data Exposure Alert
   • Elasticsearch data breach exposes records of 82m Americans - Netwrix comments - Global Security Mag Online
   • Сервер ElasticSearch раскрывал данные 57 000 000 человек - «Хакер»
   • Elasticsearch伺服器配置不當，8,000萬名美國民眾資料外洩曝光 | iThome
2. SKY Brasil Exposes 32 Million Customer Records
   • Servidor da SKY Brasil expôs 32 milhões de pessoas – CiberSecurity
3. Apathetic Cyber-Security: Data exposure and breach in major Bangladeshi companies

---

データ分析/データ集計

1. Azure DatabricksとElasticsearchの連携 - Qiita
2. KafkaからのデータをStructured Streamingで処理してElasticsearchに流す - Qiita
3. 新サービス・JOURNAL(ジャーナル)開発秘話 - Speaker Deck
4. How we solved ‘user selection’ to help merchants win business
5. BA Insight’s ConnectivityHub Extends Elastic into the Enterprise Search Market | AI-driven intelligent enterprise search software
   • BA Insight's ConnectivityHub Extends Elastic into the Enterprise Search Market - KMWorld Magazine

---

データ投入、可視化

1. Kibana Canvasでオシャレに可視化しよう - Qiita
2. Running a fluent-d cluster behind an AWS ELB for handling tcp input streams

---

運用Tips、トラブルシュート

1. Elasticsearch 6.5 Backup and Restore - Qiita
2. Elaschsearch 6.5 レプリカを無くす - Qiita
3. Elasticsearch で indices をさくっとクローズしたりする方法 - Qiita
4. How To Set Up an Elasticsearch, Fluentd and Kibana (EFK) Logging Stack on Kubernetes | DigitalOcean
5. Java embedded Elasticsearch for integration testing
6. elasticsearch 亿级数据检索案例与原理 - mikevictor - 博客园
7. Day 1 - ELK 使用小技巧（第 3 期） - Elastic 中文社区

---

その他

1. 2018年のElastic StackとElastic - @johtaniの日記 2nd
2. Field Stats Plugin for Elasticsearch 6.x Released - Sematext
3. What's New in Elastic Stack 6.5 | Logz.io

---

今週は以上です。

最新の情報を収集したい方向けに、情報収集に使用しているDiscordチャンネルを公開しています。ご興味ありましたら、こちらから参加ください。

また、Elasticsearchについてのツイート情報を閲覧できるKibanaダッシュボードをこちらで公開しています。以下のパスワードでログインするとダッシュボードオンリーユーザーとして閲覧できるはずです。

• ID: elasticlover
• password: watchtwitterinfo

Elastic Cloudの環境提供は@johtaniさんです。ご協力、ありがとうございます。提供いただいた経緯はこちらから確認できます。