Elasticsearch: Unterschied zwischen den Versionen

Aus KGS-Wiki
(Änderung doppel siu)
Keine Bearbeitungszusammenfassung
 
(10 dazwischenliegende Versionen von 2 Benutzern werden nicht angezeigt)
Zeile 1: Zeile 1:
= Introduction =
[[File:Elasticsearch logo.svg|thumb|Aktuelles Logo von Elasticsearch, Stand 16.03.2023]][[Elasticsearch]]<ref>'''Elasticsearch:''' [https://www.elastic.co/de/what-is/elasticsearch elastic.co] Abgerufen am 15.03.2023</ref> ist eine offene,  kostenlose und starke [[Suchmaschine]], basierend auf [[Apache Lucene]].<ref>'''Apache Lucene:''' [https://Lucene.apache.org lucene.apache.org] Abgerufen am 15.03.2023</ref>  Das Programm speichert Dokumente in einem [[NoSQL]]-Format ([[JSON]]) und kommuniziert mit [[Client|Clients]] über ein [[REST|RESTful]]<ref>'''Representational State Transfer:''' [https://de.wikipedia.org/wiki/Representational_State_Transfer wikipedia.org] Abgerufen am 15.03.2023</ref> Webinterface.  Als eines der weitverbreitesten [[Server|Suchserver]]  besitzt es viele Verwendungszwecke und bietet viele Vorteile, wie Geschwindigkeit (Fast-Echtzeit),  Verteiltheit, Varietät vielerlei Funktionen und die einfache Nutzung für Jedermann.
Elasticsearch<ref>'''Elasticsearch'''  
Außerdem unterstützt Elasticsearch derzeit 34 Sprachen,  welche aufgelistet in der [[ELA-D]]<ref>'''Elasticsearch Language Analyzer-Dokumentation:''' [https://www.elastic.co/guide/en/elasticsearch/reference/current/analysis-lang-analyzer.html elastic.co] abgerufen am 15.03.2023</ref> zu finden sind. Außerdem werden viele Programmiersprachen unterstützt und aktuell gibt es offiziell bereitstehende Clients für die folgenden Sprachen: 


[https://www.elastic.co/de/what-is/elasticsearch elastic.co] Abgerufen am 15.03.2023</ref> ist eine offene,  kostenlose und starke Suchmaschine, basierend auf Apache Lucene.<ref>'''Apache Lucene'''
* [[Java (Programmiersprache)|Java]]
* [[JavaScript]] ([[Node.js]])
* [[Go (Programmiersprache)|Go]]
* [[.NET]] ([[C-Sharp|C#]])
* [[PHP]]
* [[Perl]]
* [[Python (Programmiersprache)|Python]]
* [[Ruby]]


[https://Lucene.apache.org lucene.apache.org] Abgerufen am 15.03.2023</ref>  Das Programm speichert Dokumente in einem NoSQL-Format (JSON) und kommuniziert mit Clients über ein RESTful<ref>'''Representational State Transfer''' 
== Verwendungszwecke ==


[https://de.wikipedia.org/wiki/Representational_State_Transfer wikipedia.org] Abgerufen am 15.03.2023</ref> Webinterface.  Als eines der weitverbreitesten Suchserver  besitzt es viele Verwendungszwecke<ref>'''Verwendungszwecke'''
# Suche in Anwendungen (App Search)
# Suche auf Websites (Site Search)
# Suche in Unternehmensdaten (Enterprise Search)
# Logging und Log Analytics
# Infrastrukturmetriken und Container-Monitoring
# Monitoring der Anwendungsleistung (Application Performance Monitoring, APM)
# Analyse und Visualisierung von Geodaten
# Analyse von Sicherheitsdaten (Security Analytics)
# Business-Analytics


1. Suche in Anwendungen (App Search)
= Funktionsweise =
Elasticsearch empfängt viele Rohdaten aus verschiedenen Quellen, wie [[Log|Logs]] und Webanwendungen, worauf diese Daten dann daraufhin [[Parser|geparst]], normalisiert und angereichert. Dann werden die Daten zum Schluss in Elasticsearch indexiert. Nach der [[Indexierung]] können Nutzer komplexe Abrufungen starten und anhand Aggregationen komplexe Zusammenfassungen erhalten. Anschließend bietet [[Kibana]]<ref>'''Kibana:'''Kibana ist die offizielle Benutzeroberfläche von Elasticsearch. Für Elasticsearch-Nutzer ist Kibana die effektivste Benutzeroberfläche für die Gewinnung von Dateneinblicken. ''(und die aktive Verwaltung des Zustands ihres Elastic Stack).'' [https://www.elastic.co/de/what-is/kibana elastic.co] Abgerufen am 15.03.2023</ref> die Möglichkeit die Daten auf verschiedenen Weisen abzurufen, zu visualisieren, mit anderen Nutzern zu teilen und [[Elasticstack]] zu verwalten.


2. Suche auf Websites (Site Search)
=== Verteiltheit ===
Die in Elasticsearch gespeicherten Dokumente werden auf verschiedene Container, die sogenannten ''Shards'', verteilt, die dupliziert werden, sodass im Fall eines Hardware-Ausfalls redundante Kopien parat sind. Die Verteiltheit von Elasticsearch macht es möglich, Elasticsearch auf Hunderte von Servern zu skalieren und Daten Petabyte-weise zu verarbeiten.


3. Suche in Unternehmensdaten (Enterprise Search)
= Installation =
 
4. Logging und Log Analytics
 
5.  Infrastrukturmetriken und Container-Monitoring
 
6. Monitoring der Anwendungsleistung (Application Performance Monitoring, APM)
 
7. Analyse und Visualisierung von Geodaten
 
8. Analyse von Sicherheitsdaten (Security Analytics)
 
9. Business-Analytics</ref> und bietet viele Vorteile, wie Geschwindigkeit (Fast-Echtzeit),  Verteiltheit<ref>'''Verteiltheit'''
 
Die in Elasticsearch gespeicherten Dokumente werden auf verschiedene Container, die sogenannten ''Shards'', verteilt, die dupliziert werden, sodass im Fall eines Hardware-Ausfalls redundante Kopien parat sind. Die Verteiltheit von Elasticsearch macht es möglich, Elasticsearch auf Hunderte von Servern zu skalieren und Daten Petabyte-weise zu verarbeiten.</ref>, Varietät vielerlei Funktionen und die einfache Nutzung für Jedermann.
[[Datei:Elasticsearch.png|mini|189x189px|''Aktuelles Logo von Easticsearch, Stand 16.03.2023'']]
Außerdem unterstützt Elasticsearch derzeit 34 Sprachen,  welche aufgelistet in der ELA-D<ref>'''Elasticsearch Language Analyzer-Dokumentation'''
 
[https://www.elastic.co/guide/en/elasticsearch/reference/current/analysis-lang-analyzer.html elastic.co] abgerufen am 15.03.2023</ref> zu finden sind. Außerdem werden viele Programmiersprachen unterstützt und aktuell gibt es offiziell bereitstehende Clients für die folgenden Sprachen: 
 
* Java
* JavaScript (Node.js)
* Go
* .NET (C#)
* PHP
* Perl
* Python
* Ruby
 
== Funktionsweise ==
Elasticsearch empfängt viele Rohdaten aus verschiedenen Quellen, wie Logs und Webanwedungen, worauf diese Daten dann daraufhin geparst<ref>'''Definition'''
 
maschinenlesbare Daten analysieren, segmentieren und codieren</ref>, normalisiert und angereichert. Dann werden die Daten zum Schluss in Elasticsearch indexiert. Nach der Indexierung können Nutzer komplexe Abrufungen starten und anhand Aggregationen komplexe Zusammenfassungen erhalten. Anschließend bietet Kibana<ref>'''Kibana'''
 
Kibana ist die offizielle Benutzeroberfläche von Elasticsearch. Für Elasticsearch-Nutzer ist Kibana die effektivste Benutzeroberfläche für die Gewinnung von Dateneinblicken. ''(und die aktive Verwaltung des Zustands ihres Elastic Stack)''
 
[https://www.elastic.co/de/what-is/kibana elastic.co] Abgerufen am 15.03.2023</ref> die Möglichkeit die Daten auf verschiedenen Weisen abzurufen, zu visualisieren, mit anderen Nutzern zu teilen und Elasticstack zu verwalten.
 
== Installation ==
{| class="wikitable"
{| class="wikitable"
|+
|+
|Linux und MacOS <code>tar.gz</code> Archive
|Linux und MacOS <code>tar.gz</code> Archive
|Elastic Search auf Linux oder MacOS von den  <code>tar.gz</code> Archiven.
|Elastic Search auf [[Linux]] oder [[MacOS]] von den  <code>tar.gz</code> Archiven.
[https://www.elastic.co/guide/en/elasticsearch/reference/current/targz.html DownloadGuide]
[https://www.elastic.co/guide/en/elasticsearch/reference/current/targz.html DownloadGuide]
|-
|-
|Windows <code>.zip</code> Archiv
|Windows <code>.zip</code> Archiv
|<code>.zip</code> Archiv ist für eine Windows Installation geeignet.
|<code>.zip</code> Archiv ist für eine [[Windows]] Installation geeignet.
[https://www.elastic.co/guide/en/elasticsearch/reference/current/zip-windows.html DownloadGuide]
[https://www.elastic.co/guide/en/elasticsearch/reference/current/zip-windows.html DownloadGuide]
|-
|-
|<code>deb</code>  
|<code>deb</code>  
|Das  <code>deb</code> Packet ist geeignet für Debian, Ubuntu und andere Debian-orientierte Systeme.
|Das  <code>deb</code> Packet ist geeignet für [[Debian]], [[Ubuntu]] und andere Debian-orientierte Systeme.
Debian Packete können von der Elasticsearch Website oder vom Debian Depot herruntergeladen werden.
Debian Packete können von der Elasticsearch Website oder vom Debian Depot herruntergeladen werden.


Zeile 68: Zeile 47:
|-
|-
|<code>rpm</code>  
|<code>rpm</code>  
|Das  <code>rpm</code> Packet ist geeignet für Red Hat, Centos, SLES, OpenSuSE und andere RPM-orientierte Systeme.
|Das  <code>rpm</code> Packet ist geeignet für [[Red Hat]], [[Centos]], [[SLES]], [[OpenSuSE]] und andere RPM-orientierte Systeme.
RPM Packete können von der Elasticsearch Website oder vom RPM Depot herruntergeladen werden.
RPM Packete können von der Elasticsearch Website oder vom RPM Depot herruntergeladen werden.


Zeile 79: Zeile 58:
[[Datei:Elasticstack.svg|mini|''Aufbau Elasticstack, Stand 16.03.2023;'' https://www.elastic.co/de/what-is/elk-stack]]
[[Datei:Elasticstack.svg|mini|''Aufbau Elasticstack, Stand 16.03.2023;'' https://www.elastic.co/de/what-is/elk-stack]]


== Elastic Stack ==
= Elastic Stack =
ELK Stack, auch bekannt als Elastic Stack, ist eine Kombination aus mehreren Komponenten, wie Kibana, Elasticsearch, Beats<ref>'''Beats'''  
ELK Stack, auch bekannt als Elastic Stack, ist eine Kombination aus mehreren Komponenten, wie [[Kibana]], [[Elasticsearch]], [[Beats]]<ref>'''Beats:''' Eine offene Platform für Daten-shipper, welche Hunderte oder Tausende von Daten von Maschinen und Systemen an Logstash oder Elasticsearch weiterleiten. [https://www.elastic.co/de/beats/ elastic.co] abgerufen am 16.03.2023</ref> und [[Logstash]].<ref>'''Logstash''' ist eine offene serverweitige Datenverarbeitungsleitung, welche Daten aus vielseitigen Quellen ingestiert, transformiert und absendet. [https://www.elastic.co/de/logstash/ elastic.co] abgerufen am 16.03.2023</ref>Es ist dazu da um dem Nutzer dabei zu helfen, Daten aus beliebigen Quellen und in beliebigen Formaten zu nutzen und diese Daten in Echtzeit zu durchsuchen, zu analysieren und zu visualisieren.
 
Eine offene Platform für Daten-shipper, welche Hunderte oder Tausende von Daten von Maschinen und Systemen an Logstash oder Elasticsearch weiterleiten
 
[https://www.elastic.co/de/beats/ elastic.co] abgerufen am 16.03.2023</ref> und Logstash.<ref>'''Logstash'''  
 
ist eine offene serverweitige Datenverarbeitungsleitung, welche Daten aus vielseitigen Quellen ingestiert, transformiert und absendet
 
[https://www.elastic.co/de/logstash/ elastic.co] abgerufen am 16.03.2023</ref>Es ist dazu da um die Nutzer dabei zu helfen, Daten aus beliebigen Quellen und in beliebigen Formaten zu nutzen und diese Daten in Echtzeit zu durchsuchen, zu analysieren und zu visualisieren.


== Einzelnachweise ==
= Einzelnachweise =
<references />{{Navigationsleiste Datenbanken}}
<references />{{Navigationsleiste Datenbanken}}
[[Kategorie:Datenbanken]]

Aktuelle Version vom 29. September 2023, 14:10 Uhr

Aktuelles Logo von Elasticsearch, Stand 16.03.2023

Elasticsearch[1] ist eine offene, kostenlose und starke Suchmaschine, basierend auf Apache Lucene.[2] Das Programm speichert Dokumente in einem NoSQL-Format (JSON) und kommuniziert mit Clients über ein RESTful[3] Webinterface. Als eines der weitverbreitesten Suchserver besitzt es viele Verwendungszwecke und bietet viele Vorteile, wie Geschwindigkeit (Fast-Echtzeit), Verteiltheit, Varietät vielerlei Funktionen und die einfache Nutzung für Jedermann.

Außerdem unterstützt Elasticsearch derzeit 34 Sprachen, welche aufgelistet in der ELA-D[4] zu finden sind. Außerdem werden viele Programmiersprachen unterstützt und aktuell gibt es offiziell bereitstehende Clients für die folgenden Sprachen:

Verwendungszwecke

  1. Suche in Anwendungen (App Search)
  2. Suche auf Websites (Site Search)
  3. Suche in Unternehmensdaten (Enterprise Search)
  4. Logging und Log Analytics
  5. Infrastrukturmetriken und Container-Monitoring
  6. Monitoring der Anwendungsleistung (Application Performance Monitoring, APM)
  7. Analyse und Visualisierung von Geodaten
  8. Analyse von Sicherheitsdaten (Security Analytics)
  9. Business-Analytics

Funktionsweise

Elasticsearch empfängt viele Rohdaten aus verschiedenen Quellen, wie Logs und Webanwendungen, worauf diese Daten dann daraufhin geparst, normalisiert und angereichert. Dann werden die Daten zum Schluss in Elasticsearch indexiert. Nach der Indexierung können Nutzer komplexe Abrufungen starten und anhand Aggregationen komplexe Zusammenfassungen erhalten. Anschließend bietet Kibana[5] die Möglichkeit die Daten auf verschiedenen Weisen abzurufen, zu visualisieren, mit anderen Nutzern zu teilen und Elasticstack zu verwalten.

Verteiltheit

Die in Elasticsearch gespeicherten Dokumente werden auf verschiedene Container, die sogenannten Shards, verteilt, die dupliziert werden, sodass im Fall eines Hardware-Ausfalls redundante Kopien parat sind. Die Verteiltheit von Elasticsearch macht es möglich, Elasticsearch auf Hunderte von Servern zu skalieren und Daten Petabyte-weise zu verarbeiten.

Installation

Linux und MacOS tar.gz Archive Elastic Search auf Linux oder MacOS von den tar.gz Archiven.

DownloadGuide

Windows .zip Archiv .zip Archiv ist für eine Windows Installation geeignet.

DownloadGuide

deb Das deb Packet ist geeignet für Debian, Ubuntu und andere Debian-orientierte Systeme.

Debian Packete können von der Elasticsearch Website oder vom Debian Depot herruntergeladen werden.

DownloadGuide

rpm Das rpm Packet ist geeignet für Red Hat, Centos, SLES, OpenSuSE und andere RPM-orientierte Systeme.

RPM Packete können von der Elasticsearch Website oder vom RPM Depot herruntergeladen werden.

DownloadGuide

docker Bilder sind zum Laufen von Elasticsearch als Docker Kontainer da. Sie können von der Elastic Docker Registrierung herruntergeladen werden.

DownloadGuide

Aufbau Elasticstack, Stand 16.03.2023; https://www.elastic.co/de/what-is/elk-stack

Elastic Stack

ELK Stack, auch bekannt als Elastic Stack, ist eine Kombination aus mehreren Komponenten, wie Kibana, Elasticsearch, Beats[6] und Logstash.[7]Es ist dazu da um dem Nutzer dabei zu helfen, Daten aus beliebigen Quellen und in beliebigen Formaten zu nutzen und diese Daten in Echtzeit zu durchsuchen, zu analysieren und zu visualisieren.

Einzelnachweise

  1. ↑ Elasticsearch: elastic.co Abgerufen am 15.03.2023
  2. ↑ Apache Lucene: lucene.apache.org Abgerufen am 15.03.2023
  3. ↑ Representational State Transfer: wikipedia.org Abgerufen am 15.03.2023
  4. ↑ Elasticsearch Language Analyzer-Dokumentation: elastic.co abgerufen am 15.03.2023
  5. ↑ Kibana:Kibana ist die offizielle Benutzeroberfläche von Elasticsearch. Für Elasticsearch-Nutzer ist Kibana die effektivste Benutzeroberfläche für die Gewinnung von Dateneinblicken. (und die aktive Verwaltung des Zustands ihres Elastic Stack). elastic.co Abgerufen am 15.03.2023
  6. ↑ Beats: Eine offene Platform für Daten-shipper, welche Hunderte oder Tausende von Daten von Maschinen und Systemen an Logstash oder Elasticsearch weiterleiten. elastic.co abgerufen am 16.03.2023
  7. ↑ Logstash ist eine offene serverweitige Datenverarbeitungsleitung, welche Daten aus vielseitigen Quellen ingestiert, transformiert und absendet. elastic.co abgerufen am 16.03.2023
Abgerufen von „https://wiki.kah.gs/index.php?title=Elasticsearch&oldid=3336“