Logstash

Upravljanje podacima je temeljni dio tech orijentiranih poduzeća, i danas, podaci mogu doći iz mnogih izvora istovremeno. No, kako se tvrtka organizira veliki protok podataka sa svih strana? Ovo je mjesto gdje Logstash dolazi u ruci. To strani poslužitelja program posebno je dizajniran kako bi uzimati podatke iz svih „veličina, oblika i izvora.” Tijekom obrade, podaci mogu biti poslani putem filtera kako bi se utvrdilo njihovo krajnje odredište, što može biti jedan ili razne „stashes”, kao što su poslužitelji, oblacima ili drugih skladišnih prostora. Podaci se mogu unijeti iz elastičnog otkucaja, Amazon Web Services CloudWatch API, Couch DB, Elasticsearch klastera, ljuska naredbenog izlaz, događaje iz datoteka, ganglija pakete preko UDP, GELF formata poruke (kao događaje) putem Graylog2, Google Cloud PubSub, grafit, HTTP ili HTTPS događaji, događaji iz IRC poslužitelja, JMS brokera događanja, Java aplikacija metrika preko JMX, AWS kinezi tok događaja, drvosječa, lutaka poslužitelja događanja, razmjena RabbitMQ događanja, RELP događanja preko TCP socket, Salesforce SOq upita, SNMP trap događaji , AWS Jednostavno Red servis, Twitter streaming API, Unix socket događaje, XMPP / Jabber protokol događanja i još mnogo toga. Postoji čak i plugin za generiranje slučajnih događaja za testiranje svrhe. Logstash je pogodno za automatizaciju prikupljanje i obradu podataka, čime se štedi mnogo vremena produktivnosti za druge poslove. Softver je vrlo konfigurabilan, a više od 200 dodataka postoje da bi bili sigurni da Logstash može nositi što god podatke koje je dano.