Logstash

集中、轉換和存儲數據

Logstash 是免費且開放的服務器端數據處理管道,能夠從多個來源採集數據,轉換數據,然後將數據發送到您最喜歡的儲存載體中。

Logstash

集中、轉換和存儲數據

Logstash 是免費且開放的服務器端數據處理管道,能夠從多個來源採集數據,轉換數據,然後將數據發送到您最喜歡的“存儲庫”中。

採集,還有更多

輸入、過濾器和輸出

Logstash 能夠動態地採集、轉換和傳輸數據,不受格式或複雜度的影響。

利用Grok 從非結構化數據中解析出資料結構,從IP 地址解碼出地理坐標,匿名化或排除敏感字段,並簡化整體處理過程。 

diagram-logstash-inputs

輸入

採集各種樣式、大小和來源的數據

數據往往以各種各樣的形式,或分散或集中地存在於很多系統中。Logstash 支持各種輸入選擇,可以同時從眾多常用來源捕捉事件。能夠以連續的流式傳輸方式,輕鬆地從您的日誌、指標、Web 應用、數據存儲以及各種AWS 服務採集數據。

採集,還有更多

輸入、過濾器和輸出

Logstash 能夠動態地採集、轉換和傳輸數據,不受格式或複雜度的影響。利用Grok 從非結構化數據中派生出結構,從IP 地址解碼出地理坐標,匿名化或排除敏感字段,並簡化整體處理過程。

diagram-logstash-inputs

輸入

採集各種樣式
大小和來源的數據

數據往往以各種各樣的形式,或分散或集中地存在於很多系統中。Logstash 支持各種輸入選擇,可以同時從眾多常用來源捕捉事件。能夠以連續的流式傳輸方式,輕鬆地從您的日誌、指標、Web 應用、數據存儲以及各種AWS 服務採集數據。

篩選

實時解析和轉換數據

數據從資料源傳輸到儲存載體的過程中,Logstash 過濾器能夠解析各個事件,識別已命名的欄位以構建資料結構,並將它們轉換成通用格式,以便進行更強大的分析和實現商業價值。

Logstash 能夠動態地轉換和解析數據,不受格式或複雜度的影響:

  • 利用Grok 從非結構化數據中解析出資料結構
  • 從IP 地址破譯出地理坐標
  • 將PII 數據匿名化,完全排除敏感字段
  • 簡化整體處理,不受數據源、格式或架構的影響

使用我們豐富的過濾器Plugin和功能多樣的Elastic Common Schema,您可以實現無限豐富的可能。

diagram-logstash-filters
diagram-logstash-filters

篩選

實時解析和轉換數據

數據從源傳輸到存儲庫的過程中,Logstash 過濾器能夠解析各個事件,識別已命名的字段以構建結構,並將它們轉換成通用格式,以便進行更強大的分析和實現商業價值。

Logstash 能夠動態地轉換和解析數據,不受格式或複雜度的影響:

  • 利用Grok 從非結構化數據中派生出結構
  • 從IP 地址破譯出地理坐標
  • 將PII 數據匿名化,完全排除敏感字段
  • 簡化整體處理,不受數據源、格式或架構的影響

使用我們豐富的過濾器庫和功能多樣的Elastic Common Schema,您可以實現無限豐富的可能。

diagram-logstash-outputs

輸出

選擇您的儲存載體,導出您的數據

儘管Elasticsearch 是我們的首選輸出方向,能夠為我們的搜索和分析帶來無限可能,但它並非唯一選擇。

Logstash 提供眾多輸出選擇,您可以將數據發送到您要指定的地方,並且能夠靈活地解鎖眾多下游用例。

diagram-logstash-outputs

輸出

選擇您的存儲庫,導出您的數據

儘管Elasticsearch 是我們的首選輸出方向,能夠為我們的搜索和分析帶來無限可能,但它並非唯一選擇。

Logstash 提供眾多輸出選擇,您可以將數據發送到您要指定的地方,並且能夠靈活地解鎖眾多下游用例。

可擴展

以您自己的方式創建和配置管道

Logstash 採用可插拔框架,擁有200 多個Plugin。您可以將不同的輸入選擇、過濾器和輸出選擇混合搭配、精心安排,讓它們在管道中和諧地運行。

從自定義應用程序採集數據?沒有看到所需的插件?Logstash  Plugin很容易開發。我們有一個極好的Plugin開發API 和生成器,可幫助您開始創作並分享成果。

可擴展

以您自己的方式創建和配置管道

Logstash 採用可插拔框架,擁有200 多個插件。您可以將不同的輸入選擇、過濾器和輸出選擇混合搭配、精心安排,讓它們在管道中和諧地運行。

從自定義應用程序採集數據?沒有看到所需的插件?Logstash 插件很容易構建。我們有一個極好的插件開發API 和插件生成器,可幫助您開始創作並分享成果。

開箱即用

使用 Elastic Stack 更快獲得洞察

Logstash 模組通過熱門的數據源(如 ArcSight 和 Netflow )呈現瞬間可視化的體驗。通過立即部署採集管道和複雜的儀表板,您在短短幾分鐘內便可開始數據探索。

即插即用

使用Elastic Stack 更快獲得洞察

Logstash 模塊通過熱門的數據源(如ArcSight 和Netflow )呈現瞬間可視化的體驗。通過立即部署採集管道和復雜的儀表板,您在短短幾分鐘內便可開始數據探索。

可靠性與安全性

建構可信的資料處理管道

假如Logstash 節點發生故障,Logstash 會通過持久化佇列來保證至少將運行中的事件送達一次。那些未被正常處理的消息會被送往死信佇列(dead letter queue) 以便做進一步處理。由於具備了這種吸收吞吐量的能力,現在您無需採用額外的佇列元件,Logstash 就能平穩度過高峰期。此外,我們還能讓您充分確保自己資料處理管道的安全性。

可靠性與安全性

構建可信的交付管道

假如Logstash 節點發生故障,Logstash 會通過持久化隊列來保證至少將運行中的事件送達一次。那些未被正常處理的消息會被送往死信隊列(dead letter queue) 以便做進一步處理。由於具備了這種吸收吞吐量的能力,現在您無需採用額外的隊列層,Logstash 就能平穩度過高峰期。此外,我們還能讓您充分確保自己採集管道的安全性。

MONITORING

全方位監視您的部署元件

Logstash 管道通常服務於多種用途,會變得非常複雜,因此充分了解管道的性能、可用性和瓶頸就非常重要。

借助監測和管道檢視器功能,您可以輕鬆觀察和研究處於活動狀態的Logstash 節點或所有部署元件。

MONITORING

全方位監視您的部署

Logstash 管道通常服務於多種用途,會變得非常複雜,因此充分了解管道性能、可用性和瓶頸異常重要。借助監測和管道查看器功能,您可以輕鬆觀察和研究處於活動狀態的Logstash 節點或整個部署。

管理和編排

使用單個UI 集中管理部署

借助 Pipeline 管理圖形界面(UI) 來管理Logstash 的部署,您可以輕而易舉地編排和管理自己的管道。

此外,此項管理功能也與內置Security 功能無縫整合,用以避免任何意外操作。

管理和編排

使用單個UI 集中管理部署

借助Pipeline 管理圖形界面(UI) 來管理Logstash 的部署,您可以輕而易舉地編排和管理自己的管道。此外,此項管理功能也與內置Security 功能無縫集成,用以避免任何意外操作。

更多相關內容

可幫助您構建搜索體驗、解決問題並取得成功的搜索平台。

Logstash 是免費且開放的服務器端數據處理管道,能從多個來源採集數據,轉換數據,然後將數據發送到您的儲存載體中。

可以進行各種操作,從跟踪查詢負載,到理解。

Logs

快速且可擴展的日誌管理,絕不會讓您失望。

Infrastructure Monitoring

Metrics

對您的系統指標進行監測和可視化。

APM

獲得有關應用程序性能的洞察。

Uptime

監測可用性問題並進行應對。

Site Search

Site Search

為您的網站打造卓越的搜索體驗。

App Search

App Search

搜索文擋、地理數據等相關的內容

Workplace Search

Workplace Search

集中式搜索應對企業內的數據孤島情況。

Maps

Maps

實時探索位置的數據。

SIEM

SIEM

交互式調查和自動威脅檢測

Endpoint Security

Endpoint Security

預防檢測獵捕並應對威脅。

 

專人協助

由偉康業務人員為您詳細說明偉康的解決方案及相關產業經驗

專人協助

由偉康業務人員為您詳細說明偉康的解決方案及相關產業經驗