以ELK Stack環境實作一個校園無線網路日誌分析系統

楊朝棟 ； 陳彩進 ； 曹書恒 ； 孫岳 ； 張廣欽 ； 賴傳霖

《TANET2016 臺灣網際網路研討會》 2016 (2016/11) Pp. 628-633-113

https://doi.org/10.6679/TANET.2016.113

摘要

雲端運算與服務是指可以隨時 、隨地 、依需求 、使用任何裝置情況之服務。針對巨量資料之Log 分析，本論文透過日誌數據對於系統的情況成為一種很重要之資訊。關於考慮異常數據與分析需求，本論文主要應用在於收集即時校園Wi-Fi Log 資料、視覺化與分析。為了能從快速更新的Log 之中，以一個直觀、快捷的方式獲取通過Log可以分析出的一些資訊以及分析出系統存在的問題。本系統應用Elasticsearch、Logstash、Kibana這三個開源軟體的組合，對Log 進行即時分析與統計。通過這個系統的統計圖表，可以快速瞭解當前系統的情況。這一整套系統透過Rsyslog Server 與Filebeat從Node 端接收Log，結合Logstash 對Log 中關鍵字進行提取，送入Elasticsearch 建立索引。最終於Kibana 顯示、分析結果。最終只需要點擊滑鼠，就可以完成Log 的搜索、聚合功能，生成圖表及地圖顯示，讓使用者更容易分析多資料。

關鍵字

日誌數據 ； Wi-Fi Log ； 視覺化 ； 索引 ； 分析

並列摘要

Cloud computing service refers to use for any service of circumstances on anytime, at anywhere and any request. In this paper, through the system log data to become a very important information. To consider anomaly data and analysis of demand, the main purpose of this paper is to gather real-time information of campus Wi-Fi log data, virtualization and analysis. In order update the log data quickly, intuitive and efficient way to get log information for analysis. Our system uses combination of three components that are Elasticsearch, Logstash, Kibana, Log data for analysis and statistics. Through this system charts, you can quickly understand the current system of case. This complete system via Rsyslog Server and Filebeat receive log data, the intermediate component between logstash and log file, the log data will be indexed to Elasticsearch. Finally the log file will be displayed on the Kibana web for analysis. Only need to click the mouse to search, aggregation and generate log data become charts, make the data more easier to analyze.

並列關鍵字

Log data ； Wi-Fi Log ； Virtualization ； Searching ； Analysis