☰

더미 파일을 가져오기 위한 BI 또는 로깅 도구 [닫기]

tag-icon • tag-icon text-processing logs
더미 파일을 가져오기 위한 BI 또는 로깅 도구 [닫기]

현재 우리에게는 거대하고 멍청한 파일을 필터링할 수 있는 로깅 도구가 없습니다. 단순 파일을 가져오고 자동/선택적 필터링을 수행할 수 있는 오픈 소스 BI 또는 로깅 도구가 있습니까?

현재 멍청한 파일의 예:

2019-02-11 03:06:30.202  INFO maskParams=false
2019-02-11 03:06:30.205  INFO Start request :: ipAddress=103.22.200.95
2019-02-11 03:06:30.205  INFO  User-Agent = Mozilla/5.0 (Linux; U; Android 7.1.1; zh-cn; MI MAX 2 Build/NMF26F) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/61.0.3163.128 Mobile 
Safari/537.36 XiaoMi/MiuiBrowser/10.5.1
2019-02-11 03:06:30.205  INFO  Request Query String=[customer_name]
2019-02-11 03:06:30.335  INFO  Checking current ip address
2019-02-11 03:06:30.335  ERROR Not a valid ip address 2408:84e4:412:4b02:73cd:9684:1ab0:8437
2019-02-11 03:06:30.336  INFO  Get country from GeoIpRange, ip =2408:84e4:412:4b02:73cd:9684:1ab0:8437
2019-02-11 03:06:30.336  ERROR Not a valid ip address 2408:84e4:412:4b02:73cd:9684:1ab0:8437
2019-02-11 03:06:30.385  INFO  End request (00:00:00.183)

더미 파일을 가져온 후 다음 세부 정보를 제공할 수 있었습니다.

  • 시작 날짜 및 시간/
  • 종료 날짜 및 시간/
  • 고객 이름/
  • 유효한 IP 주소 세부정보가 없습니다.

답변1

오픈 소스 로그 수집기와 인덱서가 많이 있습니다.

스플렁크? 엘라스틱서치? 로그 저장? 키바나?

BI 도구인가요? 나는 모른다. 일부 비즈니스 지표를 플롯하는 경우에만 추측합니다.

관련 정보