| paths |
수집할 경로 |
/var/log/message →
/home/message
/var/log/secure |
| recursive_glob. enabled |
recursive 패턴으로 확장 기능 활성화 |
true |
| encoding |
W3C에서 사용하는 인코딩 |
plain |
| exclude_lines |
로그 전달할때 전송하지 않을 줄 패턴 |
|
| include_lines |
로그 전달할때 전송할 라인 패턴 |
모든라인의 데이터 전송 |
| harvester_buffer_size |
harvester가 파일을 가지고 올때 사용하는 버퍼크기 |
16384(바이트 단위) |
| max_bytes |
단일 로그 메시지에 할당하는 최대 크기 |
10485760(10MB) |
| json |
son포맷으로 작성된 로그를 디코딩할떄 사용 (keys_under_root, overwrite_keys, expand_keys 중 하나이상 지정필요)
· keys_under_root : 디코딩된 json은 json키 아래배치
· overwrite_keys : 필드 추가시 충돌다는 필드는 덮어쓰기 수행
· expand_keys : 추가 확인필요
· add_error_key : json이 정렬작업시 오류가 발생하면 error.message에 error.type: json키를 추가
· message_key : 라인 필터링 혹은 멀티 라인이 적용되어 있는 경우 json키를 지정하 는 설정
· document_id : 문서 id를 구성 |
|
| multiline |
멀티라인의 메시지를 처리할떄 사용 |
|
| exclude_files |
path에 정의된 파일중 제외할 파일 리스트 목록 |
|
| ignore_older |
지정된 시간 범위 이전에 수정된 파일은 전송 제외 |
|
| close_inactive |
지정된 시간동안 수집되지 않은 경우 파일을 닫음 |
|
| close_renamed |
파일이름이 변경될때 파일을 닫음 |
|
| close_removed |
파일이 제거될때 harverster 도 종료. |
true |
| close_eof |
파일 끝에 도달하자마자 파일을 닫음
(한번만 작성하고 수시 업데이트시 유용) |
false |
| close_timeout |
정해진 시간 초과하면 파일 닫음 |
0 (비활성화) |
| clean_inactive |
inactive기간 경과하면 파일상태 제거 |
|
| clean_removed |
마지막으로 읽은 파일이 없는 경우 레지스트리에서 파일정리 |
true |
| scan_frequency |
지정된 경로에서 새파일을 찾는 빈도 |
10(초단위) |
| tail_files |
각 파일 끝에서 새파일을 읽기 시작(rotate적용시 활용가능) |
false |
| symlinks |
심볼릭링크된 파일 수집여부 |
false |
| backoff
|
열린파일을 얼마나 크롤링 하는지 확인 |
1(초단위) |
| max_backoff |
파일이 마지막에 도달한 후 다시 확인하기 전에 대기하는 시간 |
10(초단위) |
| backoff_factoer |
backoff 시간이 대기하는 시간 |
2 |
| harvester_limit |
하나의 입력에 대해 병렬로 수집하는 최대 harverster 갯수 |
0 (제한없음) |
