OKKY
커뮤니티
Q&A
지식
이벤트
Contact
부트캠프
Jobs
Search Bar
로그인
회원가입
logstash
전체
최신순
질문하기
답변
0
김기
·
거의 2년
323
0
답변 0
mongodb + logstash 연결 오류
현재 프로젝트를 진행하면서 Elasticsearch를 이용해 검색한 값을 몽고디비에있는 데이터를 찾아 출력하는 프로젝트를 진행중입니다. ex> 레시피의 재료키워드를 검색후 몽고에 저장되어있는 해당 재료가 포함된 레시피를 출력 현재 검색기능을 구성하는데 logstash에 몽고디비를연결하려고하는데 자꾸 DatabaseConnectionError 와 Java::JavaSql::SQLException: 에러가 발생하고있습니다. logstash.conf
답변
0
kyounghunJang
·
거의 3년
224
0
답변 0
logstash elasticsearch 특정 필드 Input
elasticsearch에서 _source를 이용하면 특정 필드만 검색할 수 있는 것처럼 Logstash input으로 elasticsearch를 할때 특정 필드만 받을 수 있는 방법이 있을까요 ?
해결
1
수박설탕
·
약 3년
387
0
해결 1
Elasticsearch 구현 및 설계 방향에 대한 지도 부탁드릴 수 있을까요?
저희 회사 플랫폼에서 기존 DB로 RDBMS(관계형 데이터베이스)를 사용하고 있는데, 검색 창에 물질 이름이나 관련 속성 필드 몇 개를 입력하면, 해당 정보가 포함된 물질 정보 목록이 출력되서, 그 중에 선택해서 물질 상세화면으로 이동할 수 있습니다. 물질 상세화면에서는 물질 기본 테이블과 연관된 테이블들을 각각 Join해서, 각각의 Restful API의 요청/응답 결과를 가지고 화면에서 보여주고 있어요. (연관 테이블은 그저 매핑 테이블 기능으로
해결
2
수박설탕
·
약 3년
502
1
해결 2
Elasticsearch 관련 질문 드려도 될까요?
안녕하세요. RDBMS 데이터를 Elasticsearch로 이관해 검색엔진 기능을 활용하려고 합니다. 제가 생각하는 구현 내용의 방향을 잘 잡지 못하고 있고, 시작부터 잘못된 것은 아닌지 하는 걱정에 질문을 올리게 됐습니다. 내용 읽으신 후 조언이나 의견 남겨주시면 정말 감사드리겠습니다. 검색 대상인 RDBMS 테이블의 범위(수)가 매핑 테이블 포함해 약 20개 정도 되는데 (1:N 관계 설정) 검색창 UX에 검색어를 입력하여, 위 테이블에 존재하는
해결
1
개발세발네발
·
3년 이상
323
0
해결 1
ELK 관련 서적 추천해주세요!
안녕하세요~현재 부서내에서 ELK 스택으로 서비스 모니터링을 하고 있습니다.모니터링 고도화에 대한 니즈가 있어서 관련 기술에 대한 공부를 하려고 준비 중인데요,Elasticsearch 루씬 쿼리에서부터 kibana 시각화 툴팁 등 전반적으로 공부할 수 있는 서적이 있을까요?없다면 개별서적도 괜찮으니 추천 부탁드립니다 🙏
답변
0
hyeyh
·
약 5년
546
0
답변 0
logstash syslog 받기에 대한 오류입니다.
먼저 logstash conf 파일을 보여드리자면input{ udp { port => 514 type => syslog codec => plain { sharset => "UTF-8" } }
답변
0
킹장
·
5년 이상
515
0
답변 0
logstash config 설정 (실시간 데이터 인덱싱) 관련하여 질문드립니다.
선배님들 logstash config를 실행시켜 인덱싱하는 설정중입니다. sql_last_value 를 컬럼이 두개라 tracking_column 도 두개가 나오는 상황인데 config 에 설정할떄 두개의 컬럼을 설정하는 방법이 궁금합니다. tracking_column => "updat" tracking_
답변
0
킹장
·
5년 이상
389
0
답변 0
logstash doc.delete 관련하여
안녕하세
답변
6
킹장
·
5년 이상
4.1k
0
답변 6
elasitcsearch 개발 중에 logstash 인덱싱 중 오류가 발생하여 질문드립니다.
Failed to execute action {:action=>LogStash::PipelineAction::Create/pipeline_id:main, :exception=>"LogStash::ConfigurationError", :message=>"Expected one of #,
답변
2
범계쟁이
·
5년 이상
795
0
답변 2
elk 병목현상에 대해서 질문드립니다.
현재 로그 수집을 위해 ELK를 이용하고 있는데요filebeat, kafka, logstash -> elastic service 를 활용중입니다.문제는 처리할 로그 양이 많아지니 병목현상이 일어난다는것인데요.kafka에 많이 쌓여있어서, logstash가 사양이 문제인지 elastic service 사양이 문제인지 고민중입니다.
답변
0
hyeyh
·
5년 이상
452
0
답변 0
logstash + elasticsearch 관련 질문있습니다.
logstash conf 파일로 수집한 log에서 filter grok plugin 으로로그중 원하는 부분을 column(filed)로 추출하고 나머지는 GREEDYDAYA:message이런식으로나머지 데이터들을 message에 몰어 넣고 elasticsearch에 저장을 하는데kibana에서 index pattern으로 index생성해줄시 message에 들어있는 것들을 자동 매핑으로
답변
0
hyeyh
·
5년 이상
593
0
답변 0
Logstash conf파일 filter grok에 관한 질문입니다.
(사진이 안보일시)match =>[ "message", "\<%{NUMBER}\>%{TIMESTAMP_ISO8601:logtime} %{DATA:system}:%{SPACE}prefix=%{DATA
답변
2
밤과라임
·
6년 이상
1.3k
0
답변 2
springboot + elk 환경 구축하려는데 로그를 어떻게 분류하는지 궁금합니다.
웹서비스 로그 관리를 위해 백엔드 spring boot 서버에 logstash를 연동 저장된 log를 elasticsearch에 저장하고있습니다. 물론 분석은 kibana를 통해할 예정입니다. 세팅한 후 간단한 테스트를 마치고 나서 보니 log에 담긴 내용이 message 필드에 남겨 저장되더군요. message에 담기는 내용을 어느정도 구분한다 해도 하나의 필드에 저장하는 것은 추
답변
5
밤과라임
·
6년 이상
1.5k
0
답변 5
log 저장 환경 질문입니다. logstash, elastic search
spring boot 프로젝트에서 front에서 모든 요청에 대한 정보를 저장하여 추후 분석하려고 log 저장 환경을 구축하려고 하는데logstash 없이 각 요청마다 저장할 값을 프론트로 받아 db나 elastic search에 저장할 생각이었습니다.그런데 찾아보니 front에서 spring boot 서버가 아닌 바로 자바 환경에 logstash만 설치한 서버로 전송하여거기서 필터링한 값을 ela
답변
0
왕십리역
·
거의 7년
650
0
답변 0
Logstash(Elasticsearch) 집계 출력관련
Elasticsearch 테이블내용을 Logstash 를 통해 Output 이 가능한걸로 알고 있습니다.다만... 집계에 대해 Output 을 내리고 싶은데....Referense 등을 찾아봐도 내용이 안보이네요...input{ elasticsearch {
답변
1
왕십리역
·
거의 7년
2.1k
0
답변 1
Elasticsearch 조회 결과 export 방법 문의
Elasticsearch 조회 결과값을 export 하는 방법에 대해 문의드립니다...request 받은 json type 의 data 를 직접 parsing 하는방법 외에...조회한 Data 를 .csv / .log 파일등으로 Elasticsearch 에서 직접 Export 시켜주는 기능이 있는지 문의드립니다.
답변
0
애리밍
·
8년 이상
904
0
답변 0
Logstash output별 다른 filter를 적용할수 있을까요?
output이 Elasticsearch와 file 두개인데 이 두 output 별로 다른 filter를 적용 할 수 있을까요?
답변
0
platform
·
10년 이상
1.6k
0
답변 0
logstash, elasticsearch 질문입니다.
안녕하세요 elk stack 를 활용해 보고자 https://github.com/kimjmin/elastic-demo 예제를 보고있는데요막히는 부분이 있어 질문합니다..logstash-1.5.5elasticsearch-1.7.4kibana-4.1.4위 버전을 사용중입니다.logstash 설정은 아래와같습니다.logs
Search Bar
