본문 바로가기

JinHee's Board

검색하기
JinHee's Board
프로필사진 JinHee Han

  • 분류 전체보기 (28)
    • 공부한 내용정리 (18)
      • Java (6)
      • Spring (1)
      • 기타 (11)
    • 메모 (9)
      • 코딩 문제풀기&다시보기 (9)
    • 포트폴리오 (1)
Guestbook
Notice
Recent Posts
Recent Comments
Link
«   2025/07   »
일 월 화 수 목 금 토
1 2 3 4 5
6 7 8 9 10 11 12
13 14 15 16 17 18 19
20 21 22 23 24 25 26
27 28 29 30 31
Tags
  • opensearch
  • SOCKET
  • Nifi
  • logstash
  • spark
  • Custom Processor
  • java
more
Archives
Today
Total
관리 메뉴
  • 글쓰기
  • 방명록
  • RSS
  • 관리

목록spark (1)

JinHee's Board

Apache Spark - OpenSearch 연동 문제 해결

개요 Apache Spark와 OpenSearch 자바로 연동시 발생하는 문제를 해결하는 과정을 기록하고자 한다. 문제확인 Opensearch는 엘라스틱에서 서비스하는 Elasticsearch 오픈소스를 포크(코드를 복사)하여 만든 AWS판 ElasticSearch 다. Spark와 Elasticsearch를 Java를 통해 연동하는 과정에 있어 사용하던 Elasticsearch를 Opensearch로 교체해야 할 일이 생겨 교체했는데 이후 잘만 실행되었던 Spark가 실행되지 않는 문제가 생겼다. 오류메시지 Elasticsearch를 연동하고 있었을때는 오류가 없었으나 Opensearch로 연동한 다음 이와 같은 오류가 발생했다. 눈여겨볼점은 (No search type for [scan]) 이라는 메..

공부한 내용정리/기타 2021. 10. 30. 22:44
Prev 1 Next

Blog is powered by kakao / Designed by Tistory

티스토리툴바