개요

많은 회사들에서 엘라스틱서치 등의 기술을 사용하는 것 같았다.

프로젝트를 하고싶던 와중, 고맙게도 지인에게 공부 목적의 프로젝트 제안이 들어왔다.

열심히 해보자

Issue

기술 스택 정하기

  • ElasticSearch

  • Kafka

  • Java, Spring

  • Jpa

  • Mysql

  • 이정도를 기초로 두고, 주제를 구현함에 따라 필요한게 있으면 더하기로 한다.

    • 개인적으로는 Datadog와 같은 역할을 하는 어떤 기술을 더하고싶다.

    Elasticsearch: 뉴스 기사, 키워드, 종목명 등의 데이터를 색인하고 검색

주제

  • ElasticSearch →
    • 대량의 데이터를 다룬다 (일정주기로 수집된다).
    • 단순히 데이터가 갱신 X, 쌓인데이터를 모두 활용하는게 의미있어야 한다.
  • 주식
    • 주식 실시간 데이터 수집.
    • 뉴스 크롤링 - 특정 키워드와 주가간의 관계 시각화.
    • 컨셉 - 구글 검색창 하나로 특정 키워드 검색하면 실시간으로 주가와 해당 키워드 간의 관계 조회해서 시각화.
    • 실시간 검색어 트렌드.

TODO

  • 위 주제를 어떻게 구현할 지 구상해오기
  • 뉴스 크롤링 수준 정하기
  • (04/07)에 2nd 미팅