강의 출처 : https://www.youtube.com/watch?v=PtILI6v0ngY데이터간의 관계가 포커스가 아닌 실시간 데이터에대한 사업적인 니즈가 생김=> 카프카를 사용하자 카프카 개념- Message broker- publish - consume 구조- 스트리밍 플랫폼- 분산 시스템- 안정적인 스토어- 많은 처리량 카프카의 특징1. producer 와 consumer 는 의존도가 없다.2. broker 에게 topic을 받아서 디스크에 적는다. => 굉장히 안정적이다.disk를 쓰는데 빠른 이유 : page cache 를 이용해서 데이터를 모았다가 IO 하기 때문에3. 변경 불가능한 이벤트 로그를 스트림하여 수집 옛날의 데이터 스트림 처리 카프카의 데이터 스트림 처리 Log or Data ..

엘라스틱 서치를 스프링과 연동하는 방법1. 스프링에서 지원하는 Spring-data-elasticsearch 모듈을 다운받아 elasticsearchRepository 인터페이스를 이용하는 법2. 스프링에서 지원하는 Spring-data-elasticsearch 모듈을 다운받아 elasticsearchTemplate 객체를 이용하는 법3. ES에서 지원하는 Low level REST Client 모듈을 다운받아 RestClient 클래스를 사용하는 법4. ES에서 지원하는 High level REST Client 모듈을 다운받아 HighLevelRestClient 클래스를 사용하는 법 사용해보면서 느낀 장단점1. ElasticsearchRepository+ 스프링에서 지원해주는 방식으로 JPA와 사용법이..

프로젝션쿼리를 통해 문서에서 가져올 필드 지정모든 쿼리에 적용 가능. SQL의 프로젝션과 같음{"query" : {"match_all" : {}},"fields" : ["myName", "myJob"]} 페이징검색엔진 특성상 페이지 네비게이션에 특화되어 있지 않아서 잘못하면 검색 성능 저하와 연결됨 {"query" : {"match_all" : {}},"from" : 0,"size" : 10} 필터링필터링 결과 내의 재검색, 이미 검색된 문서들에 대해서는 score 계싼을 하지 않으므로 성능 향상을 도모할 수 있다.가능하면 필터링은 score 연산이 필요하지 않은 쿼리를 사용하는 것이 좋다.{"query" : {"match_all" : {}},"filter" : {"bool" : {"must" : [ {..

검색 응답 포맷{"took" : 63,"timed_out" : false,"_shards" : {"total" : 5,"successful" : 5,"failed" : 0},"hits" : {"total" : 2,"max_score" : null,"hits" : [ {"_index" : "bank","_type" : "account","_id" : "0","sort": [0],"_score" : null,"_source" : {"account_number":0,"balance":16623}}, {"_index" : "bank","_type" : "account","_id" : "1","sort": [1],"_score" : null,"_source" : {"account_number":1,"balance..

localhost:9200/INDEX/_settings 로 인덱스 정보 바꾸기{"settings" : {"number_of_shards" : 5,"number_of_replicas" : 1,"index" : {"refresh_interval" : "1s"},"analysis" : {# 인덱싱 언어 추출 (Term)# 역 인덱스 파일 생성# 하나의 tokenizer와 여러개 filter 로 구성# 길어서 생략# 책 53p 참조},"store" : {"type" : "mmapfs""compress" : {"stored" : true, "tv" : true}# Store type # 윈도우 64bit : mmapfs# 윈도우 32bit : simplefs# 나머지 : niofs# Stored field, Te..

책을 읽고 평가할 입장은 안되지만 책 구매를 고민하시는 분들을 위해 몇 자 적습니다. 클린 코드 개발자 필독서라는 말이 괜히 나온 말이 아니다 라는 느낌. 왜 코드를 깨끗하게 짜야하는지, 왜 이렇게 짜면 코드가 가독성이 높은지를 논리적으로 설명하고 있다. 책에 나온 말 그대로 '어떻게하면 가독성이 좋은 코드를 짤 수 있을까?'를 한번이라도 고민해본 사람에게 좋은 책. 객체 지향의 사실과 오해 책의 난이도가 쉽고 했던 얘기를 또하고 또하고 또하기 때문에 읽는데 부담이 없다. 이제 프로그래밍 문법 배우는 것을 마치고 스파게티 코드를 경험해 본 사람에게 적합한 것 같다. 높은 명성과는 다르게 건질만한게 크게 없었던 듯. 당연한 말들의 반복이다. 클래스 지향 프로그래밍이 아니라 객체 지향 프로그래밍이다. 라는 ..