Amazon ES에 테스트 데이터 업로드해보기

전 글에서 도메인 생성까지 해보고 이제는 테스트 데이터를 업로드 해볼 예정이다!

2021.08.05 - [개발 일기] - [2021.08.05] AWS Elasticsearch Service 시작하기

[2021.08.05] AWS Elasticsearch Service 시작하기

 

자습서에서는 curl 명령어를 사용하여 이용해보려고 한다.

windows에서는 따로 설치를 해야하지만 맥이나 리눅스에는 미리 설치가 되어있다고 하니 각자 환경에 맞게 사전 설치를 해주면 될 것 같당

 

1. 단일 문서 업로드

 

curl -XPUT -u 'master-user:master-user-password' 'domain-endpoint/movies/_doc/1' -d '{"director": "Burton, Tim", "genre": ["Comedy","Sci-Fi"], "year": 1996, "actor": ["Jack Nicholson","Pierce Brosnan","Sarah Jessica Parker"], "title": "Mars Attacks!"}' -H 'Content-Type: application/json'

 

master-user 와 master-user-password 칸에는 도메인을 만들때 만들었던 유저 이름과 비밀번호를 써주면 된다.

domain-endpoint는 개요탭에서 엔드포인트 주소를 복사해주면 된다!

 

Kibana에서 확인해본 모습! 잘 들어갔다.

 

2. 여러 문서 업로드

 

{ "index" : { "_index": "movies", "_id" : "2" } }
{"director": "Frankenheimer, John", "genre": ["Drama", "Mystery", "Thriller", "Crime"], "year": 1962, "actor": ["Lansbury, Angela", "Sinatra, Frank", "Leigh, Janet", "Harvey, Laurence", "Silva, Henry", "Frees, Paul", "Gregory, James", "Bissell, Whit", "McGiver, John", "Parrish, Leslie", "Edwards, James", "Flowers, Bess", "Dhiegh, Khigh", "Payne, Julie", "Kleeb, Helen", "Gray, Joe", "Nalder, Reggie", "Stevens, Bert", "Masters, Michael", "Lowell, Tom"], "title": "The Manchurian Candidate"}
{ "index" : { "_index": "movies", "_id" : "3" } }
{"director": "Baird, Stuart", "genre": ["Action", "Crime", "Thriller"], "year": 1998, "actor": ["Downey Jr., Robert", "Jones, Tommy Lee", "Snipes, Wesley", "Pantoliano, Joe", "Jacob, Ir\u00e8ne", "Nelligan, Kate", "Roebuck, Daniel", "Malahide, Patrick", "Richardson, LaTanya", "Wood, Tom", "Kosik, Thomas", "Stellate, Nick", "Minkoff, Robert", "Brown, Spitfire", "Foster, Reese", "Spielbauer, Bruce", "Mukherji, Kevin", "Cray, Ed", "Fordham, David", "Jett, Charlie"], "title": "U.S. Marshals"}
{ "index" : { "_index": "movies", "_id" : "4" } }
{"director": "Ray, Nicholas", "genre": ["Drama", "Romance"], "year": 1955, "actor": ["Hopper, Dennis", "Wood, Natalie", "Dean, James", "Mineo, Sal", "Backus, Jim", "Platt, Edward", "Ray, Nicholas", "Hopper, William", "Allen, Corey", "Birch, Paul", "Hudson, Rochelle", "Doran, Ann", "Hicks, Chuck", "Leigh, Nelson", "Williams, Robert", "Wessel, Dick", "Bryar, Paul", "Sessions, Almira", "McMahon, David", "Peters Jr., House"], "title": "Rebel Without a Cause"}

이런식으로 여러개의 문서를 업로드할때는 데이터를 json파일로 저장을 해준다.

단일문서 업로드할때랑 명령어가 살짝은 달라진다.

 

curl -XPOST -u 'master-user:master-user-password' 'domain-endpoint/_bulk' --data-binary @bulk_movies.json -H 'Content-Type: application/json'

해당 json파일이 저장되어있는 곳으로 이동해서 위 명령어를 입력해주면

 

이렇게 정상적으로 잘 업로딩 된 것을 확인할 수 있다!

 

++) 검색해보기

 

curl -XGET -u 'master-user:master-user-password' 'domain-endpoint/movies/_search?q=mars&pretty=true'

 

위 명령어는 mars가 들어간 인덱스를 찾는 것이다.

pretty= true 옵션은 json 형태의 결과를 눈으로 보기 쉽게 붙여주는 옵션이다. 매우 유용쓰하니 써주는게 좋다!

 

결과 값이 잘 나오는 것을 확인 할 수 있다!

 

이렇게 되면 실마리가 조금씩 잡힌다 ..!!

금방 끝낼 수 있지 않을까 라는 행복회로 돌리는 중 .. 돌돌돌