목록2024/07/03 (1)
Gromit`s dev
20만건 데이터 삽입을 csv파일을 이용해서 DB connection timeout 에서 7초로 줄이기
⭐서론코드스쿼드 에어비앤비 클론 코딩 프로젝트 중 성능 테스트를 하고 싶었고,이를 위해 다량의 숙소, 예약, 회원의 더미 데이터를 만들고자 하였습니다. 더미 데이터를 숙소 20만개, 예약 100만개, 회원 1만명을 만들고자 하였습니다.이 중, 숙소 20만개를 만드는 과정에서 생긴 일을 소개 합니다. 20만개 숙소 데이터를 Java 코드로 숙소 1개마다 INSERT INTO 쿼리를 DB에 날렸더니DB connection timeout 문제를 마주쳤습니다. 그래서, 벌크insert 가 가능한 방법을 고려하게 되었고,csv파일로 만들어서 MySQL 에 넣는 방법과 Spring Batch 를 이용하는 방법을 고려했습니다.결국, 프로젝트의 남은 기간이 1주임을 고려해 러닝커브가 낮은 csv파일을 이용하는 방법을 ..
카테고리 없음
2024. 7. 3. 21:57