본문 바로가기

전체 글

삽질 기록 (15) 한 번에 여러 Entity를 저장해야한다면? 벌크벌크 BulkInsert
Language & Framework/삽질기록 2022. 12. 12. 삽질 기록 (15) 한 번에 여러 Entity를 저장해야한다면? 벌크벌크 BulkInsert 보통 삽질 기록은 한 시간 이상 고민한 것만 올리는데 이건 그냥 시간 남고 심심해서 올림 ㅎ 이번 프로젝트에서 크롤링 시 데이터를 150~300개 가량 한 번에 저장하게 되는데, 엄청나게 대단한 용량은 아니지만 그래도 쿼리를 한 개씩 날리는 것보다는 BulkInsert 방식을 적용해야겠다는 생각이 들었다. 근데 JPA는 BulkInsert 설정해봤자 쿼리가 한 개씩 날아가서 아무 의미가 없다. 정확히 말하자면 JPA의 잘못이라기보다는, GenerateValue가 Identity인 경우에는 JPA가 매번 INSERT 쿼리를 날려서 다음 ID 값을 가져오기 때문에 생기는 일이다. 해결하기 위해서 여러가지 방법이 있겠지만 가장 간단한 방법은 JDBC의 Batch Insert 메서드를 이용하는 것이다. 그래서 ..
삽질 기록 (14) JPA DB테스트 시 @CreatedDate Mocking해서 테스트하기
Language & Framework/삽질기록 2022. 12. 9. 삽질 기록 (14) JPA DB테스트 시 @CreatedDate Mocking해서 테스트하기 내가 원하는 것은 아주 간단한 테스트였다. given에서는 user에게 연관된 게시글을 총 15개 만들어서 저장하는데, 10개는 모두 같은 날짜의 게시글이고 나머지 5개는 이전 5일간의 게시글로 저장하는 것이다. 이후 이를 조회하면 날짜별로 집계되어 6개의 값을 가진 List가 반환되어야 한다. 즉, Select ( count(article) , article.created_date) from (article) where article.id = userId group by article.created_date having article.created_date between(start, end) 이런 형태를 가진 아주 단순한 querydsl 쿼리문에 대한 테스트다. 근데 온갖 짓을 해봐도 테스트에 실패했다..
나의 두번째 팀 프로젝트, 모락모락을 마무리하며 (Feat. Codestates)
회고/프로젝트 회고 2022. 12. 7. 나의 두번째 팀 프로젝트, 모락모락을 마무리하며 (Feat. Codestates) 드디어 내 생에 두번째 프로젝트가 끝났다. 사실 일요일 이후로 쉬엄쉬엄 놀다가 데모데이를 맞이할 줄 알았는데 오늘은 밤새도록 작업했다.. ㅋㅋ ㅋ 지난번 프로젝트 회고를 너무 중구난방으로 작성한 것이 아쉬워 이번에는 몇가지 질문을 미리 준비해놓고 해당 질문에 맞는 답변들을 작성하는 방식으로 정리해보려고 한다. 1. 프로젝트에서 어떤 역할을 담당했나요? 1. 백엔드 파트장으로써 전반적인 백엔드 로직을 설계했으며, 팀원들에게 관련 기술들을 공유했다. 2. 리액트 개발 경험을 살려 프론트와 기술적인 소통을 전담하였으며, 종종 프론트 코드를 직접 작성하기도 했다. 3. Spring Security와 JWT, OAuth2, Java Mail을 활용한 보안/인증/인가 시스템을 구축했다. 4. Redis를 활용하여 ..
TCP/IP (6) 어플리케이션 계층
CS ﹒ Algorithm/(new)Network 2022. 12. 5. TCP/IP (6) 어플리케이션 계층 Application Layer 애플리케이션으로써 처리를 수행한다. 이전의 계층들은 모두 전송하는 과정이였다면 패킷을 실제 처리하는 것은 애플리케이션 계층이다. 1. HTTP 1-1. HTTP의 발전 (1) HTTP/0.9 (1991) 텍스트 파일을 다운로드하는 것만 가능했다. 헤더, 바디 등이 존재하지 않았다. 텍스트 파일을 서버에서 다운로드하기 위한 목적으로 만들어졌다. (2) HTTP/1.0 메시지 포맷이 책정되었다. 다양한 파일 전송 기능이 생겨났으며, 이를 다운로드/업로드할 수 있었다. 텍스트 파일 이외에도 다양한 파일을 다룰 수 있게 되어 프로토콜로써 폭이 넓어졌다. 이때까지는 TCP 커넥션을 만들고 부수는 순서를 매번 반복했다. (3) HTTP/1.1 파이프라인 기능이 추가되었다. Keep-..
12월 첫 번째 주간 회고(Feat.Code states)
회고/코드 스테이츠 회고록(완) 2022. 12. 5. 12월 첫 번째 주간 회고(Feat.Code states) Facts String[] 코드_스테이츠 = { 파파파 파이널 프로젝트 끝! } String[] 개인_공부 = { 프로젝트 덕분에 짬내서 DB 튜닝 공부를 진행했다. } 따옴표는 가독성 관계상 생략했다. Feeling / Findings 1. 한 주 건너뛰고 작성하는 주간 회고.. 사실 지난 주에 너무 바빠서 회고를 안 쓴 것도 몰랐다. 이번 주는 백엔드 파트는 거의 자잘한 버그 수정 및 리팩터링이 전부였어서 간만에 살만한 한 주를 보낸 것 같다. 아무튼 TDD 덕분이야~ 2. 오늘은 파이널 프로젝트 발표 영상과 ppt를 만들어서 제출했다. 체감상 8만년만에 ppt를 만든 느낌이고 발표도 너무 어색했지만 그렇게 나쁘지 않게 해낸 듯.. 3. 사실 아직 완전히 끝난 건 아니다. 코드스테이츠 일정상 파이널 ..
삽질 기록 (13) mysql에서는 id가 불러와지는데 Jpa NativeQuery(QueryProjection)으로는 안된다면..
카테고리 없음 2022. 12. 3. 삽질 기록 (13) mysql에서는 id가 불러와지는데 Jpa NativeQuery(QueryProjection)으로는 안된다면.. 이런 쿼리다. 똥쿼리인지 아닌지 난 모른다.. 더 공부하겠습니다 죄송합니다.. 아무튼 별다른 거 없고, 특정 유저가 작성한 게시글과 답변한 게시글의 태그를 모두 불러와서 가장 많이 활동한 관련 태그 3개를 구해오는 쿼리인데.. mysql에서는 잘된다. 하지만 jpa에서는.. id가 모두 Null로 반환되고 있다. 조금 헤맸는데 이유는 별 거 없다. JPA Entity 필드명 변환시에 늘 알아서 tagName -> tag_name이런 식으로 변환해주니까 당연히 반대도 될 줄 알았는데 반대의 경우에는 언더바를 우리가 넣어줘야 한다.. 바꾼 결과는? related problem은 테스트 코드 때문이니 신경쓰지 말자. 오늘도 하나 해결했다~~~ 끝.
이펙티브 자바 (4) 자원을 직접 명시하지 말고 의존 객체를 주입해서 사용하라 (+ item4)
Language & Framework/Java 2022. 12. 2. 이펙티브 자바 (4) 자원을 직접 명시하지 말고 의존 객체를 주입해서 사용하라 (+ item4) 해당 파트는 사실 item4가 아니라 item5인데, item4 "인스턴스화를 막으려거든 private 생성자를 활용하라" 부분이 별달리 정리할 내용이 없으며 item5도 스프링을 배울 때 공부할만한 내용의 반복이라 길게 작성할 필요가 없을 것 같아 한 번에 포스팅하게 되었다. item4의 경우 다들 상식적으로 알고 있을만한 부분이지만 한 번 더 확인해보자. 대부분의 경우 반드시 어떤 객체의 인스턴스화를 막아야할 이유는 없지만, 우리는 종종 오직 유틸리티 용도로만 사용하기 위한 클래스를 작성할 때가 있다. 대표적으로 자바 내부에서 그런 클래스를 찾아보자면 "Math"가 있다. Math 클래스는 내부의 모든 멤버가 static이다. 애초에 인스턴스화 같은 건 전혀 고려하지 않고 만들어진 클래스라는 것이다...
삽질기록(12) 레디스 적용된 코드 어떻게든 꾸역꾸역 단위테스트 하기
Language & Framework/삽질기록 2022. 12. 1. 삽질기록(12) 레디스 적용된 코드 어떻게든 꾸역꾸역 단위테스트 하기 2022-12-14 이런 헛짓할 필요 없이 인터페이스를 이용했으면 모킹 가능했다.. SOLID원칙의 DIP는 밥 말아먹은 코드를 작성한 나의 잘못일 뿐 이런 기본적인 부분에 대한 이해조차 부족했었다는 게 너무 부끄럽다.. 그래도 글은 남겨놓는다.. 과거를 보고 더 성장하라고.. ㅎ 레디스 적용 이후 레디스가 사용된 곳들은 지금까지 열심히 작성한 단위테스트가 모두 삽질이 되어버렸다. 왜? 이 녀석 모킹이 안된다. 무슨 짓을 해도 실제 캐시를 호출하고 앉아있다. 나의 검색 실력이 부족한 것인지 이를 해결할 방법을 찾지 못했다. 사실 너무 바빠서 이 상태로 거의 일주일 넘게 방치해뒀는데, 이걸 어떻게든 해야겠다는 생각이 들었다. 그래 맞다, 이거 해결 안해도 코드는 잘만 작동된다. 그리고 그냥 통합테스트로 퉁..

티스토리툴바