슬기로운 개발생활

지난 글에 이어서 이번에는 엑셀 다운로드 기존 구조의 문제점과 이를 해결하기 위해 간단한 모듈화로 변경한 내용을 정리하고자 한다. 기본적인 형태의 엑셀 다운로드 Java를 사용하여 엑셀 다운로드 기능을 개발하면 일반적으로 Apache POI 라이브러리를 통해 구현한다.우선, 엑셀 다운로드 기능의 전체적인 구현 흐름을 먼저 보고 시작하자.@PostMapping("api/v1/export/download/excel")public void download(HttpServletResponse response) throws Exception { // 엑셀 파일 하나를 만든다. Workbook workbook = new SXSSFWorkbook(); // 엑셀 파일 내부에 Sheet 를 하나 생성한다. (엑셀 파일..

서버가 갑자기 먹통이 된 경험을 했다.운영 중인 서버의 CPU 사용률이 급격히 상승하며 서버가 죽어버렸다.서버를 즉시 재가동하고 원인을 확인한 결과, OOM(Out Of Memory)으로 인해 서버가 중단된 것이었다. 왜 OOM(Out Of Memory)이 발생했는가?관리자 페이지에서 엑셀 다운로드를 하는데 약 N만 건 이상의 Row를 다운로드하는 과정에 OOM이 발생했다.현재 운영 중인 서버는 1개의 WAS 안에 서비스, 관리자 등 여러 프로젝트가 함께 돌아가고 있는 상황이다.여러 요청에 대한 처리와 N만 건 이상의 Row를 다운받는 요청이 겹치면서 과부하가 발생한 것으로 보인다.하지만, N만 건 정도의 데이터를 처리하면서 OOM이 발생하는 것은 이상하다고 생각하여 원인을 찾아보았다.원인 파악현재 엑셀..

Intro개발 오픈 톡방에서 "Service와 Repository는 완벽히 분리되어야 한다."의 내용이 화두 되었다.즉, "도메인은 특정 기술(인프라)에 의존하지 않고 순수하게 유지되어야 한다."는 말인데,어떻게 하면 도메인과 인프라를 완벽히 분리할 수 있는지 알아보도록 하자. Layered Architecture와 DDD(Domain Driven Design)레이어드 아키텍처는 가장 흔하게 사용되는 아키텍처이다.이름 그대로 프로그램 내에서 계층을 나누는 설계 방식이며, 의존의 방향성은 오직 위에서 아래로만 내려간다.일반적으로 Presentation, Business, Persistence, DataBase의 4개 표준 레이어로 구성한다.물론 규모에 따라 병합하기도 하며, 그 이상의 레이어로 구성하기도 ..

Intro 프로그래밍을 하다 보면 함수 호출 방식인 'Call by Value'와 'Call by Reference' 키워드를 접하게 된다. 이 두 개념의 차이를 이해하고 특히 Java는 어떻게 'Call by Value' 방식을 사용하는지 알아보자 Call by Value / Call by Reference Call by Value(값에 의한 호출) 값을 복사하여 처리한다. 변수의 복사본이 전달되며, 원래 값이 수정되지 않는다. 실제 인수는 다른 메모리 위치에 생성된다. Call by Reference(참조에 의한 호출) 값의 주소를 참조하여 직접 값에 영향을 준다. 변수 자체가 전달되며, 원래 값이 수정된다. 실제 인수는 같은 메모리 위치에 생성된다. 자바의 Call by Value 동작 방식 자바의..

VisualVM은 JVM 기반 애플리케이션의 성능을 실시간으로 분석하기 위해 주로 사용하는 오픈소스 기반의 GUI 툴이다. 운영 환경 VisualVM - 2.1.7 OpenJDK - 11.0.21 Linux - CentOS7 WAS - Apache Tomcat 9.0.54 VisualVM 다운로드 JDK 1.7 이상의 경우 JAVA_HOME/bin 밑에 jvjsualvm.exe 파일이 포함 되어 있다. 별도로 필요할 경우 아래 링크를 통해 다운로드 받자. https://visualvm.github.io/ VisualVM 간단 설명 Local 현재 로컬 컴퓨터에 JVM으로 돌아가는 Application 목록 및 pid Remote 로컬 컴퓨터가 아닌 다른 서버에 있는 Application 목록 및 pid ..

나는 지금까지 REST API는 URI는 정보의 자원만 표현하고, 자원의 행위는 HTTP Method를 통해 명시한다는 것으로만 알고 사용하고 있었다. 위 내용도 물론 맞지만, 그건 반쪽짜리 REST API 였고, HATEOAS까지 알고 사용해야 진정한 REST API를 사용한다 할 수 있다. 그래서 이번엔 HATEOAS가 뭐고 어떤 특징이 있는지 알아보려 한다. HATEOAS (Hypermidia As The Engine Of Application State) HATEOAS(일명 헤이티오스)는 API를 실제로 "RESTful"하게 만드는 REST Appilcation Architecture의 제약 조건이다. 기본적으로 요청에 대해 서버는 응답에 데이터만 클라이언트에게 보내는데, HATEOAS를 사용하면..

이전 글에 이어서 Spring Boot에서 ThreadPoolTaskExecutor 설정을 통해 비동기 처리를 효율적으로 수행하는 방법을 알아보려 한다. ThreadPoolTaskExecutor ThreadPoolTaskExecutor는 Spring에서 제공해주는 클래스로 자바에서 제공하는 ThreadPoolExecutor를 사용하기 쉽게 만들어 사용하도록 구현 되어 있어 스레드 풀을 쉽고 간단하게 설정하고 관리할 수 있다. java.util.concurrent Executor를 최상위 인터페이스로 가진다. Bean 등록 우선 ThreadPoolTaskExecutor를 사용하기 위해 Bean으로 등록한다. @Configuration public class ThreadPoolConfig { @Bean(na..

Future Java5부터 사용되던 Future 인터페이스는 java.util.concurrency 패키지에서 비동기 작업의 결과 값을 받는 용도로 사용했다. 하지만 여러 Future의 결괏값을 조합하거나, 예외를 효과적으로 핸들링할 수가 없었다. 그리고 Future는 오직 get 호출로만 작업 완료가 가능한데, get은 작업이 완료될 때까지 대기하는 블로킹호출이므로 비동기 작업 응답에 추가 작업을 하기 적합하지 않다. public interface Future { ... V get() throws InterruptedException, ExecutionException; V get(long timeout, TimeUnit unit) throws InterruptedException, ExecutionE..

Multi-part POST 요청을 하는 코드에서 다음과 같은 에러가 발생했다. Failed to parse multipart servlet request; nested exception is java.lang.IllegalStateException: The multi-part request contained parameter data (excluding uploaded files) that exceeded the limit for maxPostSize set on the associated connector 원인 분석 해당 에러는 멀티파트 요청 파라미터의 제한된 데이터 크기를 초과한 요청을 했을 때 발생하는 에러였고, 프로젝트엔 다음과 같이 멀티파트 관련 설정이 적용되어 있는 상황이었다. server:..

ParallelStreamJava8에서 등장한 Stream은 병렬 처리를 쉽게 할 수 있도록 메소드를 제공해 준다.개발자가 직접 스레드 혹은 스레드풀을 생성하거나 관리할 필요 없이 parallelStream(), parallel()만 사용하면 알아서 ForkJoinFramework 관리 방식을 이용하여 작업들을 분할하고, 병렬적으로 처리하게 된다. Fork / Join FrameworkFork / Join Framework는 작업들을 분할 가능한 만큼 쪼개고, 쪼개진 작업들을 Work Thread를 통해 작업 후 결과를 합치는 과정으로 결과를 만들어 낸다.즉, 분할 정복(Divide and Conquer) 알고리즘과 흡사하며, Fork를 통해 Task를 분담하고 Join을 통해 결과를 합친다.Fork /..