전체 글

[Spring Boot] mariadb-java-client vs mysql-connector-j

mariadb-java-client와 mysql-connector-j는 Java 애플리케이션에서 각각 MariaDB와 MySQL 데이터베이스에 연결하기 위해 사용되는 JDBC(Java Database Connectivity) 드라이버입니다. 이 두 드라이버는 비슷한 기능을 제공하지만, 몇 가지 중요한 차이점이 있습니다 mariadb-java-client 특화된 드라이버: mariadb-java-client는 MariaDB 데이터베이스에 연결하기 위해 특화되어 개발된 JDBC 드라이버입니다. MariaDB의 특정 기능과 최적화를 활용할 수 있도록 설계되었습니다. MariaDB와의 호환성: MariaDB 서버의 기능과 최신 업데이트를 가장 잘 활용할 수 있도록 지속적으로 업데이트됩니다. MariaDB 서버의..

[Spring Boot][Mybatis][MariaDB] Bulk Update 방법

Bulk Update 소개 bulk update는 데이터베이스의 여러 레코드를 한 번에 업데이트하는 성능 최적화와 서버 자원의 효율적 사용에 있어 중요한 기법 중 하나입니다. 이 접근 방식은 네트워크 호출과 데이터베이스 I/O 작업을 줄여 전체 애플리케이션의 성능을 향상시킬 수 있습니다. Bulk Update의 장점 성능 향상: 단일 쿼리로 여러 레코드를 업데이트함으로써 네트워크 지연 시간과 데이터베이스 서버의 부하를 줄일 수 있습니다. 이는 특히 대량의 데이터를 처리할 때 성능 이점을 제공합니다. 자원 사용 최적화: 데이터베이스 연결과 네트워크 자원의 사용을 최적화하여 서버 자원을 보다 효율적으로 사용할 수 있습니다. 일관성 유지: @Transactional 어노테이션을 사용하여 bulk update ..

[Logstash] multi pipeline 구성하기 + kafka 메세지를 logstash input으로 받기

개요 Spring boot 환경에서 Docker로 ELK 사용하기 에서 Docker 환경에서 ELK를 실행하였습니다. 기존에는 Logstash는 아래와 같이 단일 파이프라인으로 구성했었는데 멀티 파이프라인으로 수정해보도록 하겠습니다. input { tcp { port => 5000 codec => json_lines } } output { elasticsearch { hosts => "elasticsearch:9200" user => "elastic" password => "elastic123!@#" index => "logstash-%{+YYYY.MM.dd}" } } Logstash 멀티 파이프라인 설정을 통해 여러 독립적인 파이프라인을 한 Logstash 인스턴스에서 실행할 수 있습니다. 이 기능은 ..

[ELK][Logstash] Failed to fetch X-Pack information from Elasticsearch 오류 수정

Docker 환경에서 ELK를 실행할때 Logstash Container에서 아래와 같이 에러가 발생했습니다. [2024-02-06T02:11:36,846][ERROR][logstash.monitoring.internalpipelinesource] Failed to fetch X-Pack information from Elasticsearch. This is likely due to failure to reach a live Elasticsearch cluster. 해당 에러는 X-Pack 보안 기능이 활성화된 경우 CA, Private key 설정이 안되있을 경우 발생합니다. X-Pack 보안 기능을 사용 안한다면 아래와 같이 XPACK_MONITORING_ENABLED=false 설정을 추가해주면 됩..