{"componentChunkName":"component---src-templates-post-template-jsx","path":"/works/posts/2024-06-22--001","result":{"data":{"site":{"siteMetadata":{"title":"Blog by Eunyoung","subtitle":"작업 기록 블로그","copyright":"© All rights reserved.","author":{"name":"EunYoung","twitter":"#"},"disqusShortname":"","url":"https://ssongey.github.io"}},"markdownRemark":{"id":"cb246fff-c515-5282-92be-88c2a25a2465","html":"

스프링 배치를 사용하여 매일 한번씩 카카오 계정 서버에서 휴면/탈퇴 계정 목록을 가져와 내가 담당하고 있는 서비스를 탈퇴 시키는 작업을 진행했고, 이에 대한 기록을 남긴다.

\n

1. 요구사항

\n\n
\n

2. 배치 스케줄러를 어떻게 수행할 것인가?

\n

2.1. k8s cronJob + api 서버

\n

방법

\n\n

배치 오류 발생시?

\n\n
\n

2.2. jenkins + api 서버

\n

방법

\n\n

배치 오류 발생시?

\n\n
\n

2.3. jenkins + springbatch

\n

방법

\n\n

배치 오류 발생시?

\n\n

3번 사용 결정 이유

\n\n
\n

3. spring batch 작업을 진행하면서 겪은 일

\n

3.1. multi datasource 설정

\n\n

\n \n \n \n \n \n \n \n \n \n

\n\n
spring:\n  jpa:\n    database: mysql\n    database-platform: org.hibernate.dialect.MySQL8Dialect\n    ...
\n\n
@EnableConfigurationProperties(BatchProperties::class)\n@Configuration\nclass BatchConfig {\n\t\t// @Bean 없이 생성해야 primany datasource bean 은 mysql 이 된다.\n    private val batchDataSource =\n        EmbeddedDatabaseBuilder().setType(EmbeddedDatabaseType.H2)\n            .addScript(\"classpath:org/springframework/batch/core/schema-drop-h2.sql\")\n            .addScript(\"classpath:/org/springframework/batch/core/schema-h2.sql\")\n            .build()\n\n\t\t// 메타 테이블 스키마에 대한 초기화를 진행한다. 해당 설정이 없으면 테이블 생성은 mysql에 생성된다.\n    @Bean\n    fun batchDataSourceInitializer(\n        resourceLoader: ResourceLoader?,\n        properties: BatchProperties?,\n    ): BatchDataSourceInitializer =\n        BatchDataSourceInitializer(\n            batchDataSource,\n            resourceLoader,\n            properties,\n        )\n\n\t\t// 배치설정를 진행하며, 여기서 설정된 datasource에 배치 메타 데이터에 대해 crud 가 발생\n    @Bean\n    fun batchConfigurer(): BatchConfigurer = DefaultBatchConfigurer(batchDataSource)\n}
\n
\n

3.2. JPA로 수행되는 CUD 쿼리가 수행이 안되는 현상.

\n\n
@Configuration\nclass JpaConfig {\n\t\t// datasource bean 은 mysql 이다.\n    @Bean\n    @Primary\n    fun jpaTransactionManager(dataSource: DataSource): JpaTransactionManager {\n        return JpaTransactionManager().apply { this.dataSource = dataSource }\n    }\n}\n\nclass JobConfig {\n\t\t@Bean\n    fun dormantStep(\n        jpaTransactionManager: JpaTransactionManager,\n    ): Step {\n        return stepBuilderFactory[\"dormantStep\"]\n            .tasklet(dormantUserTasklet)\n            .transactionManager(jpaTransactionManager)\n            .build()\n    }\n\n    @Bean\n    fun dormantJob(\n        dormantStep: Step,\n        jobCompletionListener: JobExecutionListener\n    ): Job {\n        return jobBuilderFactory[\"dormantJob\"]\n            .listener(jobCompletionListener)\n            .start(dormantStep)\n            .build()\n    }\n}
\n
\n

3.3. index가 없을 경우 update, delete 쿼리가 수행되면?

\n\n
\n

4. Transaction 이 너무 긴 현상

\n
class ATestlet() : Tasklet {\n\toverride fun execute( {\n\t\t...\n\t\tloop (100) {\n\t\t\trun()\n\t\t}\n\t}\n}\n\nclass RunnerClass() {\n\t@Transactional\n\tfun run() {\n\t\t...\n\t}\n}
\n","fields":{"tagSlugs":["/tags/spring-batch/"],"slug":"/works/posts/2024-06-22--001"},"frontmatter":{"title":"스프링 배치작업 기록","tags":["springBatch"],"date":"2024-06-22","description":""}}},"pageContext":{"slug":"/works/posts/2024-06-22--001"}},"staticQueryHashes":[]}