GeoIP API 성능 개선

I. 코드베이스 버전 관리되는 하나의 코드베이스와 다양한 배포 II. 종속성 명시적으로 선언되고 분리된 종속성 III. 설정 환경(environment)에 저장된 설정 IV. 백엔드 서비스 백엔드 서비스를 연결된 리소스로 취급 V. 빌드, 릴리즈, 실행 철저하게 분리된 빌드와 실행 단계 VI. 프로세스 애플리케이션을 하나 혹은 여러 개의 무상태(stateless) 프로세스로 실행 VII. 포트 바인딩 포트 바인딩을 사용해서 서비스를 공개함 VIII. 동시성(Concurrency) 프로세스 모델을 사용한 확장 IX. 폐기 가능(Disposability) 빠른 시작과 그레이스풀 셧다운(graceful shutdown)을 통한 안정성 극대화 X. 개발/프로덕션 환경 일치 개발, 스테이징, 프로덕션 환경을 최대한 비슷하게 유지 XI. 로그 로그를 이벤트 스트림으로 취급 XII. Admin 프로세스 admin/maintenance 작업을 일회성 프로세스로 실행

1. git을 통한 코드베이스 관리 2. go module을 이용한 종속성 관리 3. 환경변수를 이용한 설정을 관리하도록 uber의 go-env를 사용 4. 백엔드 서비스는 연결된 리소스로 처리하기 위해 repository layer로 분리 5. ci를 이용한 빌드와 분리된 실행 단계 6. 여러 개의 무상태 프로세스로 실행할 수 있도록 cobra cli를 이용한 run command 분리 7. 포트 바인딩을 통한 서비스 공개 8. goroutine을 활용한 동시성 처리 9. uber의 의존성 주입 프레임워크 fx의 hook을 이용한 graceful shutdown 처리 10. docker image 빌드를 통해 개발/프로덕션 환경이 일치하도록 처리 11. 로그를 이벤트 스트림으로 처리 12. admin/maintenance 작업을 일회성 프로세스로 실행 할 수 있도록 관리용 endpoint 추가

$ tree todolist-api/modules -L 1 # 1 depth만 출력 todolist-api/modules ├── README.md ├── _test ├── config ├── delivery ├── domains └── repository

$ tree delivery -L 3 delivery ├── README.md ├── cmd │ ├── README.md │ ├── config.go │ ├── root.go │ └── run.go └── web ├── README.md ├── modules.go ├── server.go ├── v1 │ └── todo │ ├── handler.go │ ├── params.go │ └── response.go └── validator.go

$ tree repository -L 2 repository ├── README.md └── _dbms ├── logger.go ├── modules.go ├── mysql.go └── sqlite.go

$ tree domains -L 2 domains ├── modules.go ├── response.go └── todo ├── README.md ├── models.go ├── service.go └── service_test.go

settings := getEnv() repository, err := NewRepository(settings.DSN) if err != nil { return err } service, err := NewService(repository) if err != nil { return err } controller, err := NewController(service) if err != nil { return err }

func BenchmarkRandInt(b *testing.B) { for i := 0; i < b.N; i++ { rand.Int() } }

# new profile $ go test -benchmem \ -run=^$ \ -bench ^new_함수명$ new_모듈_경로 \ -cpuprofile new_cpu.out # legacy profile $ go test -benchmem \ -run=^$ \ -bench ^legacy_함수명$ legacy_모듈_경로 \ -cpuprofile old_cpu.out # cpu 비교 $ go tool pprof -diff_base=new_cpu.out legacy_cpu.out File: geoip.test Type: cpu Time: Dec 14, 2021 at 2:51pm (KST) Duration: 2.81s, Total samples = 1.26s (44.85%) Entering interactive mode (type "help" for commands, "o" for options) (pprof) svg Generating report in profile001.svg

// event.go#L12 var eventPool = &sync.Pool{ New: func() interface{} { return &Event{ buf: make([]byte, 0, 500), } }, } ... // event.go#L23 type Event struct { buf []byte w LevelWriter level Level done func(msg string) stack bool // enable error stack trace ch []Hook // hooks from context skipFrame int // The number of additional frames to skip when printing the caller. } ... // event.go#L243 // Str 문자열 타입의 값을 로깅하기 위한 메서드 func (e *Event) Str(key, val string) *Event { if e == nil { return e } e.buf = enc.AppendString(enc.AppendKey(e.buf, key), val) return e }