stay the course

[*23#] 읽기는 살려 두고 DB를 옮기는 법: 쓰기 버퍼 컷오버 가이드

서비스를 멈추지 않고 MySQL을 새 DB(AWS RDS)로 옮기는 방법입니다. 전환하는 동안 쓰기 요청을 메시지 큐에 잠시 맡겨 두고, 새 DB가 준비되면 그대로 반영합니다. 그동안 읽기는 계속 정상으로 동작합니다.용어 정리컷오버서비스가 쓰는 DB를 기존 것에서 새 것으로 넘기는 순간, 또는 그 작업 전체binlog 복제MySQL이 변경 내역을 기록한 로그(binlog)를 새 DB가 받아 그대로 따라 적용하는 방식. 전환 직전까지 두 DB를 같게 유지함쓰기 버퍼쓰기 요청을 DB 대신 메시지 큐에 잠시 맡겨 두었다가 나중에 반영하는 방식SQS FIFOAWS 메시지 큐 중 순서를 보장하는 종류. 같은 그룹(예: 같은 채팅방) 안에서는 넣은 순서대로 꺼냄DLQDead Letter Queue. 여러 번 처리에..

안녕하세요 우당탕탕 개발일지 입니다. cloudfront를 처음에 연동해뒀지만 설정이 달라서 고친다고 헤맸습니다. 트러블 슈팅했던 내용과 연결 가이드를 적어봤습니다. 0.전체 구조 요약1. 트러블 슈팅 2. CloudFront로 프론트엔드 서빙하기 가이드 전체 구조 & 요약- 액세스 키 없이 OIDC로 AWS 권한을 빌린다- S3 버킷은 비공개, CloudFront만 OAC로 읽는다- 사용자 ↔ CloudFront ↔ S3 전 구간 HTTPS[ 에러 구분하기] 1. S3 REST(OAC) 권한 문제 → XML AccessDenied 발생 2. S3 웹사이트 주소 → HTML 목록 + "Custom Error Document" 문구 1. 트러블슈팅1-1. CD는 성공했는데 504 Gateway ..

안녕하세요, 우당탕탕 개발일지입니다. 이번 글에서는 제가 DB 확장성에 대해 고민했던 내용을 정리해봤어요. 미리 말씀드리면 결론적으로 이번에 고민한 확장성은 v3 설계로 미뤄졌습니다. 부하 테스트를 돌려보니 실제로는 DB를 확장할 만큼 CPU를 쓰지 않았거든요. 그래도 고민하면서 정리한 내용이 아까워서어떤 방식들을 저울질했는지 기록으로 남겨봅니다. 제가 설계하는 서비스는 트래픽이 오후 8~10시 2시간에 집중되고 피크와 비피크 차이가 약 9배에 달한다. 읽기·쓰기 비율은 약 4:3으로 쓰기 비중이 높은 편입니다. 이 특성 때문에 확장 전략에는 두 가지 요구사항이 생깁니다.피크의 높은 부하(특히 쓰기 I/O)를 견딜 수 있어야 한다.비피크에는 다시 축소할 수 있어야 한다. (22시간을 피크 사양으로..

안녕하세요 우당탕탕 개발일지 입니다. 아주 오랜만에 블로그를 다시 쓰게 되었습니다... 8월 9일까지 개인프로젝트 마무리하고 수업때 이것저것 배우면서 배운 내용 복습도 겨우겨우 따라가느라.. 이제야 회고를 하러 왔습니다. 1. 카카오 테크 부트캠프 회고 (팀플 전까지 )Q 학교랑 병행할만 한가? 제가 시작할때 가장 걱정했던 부분인데.. 학교 다니시면서 병행하신 분의 후기들이 많이 없어서.. 남기게 되었습니다.. 저는 13학점정도를 수강했고 3학점은 졸업 프로젝트 , 3학점은 온라인 강의로 화,수 공강으로 지냈습니다. 공강이 있어도 카테부를 신청하는 시점에.. 체험형 인턴도 같이 자소서를 넣으면서 졸업프로젝트 개발 마무리 하고 있었어서 4~6월은 정말 바쁘게 지냈습니다. 특히 제가 spring으로..

안녕하세요 우당탕탕 개발일지 입니다. 카테부를 시작하고 당일 배운 내용을 당일에 정리하려고 합니다. 매일 기록하고 공유해서 성장하는 개발자가 되고 싶습니다. 틀린 내용 있으면 댓글 부탁드립니다! 컴퓨터언어 : 인간이 기계에게 명령하기 위해서 만들어둔 언어로 프로그래밍 언어가 컴파일을 통해서 기계가 이해할 수 있는 이진수로 변환되는 것.자바 : OS가 달라도 동일한 동작을 하는 객체지향 언어로 인터넷의 보급과 함께 빛을 본 언어.JDK: 자바 개발을 위한 환경으로 실행에 필요한JRE와 개발용 도구로 이루어져 있음.JRE: 자바를 실행하기 위한 최소한의 환경으로 JVM과 클래스 라이브러리로 이루어져 있음.바이트코드 : 다른 OS에서도 동일하게 실행할 수 있도록 변환된 중간코드이고 JVM이 있는 환경이면 ..

안녕하세요. 우당탕탕 개발일지 입니다.개발 중 자세한 기록이 중요하다고 생각해 개발이 거의 끝난 시점이지만 그동안의 고민과 질문을 기록하려고 합니다. 틀린 부분 있으면 댓글 남겨주시면 반영 하겠습니다. 로컬에서 개발한 모델을 웹 상에 띄우니 너무 차이가 많이 나서 오늘은 그 문제를 몇가지 조정을 통해서 개선 해보았습니다. 문제 : 지문자 인식률이 거의 98%에서 아예 인식 안되는 것도 몇몇 있는 정도로 성능이 낮아짐. 원인 1) 기존에는 서버로 보내서 판별하는 형식이 아니라 같은 프로젝트 내에 이미 모델이 존재했음.하지만 좌우반전된 영상을 서버로 보내서 성능이 떨어진 것이였음. 해결 1) 프론트에서 이미 좌우반전해서 서버로 보냄→ 수어는 원래 좌우가 상관 없지만 데이터 촬영할때 오른손..

안녕하세요. 우당탕탕 개발일지 입니다. 카테부 클라우드 4기에 최종 합격하게 되었습니다. 1. 솔직한 지원 이유 저는 인프라 개발자로 진로를 정하고 어떤 방식으로 공부를 해야할지 찾다가 '카카오 클라우드 네이티브' 과정 인터뷰 영상을 보고 26년(올해) 초부터 준비를 시작했습니다. 네트워크와 OS는 학교에서 배우지만 인프라 신입 공고에 쓸 프로젝트가 필요했고 무엇보다 인프라 관련 CS지식도 부족해 체계적인 교육을 받고 싶다는 생각이 컸습니다. https://ktb-blog.goorm.io/jobsuccess-cloud-toss/ 토스 취업 사례 | 클라우드 네이티브 과정 수료생 박용준 - 카카오테크 부트캠프 블로그끝이 보이지 않는 공백기는 평소라면 하지 않을 부정적인 생각들을 키우곤 합니다. 흐르는..

안녕하세요. 우당탕탕 개발일지 입니다.개발 중 자세한 기록이 중요하다고 생각해 개발이 거의 끝난 시점이지만 그동안의 고민과 질문을 기록하려고 합니다. 틀린 부분 있으면 댓글 남겨주시면 반영 하겠습니다. 1. 가상 환경 개념 가상환경: 하나의 컴퓨터 안에 “프로젝트별 전용 작업 공간”을 만드는 것.https://wikidocs.net/267778 04_01. 파이썬 가상환경을 만들어 사용하는 이유파이썬 가상환경(virtual environment)은 프로젝트마다 독립된 파이썬 실행 환경을 제공하기 위한 도구입니다. 가상환경은 프로젝트 간의 의존성 충돌을 방지하고, 관리 …wikidocs.net 구분가상 환경DockerVM(가상머신)분리 범위?">Python앱 + 일부 OS전체 OSOS 공유?">O..

안녕하세요 우당탕ㅌ아 개발일지 입니다.. 코테가 부족한 것 같아서 하루에 4시간씩 꾸준히 하려고 합니다. 코테를 쉰지 거의 1년이 넘어서.. 많이 반성하고 다시 열심히 하겠습니다! 첫날이라 4h. 53m 정도 했고 시간 잘가네요 - 전에 푼 문제 복습 1문제- 새로운 문제 2문제 -4시간 중 시간 남으면 '바킹독' 조건 ) 시작 idx를 명시하지 않아서 음수, 양수 벡터 2개를 사용했습니다. 주의) 0이 음수 양수 각각 2번씩 들어갑니다. 중복해서 카운트 안하게 주의!주의) 현재 시작점도 포함해서 뒤집어서 사실상 갯수-1만큼 움직입니다. (현재칸이 검정이라도 그걸 포함하고 세야함) #include #includeusing namespace std;int main() { // 런타임 에러 이유 못 밝..

안녕하세요 우당탕ㅌ앙 개발일지 입니다. 전자공학부 수업중 블록체인을 듣게 되었는데 시험 준비하면서 만든 문제가 있어서 올립니다.하핫 적중은 하나도 못했답니다. 시험은 더 응용되어서 나왔고 문제를 너무 잘내셔서 공부 더 열심히 해야지 생각만 들었습니다. 경북대 이경근 교수님 수업입니다! 저는 타과인데 너무 잘 듣고 있습니다. 이번이 1회차 수업인데 꼭 계속 열리면 좋겠어요 ㅠ 교수님 강의력 너무 좋으시고 강의에 진심인게 느껴져요. 저는 시험 문제 처럼 정리해서 외우는게 편해서 이런식으로 정리했습니다. BIP-39엔프로피(128) = 랜덤 비트 생성체크썸 추가 : 128+4 =132132/11=12(11bit에서 매핑), 12단어니모닉 12단어2048회 반복 + mnemonic+선택적 ~마스터 시드 (51..