분류 전체보기
파이썬 클린코드 Chapter1, Chapter2
Chapter1 and Chapter2 파이썬 클린코드 | Notion유지보수가 쉬운 파이썬 코드를 만드는 비결acoustic-resonance-6af.notion.site 조금씩 올려야지,, 투비컨티뉴
점프 투 파이썬
240907 회사에서 매주 세미나로 파이썬을 공부하고 있는데, 1. 점프 투 파이썬 - 완2. 쉽게 배우는 파이썬 데이터 분석 - 완3. 파이썬 클린코드 - 진행 중 이다! 사실 1, 2번 책은 난이도가 조금 낮은 편이어서인지 흥미가 떨어져 호다닥 끝내버렸고 클린코드 책은 재밌어서 열심히 공부 중이다. 블로그에도 꾸준히 포스팅해보도록 노력해야겠다! 점프 투 파이썬 점프 투 파이썬 | NotionBuilt with Notion, the all-in-one connected workspace with publishing capabilities.acoustic-resonance-6af.notion.site 블로그 포스팅 했어야 하는데 4개월 동안 안 한 나 반성하도록 행~~아! 대신 회사 기술 블로그를 ..
쉽게 배우는 파이썬 데이터 분석
240907 WoW 4개월 만의 포스팅이라니,,그동안 회사에서 매주 세미나 했던 내용 노션에 정리한 링크를 올려야겠따.블로그에도 따로 한 챕터씩 포스팅할까 했지만 티스토리에 쉽게 컨버팅 하는 방법도 모르겠고,, 굳이~~ 비 효율인 것 같아서!~!~! 주피터 노트북에 작성한 챕터들도 있는데, 어떻게 노션에 옮길지 고민하다가 모르겠어서 그냥 냅다 full screen capture~~~ 쉽게 배우는 파이썬 데이터 분석 쉽게 배우는 파이썬 데이터 분석 | NotionBuilt with Notion, the all-in-one connected workspace with publishing capabilities.acoustic-resonance-6af.notion.site 갑자기 데이터 분석인가 싶지만 난이..
cdn.jsdelivr.net SSL 인증서 만료
240502 평화로울 줄 알았던 목요일 오전.. 출근하자마자 10시쯤 갑자기 웹이 고장 났다.출고도 다 못 했는데 고장났따.. 천재 사수님이 바로 cdn 서버가 고장 난 거라고 말해주셨다.하지만 난 믿을 수가 없었다. 사수님을 안 믿은 게 아니라 ㅋㅋㅋㅋㅋㅋㅋ cdn 서버가 고장 났다는 것을 믿을 수가 없기 때문!!!그럼 전 세계가 다 고장났다는 뜻인가? 이럴 수가 있냐구!! 찾아보니 net::ERR_CERT_DATE_INVALID 에러는 SSL 인증서 관련된 오류라고 한다. 실제로 저 때 고장 난 cdn 링크들에 접속해보면 SSL 인증서가 고장난 날(5월 2일) 오전 9시?로 만료되어 있었다. 이 정도 사태면 다른 사람들도 다 고장 났을 것 같아서 나는 이곳저곳 물어보고 혹시 고장 난 사람들이 모여있..
TIL_day32 Redshift
230303 일 Redshift 특징 AWS 2PB OLAP 응답속도가 빠르지 않기 때문에 프로덕션 DB로 사용 불가 컬럼 기반 스토리지 레코드별로 저장하는 것이 아니라 컬럼별로 저장함 컬럼별 압축이 가능하며, 컬럼을 추가하거나 삭제하는 것이 아주 빠름 벌크 업데이트 지원 레코드가 들어있는 파일을 S3로 복사 후 COPY 커맨드로 Redshift로 일괄 복사 고정/가변 비용 SQL 엔진 Datashare 기능 다른 AWS 계정과 특정 데이터 공유 가능 (Snowflake를 따라 함) 다른 DW들과 동일하게 primary key uniqueness 보장 x Postgesql 8.x과 호환 하지만 완전 호환은 아님 (예를 들어 text 타입이 존재하지 않음) 스케일링 방식 용량이 부족해질 때마다 새로운 노드..
TIL_day31 ETL/ELT
230522 MON 240303 수정 8주 차 학습 주제 - ETL, ELT, Redshift, 데이터 분석/처리용 고급 SQL, BI 대시보드 (1) 직군별로 알아보는 데이터의 흐름 1. 데이터 인프라 구축 - 데이터 엔지니어 서비스에서 직접 생기는 데이터와 써드파티를 통해 생기는 간접데이터를 ETL 과정을 거쳐 데이터 웨어하우스에 적재하는 것을 데이터 인프라를 구축하는 것이라 한다. *데이터 웨어하우스란, 회사에 필요한 모든 데이터를 모아놓은 중앙 데이터베이스로 SQL 기반 데이터베이스이다. 프로덕션용 데이터베이스(OLTP)와는 별개여야 한다.(OLAP) 데이터의 크기에 맞게 어떤 데이터베이스를 사용할지 선택해야 하는데 다음 중 하나를 선택할 수 있다. AWS Redshift Google Cloud ..
TIL_day28 AWS IAM, S3, CodePipeline
24.02.17 토 IAM (Identity and Access Management) AWS 리소스에 대한 액세스를 안전하게 제어할 수 있는 웹서비스. IAM을 사용해 리소스를 사용하도록 인증(로그인) 및 권한 부여된 대상을 제어한다. AWS 계정을 생성할 때는 해당 계정의 모든 AWS 서비스 및 리소스에 대한 완전한 액세스 권한이 있는 단일 로그인 ID로 시작한다. 이 자격증명은 AWS 계정 루트 사용자라고 하며, 계정을 생성할 때 사용한 이메일 주소와 암호로 로그인하여 액세스 한다. 일상적인 작업에 루트 사용자를 사용하지 않을 것을 강력히 권장. IAM 정책 - 사용자 - 그룹 - 역할 IAM의 특징 AWS 계정에 대한 공유 세분화된 권한 EC2에서 실행되는 애플리케이션을 위한 보안 AWS 리소스 액..
