최근 포스트

[MAC] MacOS 업그레이드 후 xcrun error

최대 1 분 소요

 안녕하세요 마개입니다. 2017년형 맥북을 이용 중인데 필요에 따라 OS를 업그레이드해야 했습니다. (Ventura) 업그레이드는 정상적으로 진행되었지만 이후에 터미널에서 발생한 에러에 대해 알아봅니다.

[리뷰] AutoML 인 액션

최대 1 분 소요

 안녕하세요 마개입니다. 이번 달에 소개해 드릴 책은 “AutoML 인 액션”입니다. 해당 책에 대해 알아봅시다.

이직 회고

3 분 소요

 안녕하세요 마개입니다.  올해 5월에 새로운 회사로 이직을 하게 되었습니다. 이직을 준비하는 과정과 느낀점에 대한 회고를 작성하고 싶었는데 벌써 5개월이 지났네요. 더 늦기 전에 회고를 작성해봅니다.

[리뷰] 보이지 않는 위협

최대 1 분 소요

 안녕하세요 마개입니다. 이번 달에 소개해 드릴 책은 “보이지 않는 위협”입니다. 해당 책에 대해 알아봅시다.

[Linux] Ubuntu에 Jekyll 설치하기 (Github IO)

1 분 소요

 안녕하세요 마개입니다. 새로운 데스크탑을 맞추고 Linux를 이용하기 위해서 Ubuntu 22.04를 설치했습니다. 여기에 새로운 개발 환경들을 세팅하고 기존에 운영하고 있던 Github IO를 이용하기 위해 Jekyll도 설치하려고 합니다. 이번에는 이 설치 과정들을 봅니다.

[Linux] Ubuntu에 개발환경 세팅하기

4 분 소요

 안녕하세요 마개입니다. 새로운 데스크탑을 맞추고 Linux를 이용하기 위해서 Ubuntu 22.04를 설치했습니다. 여기에 제가 평소에 개발하는 환경들을 세팅하려고 합니다. 설치하는 툴이나 방법들이 저에게 필요한 것들이기 때문에 여러분과는 다를 수 있다는 점을 알아주시면 됩니다.

[리뷰] 데이터 품질의 비밀

1 분 소요

 안녕하세요 마개입니다. 이번 달에 소개해 드릴 책은 “데이터 품질의 비밀”입니다. 해당 책에 대해 알아봅시다.

[Airflow] 커스텀 XCom 사용

2 분 소요

 안녕하세요 마개입니다. Airflow를 이용하는데 있어 Task 간에 데이터를 주고 받는 방법에는 여러 방법이 있는데 기본적으로는 XCom이라는 기능을 제공합니다. 이 XCom에 대해서 Custom해보는 과정을 알아봅니다.

[Airflow] DAG에 이슈가 있을 때 체크포인트

최대 1 분 소요

 안녕하세요 마개입니다. Airflow를 운영함에 있어 DAG에 이슈가 있을 때 체크해봐야할 사항들에 대해 알아봅니다. 자료는 Marc Lamberti님의 자료를 참고했습니다.

[Linux] 비밀번호 없이 SSH 원격 접속하기 (PEM Key 생성)

최대 1 분 소요

 안녕하세요 마개입니다. Linux 상에서 원격서버(마찬가지로 Linux)에 SSH 접속을 할 때 계정과 비밀번호를 요구합니다. 하지만 자동화를 하는 과정에서는 계정과 비밀번호를 입력할 수 없으니 (또는 계정과 비밀번호를 하드코딩하는 것은 보안상에 문제가 됨.) OpenSSH와 사...

[EKS] 시작해보기

2 분 소요

 안녕하세요 마개입니다. AWS의 수많은 서비스들 중에서 EKS를 이용해서 Kubernetes Cluster를 구성해보고자 합니다. AWS EKS의 공식 문서를 보고 따라해보았습니다.

[Airflow] Secrets Backend

1 분 소요

 안녕하세요 마개입니다. 일반적으로 connections와 variables는 환경변수 또는 메타스토어 데이터베이스에서 조회가 가능하지만 대체안으로 AWS SSM Parameter Store, Hashicorp Vault Secrets 또는 직접 구성하여 사용할 수 있습니다. 이번...