마개

Data Engineer
마술을 좋아하고 자동화, 데이터를 다룹니다.

최근 포스트

Airflow 구축 및 변천사 - 도입 배경 및 선정

2 분 소요

 안녕하세요 마개입니다. 현재의 회사에서 Airflow를 1년 정도 넘게 사용 중인데 처음 Airflow를 도입하게 된 배경과 그동안의 변천사, 그 과정에서 생긴 고민들에 대한 내용을 정리하고자 합니다.

TensorFlow GPU 세팅하기

3 분 소요

 안녕하세요 마개입니다. ​이번에는 NVIDIA 그래픽카드가 달린 PC에 TensorFlow GPU를 세팅해서 사용해 보겠습니다. 업데이트 : 2023.10.09

[DevOps] CI/CD 툴 비교

1 분 소요

 안녕하세요 마개입니다. DevOps 분야에서 필요한 CI/CD 툴들에 대해 간단하게 정리를 하였습니다.

Apache Kafka란

2 분 소요

 안녕하세요 마개입니다. 이번 글에서는 데이터 파이프라인에 많이 이용하는 Apache Kafka에 대해 대략적으로 알아보도록 하겠습니다.

[Athena] AccessDeniedException 에러

1 분 소요

 안녕하세요 마개입니다. Python에서 AWS의 Athena를 이용할 때 발생한 에러를 다뤄보고자 합니다.

국내외 IT기업 기술 블로그

최대 1 분 소요

안녕하세요 마개입니다. 국내외 IT회사들의 기술 블로그 주소를 나열하였습니다. 참고용으로 봐주시길 바랍니다. (업데이트 날짜 : 2023.07.30)

[Data 포지션] Data Engineer

4 분 소요

 Data Engineer는 Data 분석 또는 경영진의 의사 결정을 위해 각기에 흩어져있는 데이터를 한곳으로 수집하여 저장하고 보여줄 수 있는 Data Pipeline을 구축하는 것이 주 업무입니다. Data가 굉장히 중요해진 만큼 Data 분석은 필수사항이 되었고 이를 효과적으...

[집필 후기] 당신의 칼퇴를 도와주는 UiPath 업무 자동화

3 분 소요

안녕하세요 마개입니다. 이번에 RPA 기술 서적을 집필하고 출판까지 진행하였는데 집필을 하게 된 계기와 과정, 느낀 점에 대해 작성하고자 합니다. 저만의 경험이기 때문에 편하게 보시면 좋을 것 같습니다. ​

[블로그] GitHub Pages와 Jekyll 이용하여 테크 블로그 만들기

2 분 소요

 안녕하세요 마개입니다.  기존에 네이버 블로그를 이용하여 IT 기술들에 대한 내용을 작성했는데 IT 기술을 작성하는 것은 다른 블로그에 작성하고자 합니다. 네이버에서 코드를 작성할 때 가독성이 떨어지는 문제도 있고 원하는대로 꾸미기가 힘들었기 때문입니다. 이에 대한 내용들을 공유...

RPA 자격증 살펴보기 (UiPath)

4 분 소요

유튜브와 책을 통해 RPA를 다루고 댓글이나 카카오톡 오픈채팅방을 통해서 여러분들과 이야기를 나누다보면 가장 궁금해하시는 것들중에 하나가 RPA 자격증이 있는지, 있으면 어떻게 공부해서 취득해야할지 또는 이 자격증이 꼭 필요할지에 대해 많이들 여쭤봅니다. 이번에는 이러한 RPA 자...