기억의 기록(나의 기기)

Data Augmentation안녕하세요, 데이터 과학을 공부하고 있는 황경하입니다.오늘은 이전 포스팅에서 강아지, 고양이, MNIST 이미지를 증강하는 기법을 설명하였는데요. 글이 길어질 것 같아 그 효과를 설명하지 못했었습니다. 그래서 오늘은 데이터 증강 효과를 예제를 통해 보여드리겠습니다.이번에도 Google Colab 환경에서 작업하였습니다.코드: https://colab.research.google.com/drive/1lZdegtB7uyrTXlzVxLr8dXl38yC_1bYl?usp=sharing [Data Augmentation] 강아지, 고양이, MNIST 예시를 통한 설명Colab notebookcolab.research.google.comWithout Data Augmentation La..

Data Augmentation 안녕하세요, 데이터과학 공부하고 있는 황경하입니다.오늘은 데이터 증강 기법을 이용한 강아지, 고양이 분류 문제를 다뤄보겠습니다.코드: https://colab.research.google.com/drive/1lZdegtB7uyrTXlzVxLr8dXl38yC_1bYl?usp=sharing [Data Augmentation] 강아지, 고양이, MNIST 예시를 통한 설명Colab notebookcolab.research.google.com 서론 몇 년 전까지만 해도 강아지와 고양이를 분류하는 문제는 인공지능 분야에서 매우 어려운 일이었습니다. 왜냐하면, 강아지와 고양이를 구분하는 유일한 특징이 없을뿐더러, 있다고 하더라도 모든 견종에 포함되는 것은 아니기 때문이죠. 예를 들어..

머신러닝 - Pycaret 소개안녕하세요, 데이터과학을 전공하고 있는 황경하입니다.최근에  프로젝트를 진행하며 모델 생성, 하이퍼파라미터 튜닝, 모델 성능 비교까지 한 번에 가능한 라이브러리를 새로 알게 되었는데요, 한 번 경험해 보고 너무 놀라서 바로 이렇게 블로깅을 하게 되었습니다. 그 라이브러리는 바로 Pycaret입니다! 바로 가시죠!Pycaret이란?Pycaret 공식 홈페이지에서는 "PyCaret은 본질적으로 scikit-learn, XGBoost, LightGBM, CatBoost, spaCy, Optuna, Hyperopt, Ray 등과 같은 여러 기계 학습 라이브러리 및 프레임워크를 둘러싼 Python wrapper입니다."라고 설명합니다. 이를 좀 더 쉽게 설명해 보겠습니다. 만약, 우..

KT디지털인재 면접 준비 및 면접 후기안녕하세요, 데이터과학 공부하고 있는 황경하입니다.이전에, KT디지털인재장학프로그램이 무엇인지와 저의 신청기, 준비서류, 작성팁을 포스팅했었습니다.운이 좋게도, 1차 합격을 하게 되어 2차 면접을 준비하여 면접을 봤는데요.오늘은 그 준비 과정과 면접 후기를 적어볼까 합니다. 바로 가시죠! 면접 장소제가 봤던 면접 장소는 서울 종로구에 위치한 KT희망나눔재단이었는데요. 이번에 처음 가봤는데, 위치를 찾지 못할 뻔했어요. 제가 생각한 것은 KT라고 크게 적힌 건물에 위치해있겠다 싶었는데 그게 아니라 보령 빌딩이라고 적힌 건물 14층에 위치해 있더라고요! 만약, 면접을 보시는 분들은 저와 같이 헷갈리시는 일 없으시길 바랍니다.   면접 준비저의 면접 날짜는 2024.05...

논문리뷰안녕하세요, 데이터과학 전공하고 있는 황경하입니다.오늘은 1D-CNN, 2D-CNN을 활용한 교량 위 차량의 중량과 주행 속도를 예측하는 논문을 리뷰해보려 합니다.현재 소자 부식을 예측하는 프로젝트를 진행 중인데, 여러 모델을 사용하여 성능을 비교하려다 보니 CNN 모델까지 왔네요. 오늘은 CNN 모델 중 1D-CNN, 2D-CNN을 이용해 주행속도와 차량의 무게를 예측하는 논문을 리뷰해 보겠습니다.해당 논문: https://www.hindawi.com/journals/schm/2023/2287978/ A Data-Driven Approach for Bridge Weigh-in-Motion from Impact Acceleration Responses at Bridge JointsBridge we..

KT디지털인재장학 프로그램 신청기안녕하세요, 데이터과학 전공하고 있는 황경하입니다.오늘은 저의 2024년도 kt디지털인재장학프로그램 신청기를 포스팅해보려 합니다. 바로 가시죠!KT디지털인재장학프로그램이란?KT디지털인재장학프로그램이란 KT희망나눔재단에서 진행하는 장학프로그램으로 전국의 인공지능에 관심 있는 대학생들에게 리더쉽 프로그램과 등록금 전액을 지원해 주는 프로그램입니다. 1988년부터 시작해 지금까지 이어지고 있으며, KT에서는 ICT기술혁신과 AI관련 진로에 꿈이 있는 우수 학생들을 선발하여 AI역량을 내재화한 인재로 육성하는 프로그램이라고 정의하고 있습니다. 비전공자도 참여가능하지만, 비전공자라면 KT에서 주관하는 AICE(인공지능 능력시험) Basic 이상의 자격증을 보유해야 합니다. 전공자는..

K-Fold Cross Validation안녕하세요, 데이터과학을 전공하고 있는 황경하입니다.원래는 머신러닝 워크플로우 순서대로 올리고 싶었으나 논문리뷰에서 이 기법이 사용되어 읽으시는 분들의이해를 돕기 위해 먼저 쓰게 되었습니다. 바로 가시죠! 용어 정리k-fold : k개로 나눈다.cross: 교차validation: 검증 → k-fold cross validation: Data를 k개로 나누어 교차 검증을 시행한다.K-fold cross validation? Why?왜 K-fold cross Vadliation을 사용할까요? 데이터는 왜 나누어서 사용할까요? 이를 알기 위해선, 먼저 데이터의 분할을 이해해야 합니다. 일반적으로 데이터는 training data와 test data로 나눕니다. 그리고..

SQLD 합격 후기안녕하세요, 데이터과학 공부하고 있는 황경하입니다.오늘은 제가 합격한 SQLD 후기를 작성해보려 합니다.바로 가시죠! SQLD란?SQLD는 Structured Query Language Developer의 줄임말인데요, SQL은 데이터과학쪽에 관심이 있으시다면 한 번쯤 들어보셨을거라 생각합니다. SQL은 데이터베이스를 구축, 조회 및 연산을 다루는 데이터 언어입니다, 쉽게 말하면, 데이터를 저장할 수 있는 그릇을 데이터베이스라고 생각했을 때, 그 그릇을 관리하는 역할을 해주는 언어라고 생각하시면 됩니다.  그렇다면, SQL Developer는 무엇일까요? SQL Developer는 SQL개발자로 기초적인 데이터베이스 생성, 테이블 생성 및 스키마 구축, 데이터 검색, 연산 등의 작업을 ..

ADsP 자격증 후기안녕하세요, 황경하입니다.오늘은 여러분들에게 제가 합격한 ADsP 자격증 후기 및 공부법을 공유해보려합니다.ADsP란?ADsP는 데이터자격검정(kdata)에서 시행하는 국가공인자격증입니다.요즘 데이터를 활용하지 않는 사업은 드뭅니다. 거의 모든 산업에서 고객들의 데이터 혹은 어떠한 연구를 위한 사전 데이터들을 활용하여 마케팅 및 산업 발전에 쓰는 현실입니다. 그래서 그런지, 전공자 뿐만 아니라 비전공자 분들도 많이 도전을 하시고, 합격률 또한 63.28%(2022년 기준)로 국가공인자격증임에도 매우 높은 편입니다. 합격률이 높은 만큼 쉬운 편이기도 하구요. 또한, 데이터가 중요해지는 시대인 만큼 응시자수도 매년 증가하고 있습니다. ADsP의 과목 구성ADsP는 총 3과목으로 구성됩니다..

논문리뷰최근에 부식을 예측하는 프로젝트를 진행하고 있어 부식도를 예측 또는 부식의 원인을 분류하는 논문들에 관심이 많습니다. 그중 오늘은 3C 강의 부식 속도를 머신러닝 기술을 이용하여 예측하는 논문을 리뷰해 보겠습니다. 리뷰 논문: https://www.sciencedirect.com/science/article/pii/S2352492823010991?casa_token=NPk3R014OrEAAAAA:aJMdorfg1VZkAtjO5DDB2hbF97tNABu_AVEjXSahfCGs6F6VwtekqRBqqsH_48_G7GjjhYydAw0 * 해당 글에 첨부된 그림은 위 논문에서 발췌한 것임을 미리 밝힙니다.서론먼저, 3C 강이 무엇인지에 대해 정의해 보겠습니다. 3C 강은 Communication, Com..