Text Processing Functions
자연어 처리는 품이 많이 듭니다. 단어부터 문장, 맥락까지 처리할 것이 한 두 가지가 아닙니다. 그러면서도 반복이 많습니다. 함수로 만듭니다. 초록 요약 및 키워드 추출 Pega Devlog: Open API를 이용한 고속 논문 분석 우연히 시작한 문헌 분석 일이 형태를 갖춰 갑니다. 주먹구구로 시작했던 일을 체계적으로 정리하고자 합니다. 무엇보다
Home
1001 days commit Q&A (2)
2019년 11월 9일부터 기록된 일일커밋이 2022년 8월 5일자로 1001일을 달성했습니다. 스스로 조금 뿌듯해서 관련된 기록을 남겨보고 싶었습니다. 커뮤니티 등을 통해 47분에게 받은 응답을 가상 인터뷰 형식으로 정리합니다. 2.데이터 분석 & 커리어 Q10. 지금 하는 일은 무엇인지?목승찬 A10. 정부출연연구소에서 데이터, AI등을 담
1001 days commit Q&A (1)
2019년 11월 9일부터 기록된 일일커밋이 2022년 8월 5일자로 1001일을 달성했습니다. 스스로 조금 뿌듯해서 관련된 기록을 남겨보고 싶었습니다. 커뮤니티 등을 통해 47분에게 받은 응답을 가상 인터뷰 형식으로 정리합니다. 1.천일커밋 Pega: githubcraiyon.com: DALL.E mini Q1. 커밋은 언제부터 시작했습니까? A
Matplotlib Animation
정지된 그림으로는 볼 수 없는 것들이 있습니다. 시간에 따른 변화나 입체 도형의 뒷면이 그것입니다. 애니메이션을 활용해 이를 보완합니다. 1. Matplotlib animation matplotlib.animation Matplotlib에서 사용할 수 있는 애니메이션은 두 가지가 있습니다. Artist 객체 변화를 저장하는 ArtistAnimati
hyperparameter
한국에너지기술연구원 AI 학습조직에서는 2022년 한 해동안 머신러닝을 공부하고 있습니다. 이번 시간에는 머신러닝 성능 막판 끌어올리기, hyperparameter tuning을 소개했습니다. 문제, 데이터, 모델 선정에 최선을 다했다면 학습 환경을 최적화할 차례입니다. 강의 자료는 여기에서 다운받으실 수 있습니다 발표 영상 : (Youtube L
Matplotlib 3D Plots (3)
Matplotlib으로 3D Plot을 할 수 있습니다. 많은 분들이 알고 있는 사실이지만 적극적으로 쓰이지 않습니다. seaborn KDE plot을 3D로 표현합니다. 5. KDE plot 2D KDE plot은 전달력이 좋고, 은근 예쁘기도 합니다. 두 인자의 상관 분포를 표현하는 그림으로, 데이터의 밀도를 선이나 색으로 나타냅니다. 2D 공간을
트리 모델
한국에너지기술연구원 AI 학습조직에서는 2022년 한 해동안 머신러닝을 공부하고 있습니다. 이번 시간에는 decision tree와 random forest, xgboost를 비롯한 tree model을 공부하고 AutoML의 예시로 PyCaret을 소개했습니다. 강의 자료는 여기에서 다운받으실 수 있습니다 발표 영상 : (Youtube Link)
Open API를 이용한 고속 논문 분석
저는 데이터, AI 담당자로서 낯선 분야의 업무를 맡아 논문 작성을 요구받고 있습니다. 공저자로서 데이터 분석이나 AI 모델링 파트만 작성하라면 그냥 하면 됩니다. 그러나 주저자로서 서론부터 작성하는 일은 너무 어렵습니다. 이 분야의 흐름을 파악하고 다른 이들의 연구를 언급해야 하는데 대량의 논문을 읽기엔 단어부터 낯설기 때문입니다. 처음 보는
improvement- COVID antibody holder
최근 무작위 조사 결과 95%의 사람들에게서 코로나19 항체가 발견되었다고 합니다. 한 뉴스에서 이 기사가 보도되었는데 시각화가 적절치 못했습니다. 이를 나름대로 바로잡아 새로 그려봅니다. 채널A: 무작위 조사했더니…국민 100명 중 95명은 코로나 항체 보유 1. 언론 보도 2022년 6월 14일, 1612명을 대상으로 코로나19 항체 보유를 조
Scheduling without CRON
윈도에서 반복 작업은 작업 스케줄러를 사용합니다. 리눅스에서는 cron을 사용합니다. 그런데 cron을 사용할 수 없어서 다른 방법을 찾았습니다. 1. crontab wikipedia: cronO! JAVA: [Linux]crontab 설정 및 로그 확인 Unix 계열에서 주기적으로 수행될 작업을 등록하여 실행하는 도구입니다. 1975년에 AT&am