NLP - Word Embedding

July 30, 2021 8 minute read

Word Embedding 단어의 의미를 어떻게 나타낼 것인가 좋은 표현 방식: 단어간의 관계를 잘 표현할 수 있어야 함

Docker run through bind mount and assign name on container

July 29, 2021 less than 1 minute read

docker run with bind_mount and assign name to the container docker run -d -v `pwd`:/whale_test -it --name docker123456 mydocker

Download Gdrive file via wget or gdown

July 29, 2021 less than 1 minute read

Wget 링크 생성(링크가 있는 모든 사용자에게 공개) wget 쿠키 설정으로 다운로드 wget --load-cookies ~/cookies.txt "https://docs.google.com/uc?export=download&confirm=$(wget -...

NLP - Document Classification

July 28, 2021 6 minute read

문서 분류 (Text Classification) 문서 분류란 입력으로 받아, 텍스트가 어떤 종류의 범주에 속하는지를 구분하는 작업 다양한 문서 분류 문제 문서의 범주, 주제 분류 이메일 스팸 분류 감성 분류 언어 분류 ...

Docker Volume vs Bind Mount

July 28, 2021 less than 1 minute read

👉 Reference: https://www.daleseo.com/docker-volumes-bind-mounts/

Docker Build

July 27, 2021 less than 1 minute read

Build Docker Image & run, start, stop and exit container by using shell command $ bash docker/build.sh

Jekyll serve error: address already in use - bind(2) for 127.0.0.1:4000

July 27, 2021 less than 1 minute read

Problem After unexpectedly reload vscode for updating vscode, as I served jekyll from local host by bundle exec jekyll serve, jekyll 3.9.1 | Error: Address ...

NLP - Language Model

July 27, 2021 5 minute read

언어모델 다음 문장 다음에 이어질 단어는? Please turn your homework in or the ? 다음 두 문장 중 나타날 확률이 더 높은 것은? ...

NLP - text preprocessing

July 26, 2021 5 minute read

Intro 자연어의 의미를 컴퓨터로 분석해서 특정작업을 위해 사용할 수 있도록 하는 것 응용분야 기계번역 감성분석 문서분류 질의응답시스템 챗봇 언어생성 음성인식 추천시스템 ...

Examine Dacon K-fashion 3rd solution with Docker

July 26, 2021 5 minute read

git repo https://github.com/dacon-ai/K-Fashion-3rd

Docker install on ubuntu

July 25, 2021 5 minute read

Setup the docker via Repository 1. Update the apt package index and install packages to allow apt to use a repository over HTTPS: $ sudo apt-get update $ sud...

Big data - ML Pipeline과 Tuning 소개와 실습

July 23, 2021 4 minute read

Spark MLlib 모델 튜닝 소개 Spark MLlib 모델 튜닝 최적의 하이퍼 파라미터 선택 최적의 모델 혹은 모델의 파라미터를 찾는 것이 아주 중요 하나씩 테스트해보는 것 vs. 다수를 동시 테스트 하는 것 모델 선택의 중요한 ...

07-22 Live Session

July 22, 2021 less than 1 minute read

Spark 이란 Pandas의 스테로이드 버전 + SQL + Scikit-learn + Streaming

Object Detection Models

July 22, 2021 less than 1 minute read

Big data - Spark MLlib 소개와 머신러닝 모델 빌딩

July 21, 2021 6 minute read

Spark MLlib 소개 머신러닝 관련 다양한 알고리즘, 유틸리티로 구성된 라이브러리 Classification, Regression, Clustering, Collaborative Filtering, Dimensionality Reduction, … ...

Big data - SparkSQL을 이용한 데이터 분석

July 21, 2021 10 minute read

커리어 이야기 남과 비교하지 말고 앞으로 20-30년을 보기 하나를 하기로 했으면 적어도 6개월은 파고 들기 너무 빨리 포기하지 않기 뭔가 잘 안되면 서두르기 보다는 오히려 천천히 가기 공부를 위한 공부를 하기 보다는 일을 ...

Big data - Spark

July 19, 2021 6 minute read

빅데이터 기술이란 Spark 소개 판다스와 비교 Spark 실습

Big data

July 19, 2021 6 minute read

데이터 팀의 역할 데이터 팀의 미션 신뢰할 수 있는 데이터를 바탕으로 부가가치 생성

ML Basics - todo

July 15, 2021 less than 1 minute read

정리할 것

Autoencoder Naver d2

July 15, 2021 less than 1 minute read

Autoencoder