study/딥 러닝을 이용한 자연어 처리 입문

01-03 머신 러닝 워크플로우(Machine Learning Workflow)

머신 러닝(Machine Learning) 과정에서 거치는 전반적인 과정에 대한 안내0. 머신러닝이 뭐야?머신러닝은 정답을 직접 프로그래밍하지 않고, 많은 예시 데이터를 통해 컴퓨터가 스스로 규칙을 찾게 하는 방법1. 수집(Acquisition)머신 러닝을 하기 위해서는 기계에 학습시켜야 할 데이터가 필요자연어 데이터를 말뭉치 또는 코퍼스(corpus) 라 부름. 코퍼스의 의미는 특정 도메인으로부터 수집된 텍스트 집합.2. 점검 및 탐색(Inspection and exploration)데이터의 구조, 노이즈 데이터, 머신러닝 적용을 위한 데이터 정제 방법 등의 탐색탐색적 데이터 분석 단계라고도 함.독립 변수, 종속변수, 변수 유형, 변수의 데이터 타입 등의 데이터의 특징과 내재하는 구조적 관계 확인3. ..

study/딥 러닝을 이용한 자연어 처리 입문

01-02 필요한 기본 패키지 설치

코랩 실습 진행시 필요없으나 로컬 환경 실습을 위한 NLTK와 KoNLPy 설치 챕터스터디를 위한 가상환경 구성스터디를 위한 가상환경 생성conda create -n ml-study python=3.10 -y-n : 네이밍, ml-study라은 가상환경 이름 설정-y : 앞으로 요청들에 대해 모두 yes 처리 약관 미동의로 인한 에러, 안내되는 내용을 터미널에 입력 conda tos accept --override-channels --channel https://repo.anaconda.com/pkgs/main conda tos accept --override-channels --channel https://repo.anaconda.com/pkgs/r conda tos accept --overrid..

study/딥 러닝을 이용한 자연어 처리 입문

01-01 코랩(Colab)과 아나콘다

아나콘다머신 러닝 실습을 하기 위해서는 많은 패키지가 필요아나콘다는 언어의 패키지, 의존관계와 환경을 관리하는 툴필요한 패키지들을 모아놓은 파이썬 배포판 '아나콘다'를 설치하는 것을 권장설치 링크강의 교재에서는 언급되지 않았지만, 미니콘다 설치미니콘다란?아나콘다의 기능 중 아주 최소한의 것만으로 시스템을 시작하고, 점점 기능을 키워 나감기본적인 요구 사항만 포함하고 있으며, 원하는 패키지를 그때그때 설치해서 사용미니콘다 + 가상환경 구성설치미니콘다 다운로드 후 안내 사항에 따라 쭉 설치 진행설치 후 아나콘다 프롬프트 관리자 권한 실행아나콘다 파이썬 패키지를 전부 최신 버전으로 업데이트, 아래 명령어 입력 후 안내에 따라 쭉 진행conda update -n base conda conda update --a..

study/딥 러닝을 이용한 자연어 처리 입문

00_init

개요딥러닝 파이토치 교과서 - 입문부터 LLM 파인튜닝까지NLP, LLM 관련 개념 공부를 하다가 교재로 정리가 잘된 위키독스를 찾아 해당 내용을 바탕으로 스터디를 해보려고 한다.깃허브 주소: https://github.com/ukairia777/pytorch-nlp-tutorial / fork : https://github.com/merryiscat/pytorch-nlp-tutorial.git

study/python

01. CS50P - Lecture 0 - Functions, Variables

https://www.youtube.com/watch?v=JP7ITIXGpHk&t=4s파이썬 기초: 코드 작성과 함수 (Creating Code with Python)이 문서는 파이썬(Python)의 기초 문법인 함수, 변수, 데이터 타입(문자열, 정수, 실수), 그리고 사용자 정의 함수에 대해 다룹니다.1. 개발 환경과 첫 프로그램텍스트 편집기와 터미널VS Code (Visual Studio Code): 코드를 작성하고 편집하는 도구입니다. 파일 탐색기와 터미널 기능이 통합되어 있습니다.터미널 (Terminal): 텍스트 기반 명령(CLI)을 통해 컴퓨터와 소통하는 창입니다.code hello.py: VS Code에서 hello.py라는 파일을 생성하거나 엽니다.python hello.py: 파이썬 인..

study/python

00. CS50P - Introduction

https://www.youtube.com/watch?v=OvKCESUCWII 개요 / 목차 안내0. Functions, Variables (함수, 변수)1. Conditionals (조건문)2. Loops (루프)3. Exceptions (예외)4. Libraries (라이브러리)5. Unit Tests (단위 테스트)6. File I/O (파일 I/O)7. Regular Expressions (정규 표현식)8. Objet-Oriented Programming (객체 지향 프로그래밍)9. Et Cetera (기타 등등)

홈으로 돌아가기

검색 결과

"search" 검색 결과입니다.