command + shift + .(마침표) Finder 들어가서 커맨드 쉬프트 누르고 단축키 누르면 숨김폴더를 다 볼수있다. opt 폴더 안에 anaconda 폴더구성을 Finder로 보고싶을 때가 있는데 터미널로 들어가기 너무 귀찮을때 이렇게 하면 된다.

brew install ffmpeg –with-fdk-aac –with-ffplay –with-freetype –with-frei0r –with-libass –with-libvo-aacenc –with-libvorbis –with-libvpx –with-opencore-amr –with-openjpeg –with-opus –with-rtmpdump –with-schroedinger –with-speex –with-theora –with-tools 뒤에 -with 하고 달리는 거는 설치할 옵션입니다. 다운로드 받아서 설치하는게 어쩌면 제일 편한데 evermeet.cx/ffmpeg/ static FFmpeg binaries for macOS 64-bit Download static FFmpeg binarie..

맥북 프로나 리눅스에서 아나콘다 환경실행 방법 source activate 가상환경이름 윈도우와 리눅스의 명령어 차이 때문에 맨처음 conda 로 시작하는 것이 아니라 source로 시작하면 원활하게 된다. 윈도우랑 ios 둘 다 쓰다보니깐 모르거나 헷갈릴때가 종종 있다. 탭으로 환경이름을 바로 자동 타이핑 할 수 없기 떄문에 conda env list 를 쳐서 보면서 하자. + 참고로 만드는건 윈도우와 동일하다. conda create -n 가상환경이름 python=3.8 -y conda : 아나콘다 명령어 create : 가상환경을 만들겠다 -n : 이름은 ~ 가상환경이름은 영어로 대체해야 한다. python=3.8 : 파이썬 버전 3.8 -y :중간에 진행하는거 물어보는거 미리 대답

# run shell script - this will produce an error even though it succeeded above $ ./shell_script.sh CommandNotFoundError: Your shell has not been properly configured to use 'conda activate'. To initialize your shell, run $ conda init Currently supported shells are: - bash - fish - tcsh - xonsh - zsh - powershell See 'conda init --help' for more information and options. IMPORTANT: You may need to ..

NLP 캐글 경진대회 분석 언어모델 Transformer (딥러닝에서 다양한 곳에 쓰이고 있다.) 핵심은 1,2 어트랙션 인풋을 어떻게 구성할 것인가 어떻게 텍스트에 맞출 것인가 단순하게 보면 인코더 디코더 구조 (기계번역 시퀀스 투 시퀀스 ) (6개의 블럭으로 구성) 캐글에서는 생성모델 성능 검증 문제 때문에 잘 안나옴 — GAN scaled dot - product attention (물어보는 단어인 '쿼리' 어떤 단어 '키' 그 가중치 '벨류 ') 수학적으로 내적 , softmax 쓰기 때문에 편중될 위험때문에 규제화를 필요 self attention 1.셀프 닷 프로덕트 어텐션 학습 - 어떻게 임베딩 될것 인가 Q k v — output 2.멀티 (헤더)..

토큰화 문장 토큰화와 단어토큰화 단어 토큰화에서 한글을 반드시 품사를 고려한 토큰화가 이루어져야한다 특수문자.. 무조건 지우는건 아니다. 데이터를 보고 결정하는것 띄어쓰기는 연어의 문제. 품사 부착 한국은행에서는 5개의 품사만 부착하고 나머지는 안썼음 개체 유형 (자료형) - 텍스트 안에서 타입이라고 생각하면 된다. 개체명 인식 원형 복원 매우 중요 각 특징에 대한 이해도 필요 각토큰 원형 복원해서 토큰을 표준화, 연산을 줄인다. 1.(스테밍)어간 추출 - '품사를 무시하고' 규칙에 기반해서 어간 추출 가독성 딸림 2.(레마타이제이션) 표제어 추출 -품사정보를 유지하여 표제어 추출 (사전에 기반) 사전에 없으면 할수 없음. 품질은 좋지만 사전에 없으면 할수없어서 ... 어간추출과 상호보완 불용어 불필요한..

빅데이터에서 모델링을 공부하면 논문을 많이 접하게 되는데 paperswithcode 도 좋지만 한국어로 된 논문은 riss에서 검색하는 것이 더 좋을 수도 있다.