일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | ||||
4 | 5 | 6 | 7 | 8 | 9 | 10 |
11 | 12 | 13 | 14 | 15 | 16 | 17 |
18 | 19 | 20 | 21 | 22 | 23 | 24 |
25 | 26 | 27 | 28 | 29 | 30 | 31 |
- Linear Regression
- cost function
- 독서
- tensorflow
- Richard Socher
- 행복
- ai
- kbpf
- 리처드소처
- model free
- MB
- 강화학습
- 딥뉴럴넷
- Gradient descent
- 폴댄스
- 머신러닝
- 다이내믹 프로그래밍
- 페미니즘
- 자연어처리
- 인공지능
- 취미
- NLP
- MDP
- 딥러닝
- 파이썬
- 벨만 방정식
- 애쉬브라운
- 파이썬과 케라스로 배우는 강화학습
- CS224N
- 양성평등
- Today
- Total
Ordinary day
윈도우 서버 가상머신에서 셀레니움을 이용하여 크롤링 작업 진행 중, 이슈 상황 및 해결 방안을 기록해둠. GCP 서버 정보 머신 유형: n1-standard-2(vCPU 2개, 7.5GB 메모리) 이미지: Windows Server 2019 Datacenter 윈도우 정보: windows10, 64bit 개발환경 아나콘다로 환경 구축 - 파이썬 3.7, selenium, konlpy, scrapy 등 (콘다로 가상환경 세팅하여 사용함) 이슈 상황 KoNLPy 설치 문제 - 아나콘다 환경을 배포해서 사용하다가 konlpy는 jvm이 필요하고 그렇게 거슬러 올라가다가 새로 설치하게 되는데.... Installation - KoNLPy 0.5.2 documentation 주의) 위 링크 순서를 꼭 지켜야 함...
엘라스틱 서치에서 gcs 레포지토리를 등록하고 해당 레포지토리에 스냅샷을 생성, restore 하는 과정을 나타냄. 플러그인 설치와 키 등록은 엘라스틱 서치의 모든 노드에서 실행해주어야 함. 엘라스틱 서치에서 플러그인 설치 # repository-gcs 플러그인 설치 bin/elasticsearch-plugin install repository-gcs 버킷을 생성하고 key 파일 다운로드 해당 키 파일을 엘라스틱 서치 내의 폴더에 복사해두고 키 파일 등록 # keystore 사용하여 key file 등록 bin/elasticsearch-keystore add-file gcs.client.default.credentials_file 키파일경로 # 등록된 key 는 아래 명령어로 확인 가능 bin/elast..

논문 출처 https://arxiv.org/abs/1905.01969 Poly-encoders: Transformer Architectures and Pre-training Strategies for Fast and Accurate Multi-sentence Scoring The use of deep pre-trained bidirectional transformers has led to remarkable progress in a number of applications (Devlin et al., 2018). For tasks that make pairwise comparisons between sequences, matching a given input with a corresponding labe..