SpaCy

3. 주요 특징

• 비파괴적인 토큰화를 지원한다.
• 65개 이상의 언어(한국어 포함)에 대한 토큰화를 지원한다.^[12]
• 개체명 인식, 품사 태깅, 구문 분석, 텍스트 분류, 개체 연결 등 훈련 가능한 파이프라인 구성 요소를 내장하고 있다.
• 19개 언어에 대한 통계적 모델을 제공한다.^[13]
• BERT와 같은 사전 훈련된 변환기를 사용한 다중 작업 학습을 지원한다.
• PyTorch, TensorFlow 등 다양한 딥 러닝 프레임워크에서 사용자 정의 모델을 지원한다.
• 빠른 속도와 높은 정확도를 제공한다.^[14]
• 프로덕션 환경에 적합한 훈련 시스템을 제공한다.
• 구문 및 개체명을 위한 내장 시각화 도구를 제공한다.
• 쉬운 모델 패키징, 배포 및 워크플로우 관리를 지원한다.
• 비파괴적 어구 분석을 지원한다.
• 25개 이상의 언어에 대한 어구 분석을 지원한다.^[26]
• 8개 언어의 통계 모델을 제공한다.^[27]
• 사전 훈련된 단어 벡터를 제공한다.
• 품사 태깅을 지원한다.
• 레이블이 지정된 의존 문법 분석을 지원한다.
• 통사론 기반의 문장 분할을 지원한다.
• 문서 분류를 지원한다.
• 구문 트리 및 개체명을 위한 내장 시각화 도구를 제공한다.

4. 확장 기능 및 시각화 도구

spaCy는 여러 가지 확장 기능과 시각화 도구를 제공하며, 이는 무료 오픈 소스 라이브러리로 사용할 수 있다. 주요 확장 기능 및 시각화 도구는 다음과 같다.

• Thinc
• sense2vec
• displaCy
• displaCy^ENT

4. 1. Thinc

4. 2. sense2vec

4. 3. displaCy

4. 4. displaCy^ENT

참조

_[1] 웹사이트 Introducing spaCy https://explosion.ai[...] explosion.ai 2016-12-18
_[2] 논문 It Depends: Dependency Parser Comparison Using A Web-based Evaluation Tool https://aclweb.org/a[...]
_[3] 웹사이트 Google's new artificial intelligence can't understand these sentences. Can you? https://www.washingt[...] 2016-12-18
_[4] 웹사이트 Facts & Figures - spaCy 2020-04-04
_[5] 저널 Multidisciplinary instruction with the Natural Language Toolkit https://www.aclweb.o[...]
_[6] 웹사이트 PyTorch, TensorFlow & MXNet https://thinc.ai/doc[...] 2020-04-04
_[7] 웹사이트 explosion/thinc https://github.com/e[...] 2016-12-30
_[8] 웹사이트 Models & Languages {{!}} spaCy Usage Documentation https://spacy.io/usa[...] 2020-03-10
_[9] 웹사이트 explosion/spaCy https://github.com/e[...] 2021-02-08
_[10] 웹사이트 explosion/spaCy https://github.com/e[...] 2021-02-08
_[11] 웹사이트 explosion/spaCy https://github.com/e[...] 2021-02-08
_[12] 웹사이트 Models & Languages - spaCy https://spacy.io/usa[...] 2021-02-08
_[13] 웹사이트 Models & Languages {{!}} spaCy Usage Documentation https://spacy.io/usa[...] 2021-02-08
_[14] 웹사이트 Benchmarks {{!}} spaCy Usage Documentation https://spacy.io/usa[...] 2021-02-08
_[15] 논문 sense2vec - A Fast and Accurate Method for Word Sense Disambiguation In Neural Word Embeddings https://arxiv.org/ab[...]
_[16] 웹사이트 Introducing spaCy https://explosion.ai[...] explosion.ai 2016-12-18
_[17] 논문 It Depends: Dependency Parser Comparison Using A Web-based Evaluation Tool. https://aclweb.org/a[...]
_[18] 웹사이트 Google’s new artificial intelligence can’t understand these sentences. Can you? https://www.washingt[...] 2016-12-18
_[19] 웹사이트 Models & Languages {{!}} spaCy Usage Documentation https://spacy.io/usa[...] 2017-11-08
_[20] 웹사이트 Facts & Figures - spaCy https://spacy.io/usa[...] 2017-11-08
_[21] 저널 Multidisciplinary instruction with the Natural Language Toolkit https://www.aclweb.o[...]
_[22] 웹사이트 Facts & Figures {{!}} spaCy Usage Documentation https://spacy.io/usa[...] 2017-11-08
_[23] 웹사이트 explosion/spaCy https://github.com/e[...] 2016-12-18
_[24] 웹사이트 explosion/thinc https://github.com/e[...] 2016-12-30
_[25] 간행물 spaCy: 💫 Industrial-strength Natural Language Processing (NLP) with Python and Cython https://github.com/e[...] Explosion AI 2017-11-08
_[26] 웹사이트 Models & Languages - spaCy https://spacy.io/usa[...] 2017-11-08
_[27] 웹사이트 Models & Languages {{!}} spaCy Usage Documentation https://spacy.io/usa[...] 2017-11-08
_[28] 논문 sense2vec - A Fast and Accurate Method for Word Sense Disambiguation In Neural Word Embeddings https://arxiv.org/ab[...]
_[29] 논문 It Depends: Dependency Parser Comparison Using A Web-based Evaluation Tool https://aclweb.org/a[...]
_[30] 웹인용 Google's new artificial intelligence can't understand these sentences. Can you? https://www.washingt[...] 2016-12-18
_[31] 웹인용 Facts & Figures - spaCy https://spacy.io/usa[...] 2020-04-04
_[32] 저널 Multidisciplinary instruction with the Natural Language Toolkit https://www.aclweb.o[...]
_[33] 웹인용 PyTorch, TensorFlow & MXNet https://thinc.ai/doc[...] 2020-04-04
_[34] 웹인용 explosion/thinc https://github.com/e[...] 2016-12-30
_[35] 웹인용 Models & Languages {{!}} spaCy Usage Documentation https://spacy.io/usa[...] 2020-03-10