Пакет: ucto (0.30-3)

[ Источник: ucto  ]

Unicode Tokenizer

Ucto can tokenize UTF-8 encoded text files (i.e. separate words from punctuation, split sentences, generate n-grams), and offers several other basic preprocessing steps that make your text suited for further processing such as indexing, part-of-speech tagging, or machine translation.

This package provides the command-line tool itself.

Ucto was written by Maarten van Gompel and Ko van der Sloot. Work on Ucto was funded by NWO, the Netherlands Organisation for Scientific Research, under the Implicit Linguistics project, the CLARIN-NL program, and the CLARIAH project.

Ucto is a product of the Centre of Language and Speech Technology (Radboud University Nijmegen), and previously the ILK Research Group (Tilburg University, The Netherlands).

If you are interested in machine parsing of UTF-8 encoded text files, e.g. to do scientific research in natural language processing, ucto will likely be of use to you.

Теги: Реализовано на: C++, Роль: Программа

Другие пакеты, относящиеся к ucto

• dep: libc6 (>= 2.34)

  библиотека GNU C: динамически подключаемые библиотеки
  также виртуальный пакет, предоставляемый libc6-udeb

• dep: libfolia19 (>= 2.17)

  Implementation of the FoLiA document format

• dep: libgcc-s1 (>= 3.0) [не armel, armhf]

  вспомогательная библиотека GCC

  dep: libgcc-s1 (>= 3.5) [armel, armhf]

• dep: libicu72 (>= 72.1~rc-1~)

  компоненты интернационализации для Unicode

• dep: libstdc++6 (>= 13.1)

  стандартная библиотека GNU C++ версии 3

• dep: libticcutils9 (>= 0.34)

  utility functions used in the context of Natural Language Processing (library)

• dep: libucto6 (>= 0.30)

  Unicode Tokenizer - runtime

• dep: uctodata

  Data files for Ucto

Загрузка ucto

Загрузить для всех доступных архитектур

Архитектура	Размер пакета	В установленном виде	Файлы
amd64	24,9 Кб	90,0 Кб	[список файлов]
arm64	22,8 Кб	90,0 Кб	[список файлов]
armel	23,1 Кб	81,0 Кб	[список файлов]
armhf	23,2 Кб	69,0 Кб	[список файлов]
i386	25,6 Кб	85,0 Кб	[список файлов]
mips64el	22,9 Кб	92,0 Кб	[список файлов]
ppc64el	24,1 Кб	90,0 Кб	[список файлов]
riscv64	23,8 Кб	74,0 Кб	[список файлов]
s390x	24,5 Кб	82,0 Кб	[список файлов]