CLARIN and free open source finite-state tools

Kimmo Koskenniemi; Anssi Mikael Yli-Jyrä

CLARIN and free open source finite-state tools

Kimmo Koskenniemi, Anssi Mikael Yli-Jyrä

Forskningsoutput: Kapitel i bok/rapport/konferenshandling › Kapitel › Vetenskaplig › Peer review

Sammanfattning

A new emerging European research infrastructure called CLARIN and a related project called HFST are briefly described. HFST has built a programming interface on top of some existing open source finite-state packages such as SFST and OpenFST. In order to verify its utility, HFST has built open source tools on top of this HFST interface. These tools create lexical transducers, compile morphophonological two-level rules and combine them into a transducer lexicon. The tools have been tested against independently created full-scale lexicons and rules for Northern Sámi and Lule Sámi languages which have more complicated lexical and morphophonological structure than most other European languages.

Originalspråk	finska
Titel på värdpublikation	Finite-State Methods and Natural Language Processing : Post-proceedings of the 7th International Workshop FSMNLP 2008
Redaktörer	Jakub Piskorski, Bruce Watson, Anssi Yli-Jyrä
Antal sidor	11
Förlag	IOS PRESS
Utgivningsdatum	2009
Sidor	3-13
ISBN (tryckt)	978-1-58603-975-2
Status	Publicerad - 2009
MoE-publikationstyp	A3 Del av bok eller annan forskningsbok

Publikationsserier

Namn	Frontiers in Artificial Intelligence and Applications
Förlag	IOS Press
Volym	191
ISSN (tryckt)	0922-6389

Vetenskapsgrenar

612 Språk och litteratur
113 Data- och informationsvetenskap

Åtkomst av dokument

1 Aktiv
2 Slutfört

HFST - Helsinki Finite-State Technology
Linden, K. (Principal Investigator), Koskenniemi, K. (Deltagare), Yli-Jyrä, A. (Deltagare), Hulden, M. (Deltagare), Silfverberg, M. (Deltagare), Pirinen, T. (Deltagare), Axelson, E. (Deltagare), Hardwick, S. (Deltagare), Niemi, J. (Annan) & Hurskainen, A. (Deltagare)
01/01/2005 → …
Projekt: Forskningsprojekt
MORFCOMPILERS: Avoimet ja kieliriippumattomat automaattimenetelmät yhteisen kielentutkimusinfrastruktuurin resurssien tuottamiseksi
Yli-Jyrä, A. (Projektledare)
Unknown funder
01/01/2009 → 31/12/2011
Projekt: Forskningsprojekt
Common Language Resources and Technology Infrastructure (CLARIN)
Koskenniemi, K. (Principal Investigator), Linden, K. (Annan), Oksanen, V. (Deltagare) & Yangarber, R. (Deltagare)
01/01/2008 → 30/06/2011
Projekt: Forskningsprojekt

Citera det här

Koskenniemi, K., & Yli-Jyrä, A. M. (2009). CLARIN and free open source finite-state tools. I J. Piskorski, B. Watson, & A. Yli-Jyrä (Red.), Finite-State Methods and Natural Language Processing: Post-proceedings of the 7th International Workshop FSMNLP 2008 (s. 3-13). (Frontiers in Artificial Intelligence and Applications; Vol. 191). IOS PRESS. http://www.informatik.uni-trier.de/~ley/db/conf/fsmnlp/fsmnlp2008.html

@inbook{e03ede4243e041feb1911c002df5f22a,

title = "CLARIN and free open source finite-state tools",

abstract = "Artikkelissa kuvaillaan uusi syntym{\"a}ss{\"a} oleva Eurooppalainen tutkimusinfrastruktuuri nimelt{\"a}{\"a}n CLARIN ja siihen liittyv{\"a} projekti nimelt{\"a}{\"a}n HFST. HFST on rakentanut joidenkin olemassa olevien l{\"a}hdekoodiltaan avoimien {\"a}{\"a}rellistilaisten pakettien p{\"a}{\"a}lle, SFST ja OpenFST, ohjelmointirajapinnan. Rajapinnan k{\"a}ytett{\"a}vyyden varmistamiseksi sen p{\"a}{\"a}lle on rakennettu edelleen l{\"a}hdekoodiltaa avoimia ty{\"o}kaluja. N{\"a}m{\"a} ty{\"o}kalut muodostavat leksikaalisia transduktoreita, k{\"a}{\"a}nt{\"a}v{\"a}t morphophonologisia kaksitasos{\"a}{\"a}nt{\"o}j{\"a} ja yhdist{\"a}v{\"a}t ne transduktorileksikoksi. Ty{\"o}kaluja on kokeiltu riippumattomasti luotujen pohjoissaamen ja Luulajan saamen t{\"a}ysimittaisten leksikoiden ja s{\"a}{\"a}nt{\"o}jen avulla. N{\"a}iden kielten leksikaalinen ja morfofonologinen rakenne on monimutkaisempi kuin useimpien muiden eurooppalaisten kielten rakenne.",

keywords = "612 Kielitieteet, kirjallisuus, tutkimusinfrastruktuurit, morphologinen analyysi, {\"a}{\"a}rellistilaiset menetelm{\"a}t, research infrastructures, morphological analysis, finite-state methods, 113 Tietojenk{\"a}sittely- ja informaatiotieteet, {\"a}{\"a}rellistilaiset transduktorit, ohjelmistotekniikka, finite-state transducers, software architecture",

author = "Kimmo Koskenniemi and Yli-Jyr{\"a}, {Anssi Mikael}",

year = "2009",

language = "suomi",

isbn = "978-1-58603-975-2",

series = "Frontiers in Artificial Intelligence and Applications",

publisher = "IOS PRESS",

pages = "3--13",

editor = "Jakub Piskorski and Bruce Watson and Anssi Yli-Jyr{\"a}",

booktitle = "Finite-State Methods and Natural Language Processing",

address = "Alankomaat",

}

Koskenniemi, K & Yli-Jyrä, AM 2009, CLARIN and free open source finite-state tools. i J Piskorski, B Watson & A Yli-Jyrä (red), Finite-State Methods and Natural Language Processing: Post-proceedings of the 7th International Workshop FSMNLP 2008. Frontiers in Artificial Intelligence and Applications, vol. 191, IOS PRESS, s. 3-13. <http://www.informatik.uni-trier.de/~ley/db/conf/fsmnlp/fsmnlp2008.html>

CLARIN and free open source finite-state tools. / Koskenniemi, Kimmo ; Yli-Jyrä, Anssi Mikael.
Finite-State Methods and Natural Language Processing: Post-proceedings of the 7th International Workshop FSMNLP 2008. red. / Jakub Piskorski; Bruce Watson; Anssi Yli-Jyrä. IOS PRESS, 2009. s. 3-13 (Frontiers in Artificial Intelligence and Applications; Vol. 191).

Forskningsoutput: Kapitel i bok/rapport/konferenshandling › Kapitel › Vetenskaplig › Peer review

TY - CHAP

T1 - CLARIN and free open source finite-state tools

AU - Koskenniemi, Kimmo

AU - Yli-Jyrä, Anssi Mikael

PY - 2009

Y1 - 2009

N2 - Artikkelissa kuvaillaan uusi syntymässä oleva Eurooppalainen tutkimusinfrastruktuuri nimeltään CLARIN ja siihen liittyvä projekti nimeltään HFST. HFST on rakentanut joidenkin olemassa olevien lähdekoodiltaan avoimien äärellistilaisten pakettien päälle, SFST ja OpenFST, ohjelmointirajapinnan. Rajapinnan käytettävyyden varmistamiseksi sen päälle on rakennettu edelleen lähdekoodiltaa avoimia työkaluja. Nämä työkalut muodostavat leksikaalisia transduktoreita, kääntävät morphophonologisia kaksitasosääntöjä ja yhdistävät ne transduktorileksikoksi. Työkaluja on kokeiltu riippumattomasti luotujen pohjoissaamen ja Luulajan saamen täysimittaisten leksikoiden ja sääntöjen avulla. Näiden kielten leksikaalinen ja morfofonologinen rakenne on monimutkaisempi kuin useimpien muiden eurooppalaisten kielten rakenne.

AB - Artikkelissa kuvaillaan uusi syntymässä oleva Eurooppalainen tutkimusinfrastruktuuri nimeltään CLARIN ja siihen liittyvä projekti nimeltään HFST. HFST on rakentanut joidenkin olemassa olevien lähdekoodiltaan avoimien äärellistilaisten pakettien päälle, SFST ja OpenFST, ohjelmointirajapinnan. Rajapinnan käytettävyyden varmistamiseksi sen päälle on rakennettu edelleen lähdekoodiltaa avoimia työkaluja. Nämä työkalut muodostavat leksikaalisia transduktoreita, kääntävät morphophonologisia kaksitasosääntöjä ja yhdistävät ne transduktorileksikoksi. Työkaluja on kokeiltu riippumattomasti luotujen pohjoissaamen ja Luulajan saamen täysimittaisten leksikoiden ja sääntöjen avulla. Näiden kielten leksikaalinen ja morfofonologinen rakenne on monimutkaisempi kuin useimpien muiden eurooppalaisten kielten rakenne.

KW - 612 Kielitieteet, kirjallisuus

KW - tutkimusinfrastruktuurit

KW - morphologinen analyysi

KW - äärellistilaiset menetelmät

KW - research infrastructures

KW - morphological analysis

KW - finite-state methods

KW - 113 Tietojenkäsittely- ja informaatiotieteet

KW - äärellistilaiset transduktorit

KW - ohjelmistotekniikka

KW - finite-state transducers

KW - software architecture

M3 - Kirjan luku tai artikkeli

SN - 978-1-58603-975-2

T3 - Frontiers in Artificial Intelligence and Applications

SP - 3

EP - 13

BT - Finite-State Methods and Natural Language Processing

A2 - Piskorski, Jakub

A2 - Watson, Bruce

A2 - Yli-Jyrä, Anssi

PB - IOS PRESS

ER -

CLARIN and free open source finite-state tools

Sammanfattning

Publikationsserier

Vetenskapsgrenar

Åtkomst av dokument

Projekt

HFST - Helsinki Finite-State Technology

MORFCOMPILERS: Avoimet ja kieliriippumattomat automaattimenetelmät yhteisen kielentutkimusinfrastruktuurin resurssien tuottamiseksi

Common Language Resources and Technology Infrastructure (CLARIN)

Citera det här