Sindup::Doc LibLang - Historique des versions

Vanina Lebouvier le 25 janvier 2012 à 15:06

2012-01-25T15:06:29Z

← Version précédente		Version du 25 janvier 2012 à 15:06
Ligne 52 :		Ligne 52 :
	*Appel d'une fonction qui traite la chaine, les données sont poussé dans la structur alloué		*Appel d'une fonction qui traite la chaine, les données sont poussé dans la structur alloué
	* la fonction d'entrée peut alors avori acces au résultats du traaitement et extraire les information sous le formt souahiter		* la fonction d'entrée peut alors avori acces au résultats du traaitement et extraire les information sous le formt souahiter
		+	*id de la langue sert d'index dans le tableau

	[[Sindup#Programmes_C]]		[[Sindup#Programmes_C]]

Vanina Lebouvier le 25 janvier 2012 à 14:42

2012-01-25T14:42:07Z

← Version précédente		Version du 25 janvier 2012 à 14:42
Ligne 9 :		Ligne 9 :
	lgDetect_init( "PATH/wordsList.txt", nbThread);		lgDetect_init( "PATH/wordsList.txt", nbThread);
	==== Process ====		==== Process ====
-	langue = lgDetect_process( indice, titre, description, source.language);	+	langue = '''lgDetect_process'''( indice, titre, description, source.language);
	* indice : est un chiffre entre 0 et nbThread et doit être unique. Il permet d'utiliser toujours le même objet pour un même thread		* indice : est un chiffre entre 0 et nbThread et doit être unique. Il permet d'utiliser toujours le même objet pour un même thread
-	* titre + description : ~~est~~ le texte ~~brut qui doit être analysé~~	+	* titre + description : le texte à analyser
	* source.language : est la langue de la source, elle influence la détection vers cette langue		* source.language : est la langue de la source, elle influence la détection vers cette langue
	* langue : est la langue détecté par le prg en fonction des 64 répertoriées		* langue : est la langue détecté par le prg en fonction des 64 répertoriées

		+	langue = '''lgDetect_processOption'''( indice, chaine, nb, tableau);
		+	* indice : est un chiffre entre 0 et nbThread et doit être unique. Il permet d'utiliser toujours le même objet pour un même thread
		+	* chaine : le texte brut à analyser
		+	* nb : nombre d'élément dans le tableau de résultats
		+	* tableau : liste des langues avec leur taux de correspondance au texte
	==== Reset ====		==== Reset ====
	lgDetect_close();		lgDetect_close();
-
-


Ligne 34 :		Ligne 37 :
	==== Reset ====		==== Reset ====
	lgStopWord_close();		lgStopWord_close();
		+
		+

	== Algorithme ==		== Algorithme ==

Vanina Lebouvier le 25 janvier 2012 à 14:31

2012-01-25T14:31:48Z

← Version précédente		Version du 25 janvier 2012 à 14:31
Ligne 17 :		Ligne 17 :
	==== Reset ====		==== Reset ====
	lgDetect_close();		lgDetect_close();
		+
		+
		+


Ligne 38 :		Ligne 41 :
	lgDetect_init( "PATH/wordsList.txt", nbThread)		lgDetect_init( "PATH/wordsList.txt", nbThread)

		+
		+	Alocation d'une zone mémoire "appartenant" a un thread grace à l'indice unique
		+
		+	*Appel de la fonction entrante
		+	*Appel d'une fonction qui traite la chaine, les données sont poussé dans la structur alloué
		+	* la fonction d'entrée peut alors avori acces au résultats du traaitement et extraire les information sous le formt souahiter

	[[Sindup#Programmes_C]]		[[Sindup#Programmes_C]]

Vanina Lebouvier le 17 janvier 2012 à 15:09

2012-01-17T15:09:34Z

← Version précédente		Version du 17 janvier 2012 à 15:09
Ligne 37 :		Ligne 37 :
	* Chargement des mots et de leur langue en mémoire		* Chargement des mots et de leur langue en mémoire
	lgDetect_init( "PATH/wordsList.txt", nbThread)		lgDetect_init( "PATH/wordsList.txt", nbThread)
		+
		+
		+	[[Sindup#Programmes_C]]

Vanina Lebouvier le 17 janvier 2012 à 13:41

2012-01-17T13:41:57Z

← Version précédente		Version du 17 janvier 2012 à 13:41
Ligne 1 :		Ligne 1 :
	== LibLang : Détection de langue ==		== LibLang : Détection de langue ==
-	~~=== Utilisation ===~~

-	Il faut avoir acces ~~à 2 fichiers~~ :	+	Il faut avoir acces au fichier : wordsList.txt. Il contient la liste des mots par langue.
-	* La liste des mots par langue	+
-	* La liste des stopword par langue	+	Acutellement sur sindup3 :
-	~~Ils sont actuellement~~ sur sindup3 :	+
	/var/projects/engine/data/v1/file/wordsList.txt		/var/projects/engine/data/v1/file/wordsList.txt
-	~~/var/projects/engine/data/v1/file/stopWordsList.txt~~

		+	==== Initialisation ====
		+	lgDetect_init( "PATH/wordsList.txt", nbThread);
		+	==== Process ====
		+	langue = lgDetect_process( indice, titre, description, source.language);
		+	* indice : est un chiffre entre 0 et nbThread et doit être unique. Il permet d'utiliser toujours le même objet pour un même thread
		+	* titre + description : est le texte brut qui doit être analysé
		+	* source.language : est la langue de la source, elle influence la détection vers cette langue
		+	* langue : est la langue détecté par le prg en fonction des 64 répertoriées

		+	==== Reset ====
		+	lgDetect_close();

-	~~=== Process ===~~

-	Initialisation	+	== LibLang : Suppression des stopWords ==
		+
		+	Il faut avoir acces au fichier : stopWordsList.txt. Il contient la liste des mots par langue.
		+
		+	Acutellement sur sindup3 :
		+	/var/projects/engine/data/v1/file/stopWordsList.txt
		+
		+	==== Initialisation ====
		+	lgStopWord_init( "PATH/stopWordsList.txt");
		+	==== Process ====
		+	==== Reset ====
		+	lgStopWord_close();
		+
		+	== Algorithme ==
		+	==== Initialisation ====
	* Création du tableau à 3 niveaux en fonction du nombre de thread : il contient les résultats		* Création du tableau à 3 niveaux en fonction du nombre de thread : il contient les résultats
	* Chargement des mots et de leur langue en mémoire		* Chargement des mots et de leur langue en mémoire
	lgDetect_init( "PATH/wordsList.txt", nbThread)		lgDetect_init( "PATH/wordsList.txt", nbThread)
-
-	~~Process~~

Vanina Lebouvier : Page créée avec « == LibLang : Détection de langue == === Utilisation === Il faut avoir acces à 2 fichiers : * La liste des mots par langue * La liste des stopword par langue Ils sont actue… »

2012-01-17T13:15:44Z

Page créée avec « == LibLang : Détection de langue == === Utilisation === Il faut avoir acces à 2 fichiers : * La liste des mots par langue * La liste des stopword par langue Ils sont actue… »

Nouvelle page

== LibLang : Détection de langue ==
=== Utilisation ===

Il faut avoir acces à 2 fichiers :
* La liste des mots par langue
* La liste des stopword par langue
Ils sont actuellement sur sindup3 :
/var/projects/engine/data/v1/file/wordsList.txt
/var/projects/engine/data/v1/file/stopWordsList.txt

=== Process ===

Initialisation
* Création du tableau à 3 niveaux en fonction du nombre de thread : il contient les résultats
* Chargement des mots et de leur langue en mémoire
lgDetect_init( "PATH/wordsList.txt", nbThread)

Process