Myriad Blog 1.3.0 Monday, Jan 26th, 2015 at 11:37am 

Dev News Thursday, Feb 25th, 2010 at 05:11pm
Kooplet tape 22

 
La recherche de texte est maintenant compltement oprationnelle. Comme prvu, des mots spciaux, termins par un deux-points ( : ) permettent de la configurer de manire fine:
 
partout: ou anywhere:  
Recherche les mots suivants n'importe o dans le fichier. C'est le mode opratoire par dfaut.
 
paroles: ou lyrics:
Recherche les mots suivants dans les paroles des chansons
 
autre: ou other:
Recherche les mots suivants n'importe o, sauf dans les paroles des chansons
 
site:
Restreint la recherche la liste de sites qui suit. (ex. myriad-users.com cpdl.org)
 
type:
Restreint la recherche la liste des types de fichiers qui suit. (ex. pdf myr )
 
Les mots rechercher sont spars par des espaces si on veut qu'ils soient recherchs dans n'importe quel ordre et qu'ils peuvent tre spars par d'autre mots, ou entre guillemets si on dsire les chercher dans l'ordre, et conscutifs.
 
Nous en avons galement profit pour retraiter les 1600 fichiers PDF dj dans la base, afin de prendre en compte plus de textes extraits par PDFtoMusic. Cela a permis d'amliorer les rsultats de recherche textuelle sur ce type de fichiers.
 
Je rappelle le lien provisoire:
http://www.kooplet.com/main.html
by Olivier Guillion
 8 comments.

Dev News Monday, Feb 22nd, 2010 at 04:48pm
Kooplet tape 21

 
Alors que la base de donnes de Kooplet est proche d'atteindre la barre des 50000 fichiers, nous avons travaill sur la recherche de texte, qui devrait tre mise en place trs prochainement.
 
On pourra effectuer soit des recherches simples, comme par exemple:
 
fugue Bach
 
pour trouver tous les morceaux qui contiennent, n'importe o dans leur texte, les deux mots "fugue" et "Bach", soit des recherches complexes, comme celle-ci:

paroles: Domine "in excelsis" autre: bach partout: orgue type: pdf site: superpartitions.net

 
Cette recherche listera les fichiers satisfaisant tous ces critres :
- Contient le mot "Domine" et le couple de mots "in excelsis" dans ses paroles
- Contient le mot "Bach" dans ses textes autres que des paroles (titre, compositeur, remarques, noms de portes...)
- Contient le mot "orgue" n'importe o dans ses textes (paroles ou non)
- Le type du fichier est PDF
- Le site sur lequel est le fichier est "superpartitions.net"
- et, bien entendu, si une squence musicale a t entre dans le plug-in, le fichier doit galement la contenir.
 
De telles recherches, mme complexes, s'avrent relativement rapides, donc cela ne devrait pas ncessiter des prouesses de programmation pour mettre en place ce nouveau module.
by Olivier Guillion

Dev News Thursday, Feb 18th, 2010 at 05:39pm
Kooplet tape 19

 
On s'approche peu peu du but.  
Les programmes de construction et maintenance de la base de donnes ainsi que ceux qui permettent la recherche par l'utilisateur taient jusqu'ici tests en local, sur les ordinateurs de chez nous.
 
Ils ont maintenant t transfrs sur le serveur distant (www.kooplet.com) mais sont encore sur une page cache, inaccessible au public.
 
Nous avons effac les 30000 morceaux de la base de donnes et avons recommenc une collecte depuis le dpart.  
En effet, nos divers tests avaient maill les donnes d'enregistrements incomplets ou abms, nous prfrons donc repartir sur des bases saines.
 
Nous allons faire tourner le "crawler" cette nuit, afin de constituer une collection suffiamment importante pour permettre aux utilisateurs de tester tout cela, une fois que la dernire version du plug-in aura t diffuse en beta (ce qui ne saurait tarder).
by Olivier Guillion

Dev News Monday, Feb 15th, 2010 at 05:01pm
Kooplet tape 17

 
La recherche fonctionne maintenant correctement. La recherche de textes (nom de l'oeuvre ou du compositeur, mots dans les paroles, etc) n'est pas encore crite, mais ce ne devrait pas tre le plus difficile.
 
Aprs avoir "sch" un petit moment sur un bug dans notre version du Perl sur PC, pourtant absent de la mme version de Perl sur Linux, nous avons crit les oprations de maintenance en tche de fond de la base de donnes.
 
En effet, il ne suffit pas de parcourir le web pour collecter des informations sur les musiques trouves, encore faut-il faire le "mnage", en vrifiant que ces musiques sont toujours prsentes en ligne, et en compactant la base de donnes de temps en temps, lorsqu'un nombre suffisant de liens briss a ainsi t dcouvert et limin.
 
Mme si tout n'est pas encore finalis, nous avons bon espoir de proposer trs bientt une prversion du plug-in incluant le module de recherche, ainsi qu'une premire version de la page d'accueil de Kooplet.
by Olivier Guillion

Dev News Thursday, Feb 11th, 2010 at 05:15pm
Kooplet (Recherche de squence mlodique) tape 16

 
Nous avons pass la journe optimiser et acclrer les recherches mlodiques dans la base de donnes.
 
Cela a port sur trois points principaux:
 
- L'utilisation, dans le langage que nous utilisons (Perl), de fonctions rapides. Pour le mme travail, la vitesse peut tre multiplie par 10 selon la manire dont on s'y prend.
 
- La cration de tables d'index, permettant des accs rapides notre base
 
- La cration de "hash-tables", qui permettent, lorsqu'une recherche de mlodie est demande, d'liminer trs rapidement une trs grosse proportion des musiques dans lesquelles on n'a aucune chance de retrouver la mlodie en question.
 
Nous avons ainsi pu diminuer les temps de recherche de 80%.
 
Nous nous sommes ensuite attaqus la rduction de la taille de la base de donnes, qui prenait trop rapidement des dimensions considrables (plusieurs centaines de mga-octets).
Un simple petit compactage "maison" des enregistrements a dj permis de la rduire de 75%. Si ce n'est pas suffisant, il faudra alors voir si on peut rduire la quantit de donnes dont nous avons besoin pour chaque morceau.
by Olivier Guillion

Dev News Tuesday, Feb 9th, 2010 at 05:39pm
Recherche de squence mlodique, tape 15

 
Les problmes de l'tape 14 ont t rsolus, et nous disposons donc maintenant d'une version du plug-in interrogeable en Javascript, sur tous les navigateurs que nous ayons pu tester. Nous pouvons permettre ainsi la page Web d'interroger le plug-in pour connaitre son tat actuel, la squence rentre, les options coches, etc.
 
Pour la petite histoire, le problme avec IE a t rsolu aprs quelques heures patauger par un simple redmarrage de la machine. Apparemment, Windows avait on ne sait comment conserv l'ancienne version du programme et s'obstinait l'utiliser la place de notre nouvelle mouture.
 
Donc nous avons mis en place une version plus complte de la page de recherche et avons commenc les tests et optimisations. L'utilisation d'encodage simplifi des mlodies, comme le "Parsons", semble de moins en moins judicieux au fur et mesure que la taille de la base de donnes des musiques augmente. Avec une recherche sur 230000 portes, la recherche exacte donne presque toujours des rsultats, et y ajouter quelques dizaines de milliers de rsultats approximatifs ne nous semble pas vraiment utile.
by Olivier Guillion
 1 comment.

Dev News Friday, Feb 5th, 2010 at 04:40pm
Recherche de squence mlodique, tape 14

 
Nous avons russi mettre en place la communication entre le plug-in et la page Web qui l'accueille.  
Ceci permet de rcuprer, la squence rechercher lorsque l'utilisateur clique le bouton "Rechercher" de la page.  Ce n'est donc plus le plug-in qui demande la recherche, nous autorisant une plus grande flexibilit et des mises jour faciles.
 
Malheureusement, si la mthode employe fonctionne sur tous les navigateurs Mac, et, sous Windows, sur Firefox, Opera, etc, elle ne fonctionne pas -qui l'et cru- sur Internet Explorer.
 
Sur Internet explorer en effet, les plug-ins sont des "objets ActiveX", technologie prive de chez Microsoft. Nous avions donc il y a quelque temps, cr un petit objet ActiveX servant de passerelle vers notre plug-in. Mais cet objet ne permet pas les fonctions avances de contrle du plug-in par la page Web. Nous essayons donc de mettre en place une communication entre l'objet ActiveX et la page Web, pour ensuite relayer ces communications vers le plug-in.
Et c'est vraiment "galre"...
by Olivier Guillion
 2 comments.

Dev News Tuesday, Feb 2nd, 2010 at 04:44pm
Recherche de squence mlodique, tape 11

 
Le robot a tourn pendant 24 heures, et a collect jusqu'ici environ 15000 fichiers musicaux, contenant 80000 portes.
 
La base de donne prend rapidement de l'ampleur (250 Mo), et il faudra que nous trouvions un moyen de la rduire sans pnaliser la rapidit de recherche.
Pour l'instant, les rsultats de recherche donnent ce type de renseignements (la prsentation n'est pas dfinitive):
 
 
On a donc, pour chaque fichier:
- La pertinence. Plus le nombre est lev, plus le rsultat trouv est conforme ce que l'on cherchait
- Le type de fichier et son nom ou titre
- Si disponible, le nom du compositeur  
- Si disponibles, les remarques
- Le numro et le nom de la porte dans laquelle la squence a t trouve, le numro de mesure, et un petit bouton pour jouer la squence trouve
- La page d'origine qui prsente le fichier
 
by Olivier Guillion


Full view
Reduced view
Most recent first
Oldest first
All
Didier Guillion
Olivier Guillion
Sylvie Ricard
All
Dev News
Technical
Mood
Memories
Myriad Life
To be seen
30 previous days
Apr 2006
May 2006
Jun 2006
Jul 2006
Aug 2006
Sep 2006
Oct 2006
Nov 2006
Dec 2006
Jan 2007
Feb 2007
Mar 2007
Apr 2007
May 2007
Jun 2007
Jul 2007
Aug 2007
Sep 2007
Oct 2007
Nov 2007
Dec 2007
Jan 2008
Feb 2008
Mar 2008
Apr 2008
May 2008
Jun 2008
Jul 2008
Aug 2008
Sep 2008
Oct 2008
Nov 2008
Dec 2008
Jan 2009
Feb 2009
Mar 2009
Apr 2009
May 2009
Jun 2009
Jul 2009
Aug 2009
Sep 2009
Oct 2009
Nov 2009
Dec 2009
Jan 2010
Feb 2010
Mar 2010
Apr 2010
May 2010
Jun 2010
Jul 2010
Aug 2010
Sep 2010
Oct 2010
Nov 2010
Dec 2010
Jan 2011
Feb 2011
Mar 2011
Apr 2011
May 2011
Jun 2011
Jul 2011
Aug 2011
Sep 2011
Oct 2011
Nov 2011
Dec 2011
Jan 2012
Feb 2012
Mar 2012
Apr 2012
May 2012
Jun 2012
Jul 2012
Aug 2012
Sep 2012
Oct 2012
Nov 2012
Dec 2012
Jan 2013
Feb 2013
Mar 2013
Apr 2013
May 2013
Jun 2013
Jul 2013
Aug 2013
Sep 2013
Oct 2013
Nov 2013
Dec 2013
Jan 2014
Feb 2014
Mar 2014
Apr 2014
May 2014
Jun 2014
Jul 2014
Aug 2014
Sep 2014
Oct 2014
Nov 2014
Dec 2014
Jan 2015
Jan 23rd, 2015 at 04:53pm 
Article from Didier Guillion
ACAM sur Mac tape 18
Jan 22nd, 2015 at 04:53pm 
Article from Olivier Guillion
Acam Winter tape 32
Jan 21st, 2015 at 04:54pm 
Article from Didier Guillion
ACAM sur Mac tape 17
Jan 20th, 2015 at 04:58pm 
Article from Olivier Guillion
Acam Winter tape 31
Jan 19th, 2015 at 04:55pm 
Article from Didier Guillion
ACAM sur Mac tape 16
Jan 16th, 2015 at 05:49pm 
Comment from dheo
Keyboard Input
Jan 16th, 2015 at 05:49pm 
Comment from dheo
Keyboard Input
Jan 16th, 2015 at 05:49pm 
Comment from dheo
Keyboard Input
Jan 16th, 2015 at 05:49pm 
Comment from dheo
Keyboard Input
Jan 16th, 2015 at 05:49pm 
Comment from dheo
Keyboard Input

Top of page
Last update:  (c) Myriad