Myriad Blog 1.3.0 Sunday, Jan 25th, 2015 at 05:18pm 

Dev News Monday, Mar 1st, 2010 at 04:46pm
Harmony 9.5 et autres, tape 38

 
Nous avons recherch les cause du mauvais fonctionnement du plug-in avec Internet Explorer sur Windows Vista/7.
Aprs avoir pateaug un temps dans la gestion des comptes administrateurs, droits d'accs et autres joyeusets incomprhensibles destins assurer la scurit de l'utilisateur en le forant cliquer "Autoriser" toutes les 30 secondes, nous pensions avoir russi tout remettre en ordre.
 
Mais voila-t-y-pas  qu'Internet Exporer refuse d'effectuer les recherches sur Kooplet, en expliquant qu'il avait volontairement bloqu l'appel notre contrle ActiveX pour "des raisons de scurit", et en ne permettant pas l'utilisateur de passer outre?
 
Seule solution: abaisser le niveau de scurit de tout IE, ce que nous pouvons difficilement suggrer aux visiteurs de kooplet. Apparemment, les nouvelles versions de Windows sont de plus en plus avides de signatures numriques, et refusent par dfaut de laisser faire ce qu'ils veulent aux contrle ActiveX non authentifis.
 
Nous en revenons donc au problme voqu en mai dernier dans ce billet: acqurir un certificat authenticode afin de pouvoir signer numriquement nos applications. Nous tudions cela, mais a n'a l'air ni simple ni bon march chez certains (apparemment les prix varient du simple au quintuple selon le fournisseur)...
by Olivier Guillion
 1 comment.

Dev News Thursday, Mar 4th, 2010 at 05:20pm
Kooplet tape 24

 
Nous avons fait les premiers essais de scellement de nos applications avec la signature numrique que nous avons reue.
Pour info, cette signature est valable 1 an (renouvelable), et le prix d'achat varie d'environ 100$ (mais on peut trouver moins cher, je crois) 499$ selon le vendeur.
Pour l'obtenir, il faut montrer patte blanche, et envoyer pas mal de documents officiels (extraits du registre de commerces, factures diverses) et rpondre un coup de fil des USA pour valider le numro de tlphone.
Mais cela a tout de mme t plus rapide que nous le craignions, et cela a l'air de fonctionner plutt bien et simplement jusqu'ici. Une version beta "signe" du plug-in devrait tre disponible au test trs prochainement.
 
Nous avons galement ressuscit une vielle machine, sur laquelle nous avons install Ubuntu. C'est la premire machine en Linux natif que nous avons ici. D'accord, nous l'utilisons en "bureau distance", donc elle n'a pas de souris, pas de clavier, et pas d'cran, mais c'est un dbut
Elle nous permet de faire tourner le "crawler" de Kooplet sur une machine ddie, ce qui a deux avantages:  
- le langage dans lequel il est crit (Perl) tant plus stable sur Linux, il vaut mieux le faire tourner sur ce systme.
- les calculs, vrifications, balayages de listes utilisant une puissance de calcul non ngligeable , une machine ddie nous permet de ne pas ralentir nos ordinateurs de dveloppement pour cette tche.
 
Le PC principal de dveloppement commence ressembler la salle de contrle de la NASA. Sur ses deux crans, outre ses propres fentres, la vue de la tte de pont rseau (mails, intranet, P2P...), celle du crawler sous Linux avec quatre agents tournant en parallle, et la fentre de console SSH de notre serveur Web distant qui hberge Kooplet. Il vaut mieux mettre des fonds d'cran diffrents pour ne pas s'y perdre
by Olivier Guillion
 1 comment.

Dev News Friday, Mar 5th, 2010 at 04:47pm
Kooplet tape 25

 
Une nouvelle version du plug-in ( 5.5 beta 8 ) vient d'tre mise disposition ici.
 
Elle contient une nouvelle version de l'objet ActiveX qui permet l'utilisation du plug-in sur Internet Explorer, et tous les modules, ainsi que l'installateur, sont maintenant signs avec notre signature numrique. A essayer, donc, sur un maximum possible de versions de Windows et d'IE.
 
De son ct, le "crawler" continue indexer les fichiers musicaux qu'il trouve sur Internet, et Kooplet a allgrement pass la barre des 80000 fichiers.
Ceci a eu pour consquence de mettre l'preuve les diverses fonction d'importation d'Harmony Assistant. Nous les avons amliores, et la prochaine version en bnficiera.
 
Bon week-end tous !
by Olivier Guillion
 3 comments.

Dev News Monday, Mar 8th, 2010 at 05:04pm
Kooplet tape 26

 
Nous avons pu laisser tourner le programme d'indexation ce week-end sur la machine Linux, afin de voir si on pourrait le laisser toffer la base tranquillement 24h/24.
 
Nouis avons donc mis en place la connexion distance afin de pouvoir le surveiller, avons scuris tout a avec des mots de passe et un filtrage, et l'avons laiss tourner.
 
Hlas, pas de chance, samedi aprs-midi tout s'est arrt net. De retour sur place lundi matin, npus avons pu constater que l'ordinateur tait fig sur un cran bariol. Au redmarrage, la moiti de la mmoire avait disparu !
 
Cet ordinateur est rest dans un placard trop longtemps, et une barrette mmoire ne faisait plus bien contact. Aprs un peu de chauffe, elle s'est dconnecte en pleine opration.
 
Donc a priori ni Ubuntu ni nos programmes n'taient en cause ce coup-ci. Aprs dmontage et remontage de la machine, nous avons tout relanc.
by Olivier Guillion

Dev News Wednesday, Mar 10th, 2010 at 05:47pm
Kooplet tape 27

 
Un problme de consommation de mmoire nous empchait de faire tourner le crawler trop longtemps sur notre machine Linux. Au bout d'un moment, le programme utilisait plusieurs centaines de Mga-octets, et avec 4 instances simultanes, cela faisait effondrer les performance du petit ordinateur qui le fait tourner.
 
Nous avons rsolu le problme, qui n'tait apparemment pas de notre cot, mais plus gnral certains types de traitement dans le langage Perl. Nous avons galement fix une limite la taille des fichiers analyss, considrant que des PDF de 50 Mo (si, si, on en a trouv) contenaient probablement des scans de partitions papier et ne seraient donc de toute faon pas indexables.
 
Depuis, l'utilisation mmoire a t rduite 3 ou 4 Mo par instance, ce qui nous permet de le faire tourner en permanence.  
 
On approche donc de la barre des 100 000 fichiers, trouvs sur une quarantaine de sites. Comme il nous l'a t demand, nous allons prvoir une option (cache ou pas) qui permette l'utilisateur de connatre la liste des sites indexs, et ventuellement de nous en proposer d'autres.
by Olivier Guillion

Dev News Tuesday, Mar 16th, 2010 at 05:13pm
Harmony 9.5 et autre tape 44

 
Les appoggiatures n'taient plus prises en compte par Virtual Singer. Cela a t corrig.
Par la mme occasion, nous avons essay de mieux grer des cas limites dans Virtual Singer, par exemple lorsque la partition prsente un mlisme avec des notes staccato.
 
Virtual Singer ignorera les dures d'appui des notes en mlisme (une mme syllabe chante sur plusieurs notes) ou les silences entre ces notes. En effet, mlismes (note continue) et staccato (notes bien spares) sont contradictoires, et il faut bien faire quelque chose. Si les notes ont t crites, on suppose qu'elles doivent tre entendues.
Cela pourra donc changer la manire dont Virtual Singer chante les partitions qui prsentent une telle anomalie.
by Olivier Guillion
 2 comments.

Dev News Wednesday, Mar 17th, 2010 at 05:12pm
Harmony 9.5 et autre tape 45

 
Nous avons encore travaill sur Virtual Singer, pour grer les cas limites.
Par exemple, si, dans la dernire syllabe d'une mesure, on tape un espace ou un tiret, le curseur passe la mesure suivante.
Mais si on fait la mme chose en mode d'dition complte des paroles (menu "Portes") on peut taper plusieurs tirets en trop dans la dernire syllabe avant le "slash" (/) marquant la fin de la mesure.
Cela troublait Virtual Singer, qui prolongeait la dernire syllabe et dcalait le chant jusqu' la fin du morceau.
Le cas se produisait notamment lors du copier/coller d'un texte de paroles sur une autre porte, ne contenant pas le mme nombre de notes dans ses mesures.
 
Un problme a t corrig dans les oprations sur les chanes de caractres utilises notamment par MyrScript. Cela pouvait produire des crashs dans certains cas, sur tous les scripts manipulant des textes.
 
Des corrections ont t appliques au module d'importation Finale. Le script pouvait, dans certain cas, produire des notes dcales d'une ligne par rapport la position voulue.
by Olivier Guillion

Dev News Thursday, Mar 18th, 2010 at 05:26pm
Kooplet tape 29

 
Le robot d'indexation fonctionne bien, presque trop bien, mme.  
Avec 4 instances en parallle tournant sur la machine Linux ddie, il parcourt les sites assez vite, et trouve un grand nombre de fichiers musicaux. Ces fichiers de format divers, il faut les traiter, c'est--dire, quel que soit leur format d'origine, en extraire les informations utilisables par Kooplet (notes, textes, paroles...) afin de complter la base.
 
Cette tche est ralise sur nos postes de travail par une fonction spciale d'Harmony Assistant et de PDFtoMusic. Mais voila, nous travaillons toute la journe sur ces machines, et nous ne pouvons pas nous permettre de laisser tourner en permanence Harmony et PDFtoMusic en tche de fond pour traiter les donnes de Kooplet.
 
Alors, nous sommes en train de rflchir nouveau une solution qui permettrait de distribuer la charge de travail. Si 25 personnes pouvaient laisser leur Harmony Assistant ou PDFtoMusic travailler tout seul en moyenne 1h par jour, cela doublerait la puissance de calcul alloue la construction de la base.
 
Pratiquement, cela pourrait se passer comme cela:
- Une personnes dsireuse de nous aider nous contacte par e-mail
- En retour, nous lui expliquons comment basculer le programme en mode "traitement des donnes de Kooplet"
- Lorsqu'il le peut, il enclenche ce mode pendant quelques minutes ou quelques heures, et le dconnecte ds qu'il veut nouveau utiliser le programme
 
Et voila. Son ordinateur accdera exclusivement notre propre site (aucune connexion un autre serveur) et aucun fichier musical ne sera stock sur sa machine. Tout est donc parfaitement transparent. Un peu de puissance de calcul de son ordinateur est utilise durant le laps de temps, c'est tout.
 
Nous n'avons pas, pour ce genre de projet dont le but n'est pas d'tre rentable, les moyens d'investir dans une infrastructure technique importante. Il faudra donc que nous nous orientions vers des solutions alternatives, et le systme collaboratif en fait partie.
by Olivier Guillion
 4 comments.

Dev News Tuesday, Mar 23rd, 2010 at 05:02pm
Kooplet tape 32

Un peu de technique aujourd'hui.
 
Le problme de corruption de la base de donnes a t localis. Il s'agissait d'une erreur bte dans l'utilisation d'une "regular expression" (regexp) dans un des scripts.
Pour les "techies", nous avions simplement oubli que le caractre "." ne voulait pas dire "n'importe quel caractre" mais "n'importe quel caractre sauf le retour chariot".
 
Cela tronquait les phrases musicales sur environ 2% des fichiers de la base. Nous l'avons corrig.
 
Ensuite, nous avons travaill sur l'acclration des recherches. Afin d'acclerer les comparaisons de squences entre ce que cherche l'utilisateur et ce que contient un fichier, nous avons cr, pour chaque porte, une signature de 256 bits qui permet d'liminer rapidement les portes dans lesquelles il n'y a aucune chance de trouver la squence demande.
Cette signature avait t cre de manire empirique, mais maintenant que la base est plus complte, nous avons pu tablir des statistiques dtailles sur 580000 portes (140 millions de notes). Un arbre binaire partiel sur les probabilits de prsence de chaque note nous permet ainsi d'optimiser l'efficacit de cette signature.
 
Il va cependant nous falloir recrer les signatures de toute la base de donnes, ce qui prend plusieurs heures, avant de valider le nouvel algorithme.
 
Voila pour aujourd'hui. Les allergiques la technique peuvent maintenant cesser d'ternuer et ranger leur mouchoir
by Olivier Guillion
 1 comment.

Dev News Thursday, Mar 25th, 2010 at 05:26pm
Kooplet tape 34

Aujourd'hui, refonte de la recherche de Kooplet. Les nouveaux algorithmes, qui ne fonctionnent pas encore, n'ont donc pas t mis en ligne (on vous prviendra).
Tout a cause de Jean-Armand , qui par son message dans les commentaires du billet de mardi, nous a pouss nous lancer dans une indexation plus pousse de la base des notes.
 
Nous avions -momentanment- cart cette solution parce que tous les serveurs sur lesquels la recherche Kooplet pourrait ventuellement tre installe ne possdent pas de gestionnaire de base de donnes. Il faut donc crire le systme d'indexation en utilisant une simple gestion de fichiers.  
Pour parvenir au premier test d'efficacit, la somme de travail est donc assez importante, et c'est fastidieux (recalculer l'index pour les 160000 fichiers de notre base de test prenait, avant optimisation, prs de 24 h).
Le premier test de recherche nous dira si le jeu en vaut la chandelle. Si ce nouveau systme s'avre trop peu performant, tout ce travail aura t inutile.
 
C'est pourquoi nous avions recul jusqu'ici. On s'y est mis, et ds que cela fonctionnera, on vous tiendra au courant des performances de la recherche.
by Olivier Guillion

Dev News Monday, Mar 29th, 2010 at 05:00pm
Harmony 9.5, Melody 7.5 tape 47

 
On ne touche plus trop aux fonctionnalits du logiciel, mais on corrige ce qui pourrait vraiment poser problme lorsque cela se prsente.  
 
Nous avons pu localiser un problme lors de la duplication de portes depuis un script, et l'avons corrig.  
 
Nous "durcissons" galement les imports de fichiers en format non natif, et avons traduit en anglais les nouvelles pages de la documentation anglaise. Il est trop tard pour lancer les traductions de ces pages dans les autres langues, cela attendra la prochaine sous-version.
 
A ce sujet, nous n'excluons pas l'avenir, lorsque les choses seront plus calmes, de proposer un espace collaboratif de traduction des documentations et de l'interface du logiciel, dans l'esprit "Wiki". Cela permettrait aux natifs des diffrentes langues de contribuer dans la mesure de leurs possibilits, en traduisant quelques mots ou phrases, ou en corrigeant ou confirmant la traduction des autres.
by Olivier Guillion


Full view
Reduced view
Most recent first
Oldest first
All
Didier Guillion
Olivier Guillion
Sylvie Ricard
All
Dev News
Technical
Mood
Memories
Myriad Life
To be seen
30 previous days
Apr 2006
May 2006
Jun 2006
Jul 2006
Aug 2006
Sep 2006
Oct 2006
Nov 2006
Dec 2006
Jan 2007
Feb 2007
Mar 2007
Apr 2007
May 2007
Jun 2007
Jul 2007
Aug 2007
Sep 2007
Oct 2007
Nov 2007
Dec 2007
Jan 2008
Feb 2008
Mar 2008
Apr 2008
May 2008
Jun 2008
Jul 2008
Aug 2008
Sep 2008
Oct 2008
Nov 2008
Dec 2008
Jan 2009
Feb 2009
Mar 2009
Apr 2009
May 2009
Jun 2009
Jul 2009
Aug 2009
Sep 2009
Oct 2009
Nov 2009
Dec 2009
Jan 2010
Feb 2010
Mar 2010
Apr 2010
May 2010
Jun 2010
Jul 2010
Aug 2010
Sep 2010
Oct 2010
Nov 2010
Dec 2010
Jan 2011
Feb 2011
Mar 2011
Apr 2011
May 2011
Jun 2011
Jul 2011
Aug 2011
Sep 2011
Oct 2011
Nov 2011
Dec 2011
Jan 2012
Feb 2012
Mar 2012
Apr 2012
May 2012
Jun 2012
Jul 2012
Aug 2012
Sep 2012
Oct 2012
Nov 2012
Dec 2012
Jan 2013
Feb 2013
Mar 2013
Apr 2013
May 2013
Jun 2013
Jul 2013
Aug 2013
Sep 2013
Oct 2013
Nov 2013
Dec 2013
Jan 2014
Feb 2014
Mar 2014
Apr 2014
May 2014
Jun 2014
Jul 2014
Aug 2014
Sep 2014
Oct 2014
Nov 2014
Dec 2014
Jan 2015
Jan 23rd, 2015 at 04:53pm 
Article from Didier Guillion
ACAM sur Mac tape 18
Jan 22nd, 2015 at 04:53pm 
Article from Olivier Guillion
Acam Winter tape 32
Jan 21st, 2015 at 04:54pm 
Article from Didier Guillion
ACAM sur Mac tape 17
Jan 20th, 2015 at 04:58pm 
Article from Olivier Guillion
Acam Winter tape 31
Jan 19th, 2015 at 04:55pm 
Article from Didier Guillion
ACAM sur Mac tape 16
Jan 16th, 2015 at 05:49pm 
Comment from dheo
Keyboard Input
Jan 16th, 2015 at 05:49pm 
Comment from dheo
Keyboard Input
Jan 16th, 2015 at 05:49pm 
Comment from dheo
Keyboard Input
Jan 16th, 2015 at 05:49pm 
Comment from dheo
Keyboard Input
Jan 16th, 2015 at 05:49pm 
Comment from dheo
Keyboard Input

Top of page
Last update:  (c) Myriad