mardi 19 juillet 2011

Vie privée & Anonymisation, 2ème.

Le procédé d'anonymisation automatisée est pleinement fonctionnel, et sera prochainement disponible.

Une fois mis en place, les documents actuellement indisponibles seront remis sur la plateforme, et son aire d'application sera également étendu progressivement à tout les textes pouvant contenir des données à caractère personnel.

En marge de ce procédé un formulaire de demande de retrait de données personnelles vient d'être ajouté (sous l'onglet "vie privée"), pour les cas ou un document n'aurait pas encore été répertorié comme contenant des données à caractère personnel.

Les autres développements sont évidemment ralentis par cette évolution du site, bien qu'extrêmement intéressante et avant tout importante, car du succès de cette étape dépend sans doute la suite du projet.

vendredi 10 juin 2011

Etaamb sur petits écrans

Le site etaamb.be a été adapté pour smartphone (baptisé "ordiphone" en français contemporain).

Les divers contenus ont été replacés et redimensionnés afin d'offrir une consultation plus aisée sur des écrans de taille réduite (moins de 480 pixels de large).

Mais le monde du smartphone est particulier, et vu la grande variété de plateformes et la diversité plus grande encore de leur navigateurs internet - chacun avec ses particularités et incompatibilités (on se croirait revenu fin des années '90) - , il est impossible de garantir une même expérience d'utilisation sur chaque plateforme sans y consacrer d'énormes efforts. Selon l'ordiphone utilisé, Etaamb peut donc varier, voir sembler inadapté.

Etaamb a été testée sur iOS4 (iPhone) et Android 2.2. Et encore, il n'y est pas tout à fait identique, les propriétaires d'iPhone ne verront par exemple pas la flêche permettant de remonter d'un coup en tête de page (mais il leur est possible de le faire d'un seul geste).

Le site peut aussi être visualisé sous les deux orientations, portrait et paysage. Le mode portrait convient dans ce cas mieux à la navigation (profitant de la verticalité pour afficher plus d'informations, de contexte), et le mode paysage, de par son léger effet d'agrandissement, semble plus confortable pour la lecture des textes.

Pour un aperçu, de décembre 2010, du paysage des navigateurs des "ordiphones":
http://www.alistapart.com/articles/smartphone-browser-landscape/

Problèmes à prévoir
Mais tout n'est pas rose dans le monde du développement internet. Il se peut que certains navigateurs ne sachent différencier l'affichage pour ordiphones de celui prévu pour écrans, voir n'affichent que le contenu textuel.

Internet Explorer (l'éternel) en souffrait, mais un correctif spécifique a déjà été mis en place.

D'autres navigateurs, et sans doute des version plus anciennes, pourraient également souffrir de cette mise à jour.

mardi 7 juin 2011

Vie privée & Anonymisation

Tous les documents (quelques milliers) pouvant contenir des informations sensibles pouvant porter atteinte à la vie privée ont étés rendus temporairement inaccessibles sur Etaamb.

Temporairement ?

Oui, le temps de développer un procédé automatisé d'anonymisation desdits textes.

Etaamb est un exercice technique, et ce développement imprévu constitue un défi intéressant. Après les procédés de data mining (exploration de données) c'est désormais autour du npl (Natural Language Processing - Traitement automatique du langage naturel) que le développement d'Etaamb va s'articuler.

Une fois que celui-ci sera fonctionnel et offrira le résultat recherché, les textes concernés pourront alors à nouveau être consultés, intégralement anonymisés.

mardi 31 mai 2011

500 visites quotidiennes!

Une étape vient d'être franchie dans la fréquentation d'Etaamb, qui a compté hier 30 mai 2011 pas moins de 551 visiteurs.

La fréquentation d'Etaamb fut assez stable depuis le début du mois, avec une moyenne de 300 visites/jour: entre 320 et 360 en semaine et entre 160 et 210 en weekend.

Depuis jeudi dernier les visites sont en constante augmentation (probablement lié à la période d'examens).

Derniers développements

Plusieurs développements modestes, toutefois conséquentes, ont eu lieu depuis le dernier message:

Format des URL
Depuis le début, Etaamb avait trois adresses "racines", autrement dit domaines:
  • www.etaamb.be
  • fr.etaamb.be
  • nl.etaamb.be
Or, ceci dissociait les trois domaines au niveau des moteurs de recherche, ce qui n'est pas souhaitable.

Le format à donc été modifié, et le choix de la langue fait maintenant partie de la requête plutôt que du domaine:
  • www.etaamb.be/fr
  • www.etaamb.be/nl
La modification a eu lieu tout en restant compatible avec le précédent format, et bien qu'elle ait nécessité de nombreuses modifications, de bonnes pratiques et des tests unitaires ont assurés une transition sans obstacles.

Tri par promulgation
Il est désormais possible d'accéder aux textes à travers leur dates de promulgation.
Ceci a à nouveau provoqué une modification du format d'adresse d'Etaamb, tout en restant compatible avec le format précédent.

Cette compatibilité est primordiale car les moteurs de recherche continueront d'utiliser l'ancien format tant qu'ils n'auront pas remis à jour leur indexes.

Dates avant 1970
Dû à une limitation inhérente à l'informatique, Etaamb avait quelques difficultés lors de l'affichage des dates pré-1970.
Ceci est désormais corrigé, et Etaamb remonte sans soucis jusqu'à 1803.

Corrections mineures
Toutes ses améliorations, pas toujours spectaculaires mais profondes dans leurs implications, ont parfois provoqués différents comportements erronés, qui ont pu affecter pour de courtes périodes le fonctionnement d'Etaamb.
Son développement repose moins sur des tests à outrance que sur des mises à jour fréquentes, adapté à une évolution rapide et réactive.

mardi 3 mai 2011

Listes & Liens inverses

Une nouvelle mise à jour vient d'ajouter deux fonctionnalités à Etaamb, et non des moindres:

Listes:
Les textes du moniteur énumèrent souvent diverses choses. Jusqu'à présent, ces énumérations étaient représentées par Etaamb sur une seule et longue ligne, formant un bloc indigeste. Dorénavant, ils seront précédés par un retour à la ligne et une légère indentation, de manière à les rendre aussi intelligibles que possible.

La loi du 29 avril relative à l'organisation du marché de l'électricité illustre bien ce fait (l'article 2 qui est un petit glossaire, par exemple):
http://fr.etaamb.be/loi-du-29-avril-1999_n1999011160.html

Liens inverses:
Etaamb propose et rassemble depuis un certain moment déjà les liens directs entre les documents. Maintenant, il proposé également les liens inverses , ç-à-d qu'à côté d'un document on trouvera des liens vers des textes plus récents qui le mentionnent.

Prenons la loi du 19 avril 2002 relative à la rationalisation du fonctionnement et de la gestion de la Loterie Nationale ( http://fr.etaamb.be/loi-du-19-avril-2002_n2002014105.html ). A la droite du document, au-dessus des textes mentionnés par la loi elle-même, on retrouve une série de textes plus récents: des lois qui le modifient, des arrêtés qui l'appliquent, un recours en annulation de la loi devant la cour constitutionnelle, etc...

Il y à donc, à la droite du document affiché, deux rubriques:
  1. Les textes qui mentionnent le document affiché: ce sont les liens inverses, classés par type de document (Loi, Arrêté, etc...)
  2. Les textes mentionnés par le document affiché: ce sont les liens directs, déjà incorporés sous forme de liens dans le texte lui-même, classés par type et par date de promulgation.
Accessoirement, Etaamb à subi quelques ajustements graphiques, et le precalcul se fait maintenant d'après la taille des documents, certains étant tout simplement gigantesques (le texte le plus long compte plus de 3 millions de signes).

lundi 18 avril 2011

Mise à jour de pâques

Plusieurs point ont étés adressés par la dernière mise à jour:

Extraction de liens:
L'algorithme d'extraction de liens à encore été sensiblement amélioré.
Pour exemple:
http://nl.etaamb.be/koninklijk-besluit-van-27-november-1998_n1998003608.html

Dans ce texte néerlandophone, Etaamb avait jusqu'à présent un peu de peine à trouver l'arrêté royal du 8 octobre 1998 mentionné par le texte, et en proposait 45. Désormais, il en propose un seul, le bon.

Précalcul:
Cette amélioration de la pertinence des liens extraits ne s'est pas faite sans quelques sacrifices au niveau de la performance de rendu d'Etaamb.

Désormais, les textes peuvent être pré-analysés afin d'accélérer le fonctionnement d'Etaamb.

Miscellanées:
A divers endroits, l'affichage du pied de page, de la barre d'adresse, du titre de la page ont subis quelques petites modifications. De même, certains documents très anciens peuvent apparaitre dans la liste des documents (le document le plus ancien de la version en ligne du Moniteur Belge à été promulgué en 1803), souvent dans le cadre d'une coordination en langue allemande.

http://fr.etaamb.be/loi-du-_n2009000678.html