steakfriteMay 20, 2024
The PeARS Project

A French instance is born... (slowly!)

Ce weekend, grâce à un travail merveilleux de volontaires, nous avons commencé à mettre en ligne une instance de PeARS en français, dédiée à la réparation des objets du quotidien. Elle est déjà partiellement traduite, et voilà une première capture d'écran:

May 20, 2024 at 7:39amWeb
Show threadPoslovitchMay 20, 2024
@pears Ah bah génial, maintenant je veux créer une instance Pears pour les bouquins de Wikisource 😅😍
Show threadcui cui contentMay 20, 2024
@Poslovitch @pears N'y a t'il pas déjà un moteur de recherche sur Wikisource ? Qu'est-ce que ça apporterait de plus ? La fédération ?
Show threadPoslovitchMay 20, 2024

@samulus Oui, mais c'est le moteur de recherche de MediaWiki, qui se contente donc de faire de la recherche sur les titres, voire "intext", mais n'exploite pas les catégories qu'on donne aux textes.

@pears

Show threadcui cui contentMay 20, 2024
@Poslovitch ok, je vois.
Show threadThe PeARS ProjectMay 20, 2024
@samulus @Poslovitch Grande idée, PeARS+bouquins 😍 En fait, sur l'une de nos premières ébauches, on avait essayé de faire de la recherche de livres et films en indexant les résumés et synopses de Wikipedia. Donc, votre idée, on l'adore.
Show threadPoslovitchMay 20, 2024
@pears Et bien si ça vous intéresse de creuser… Vous savez où me trouver ^^'
Show threadThe PeARS ProjectMay 20, 2024
@Poslovitch Mais tout à fait, nous aurions bien envie! Il me semble qu'un problème à résoudre sera la longueur des 'documents'. Un bouquin entier, ou même un chapitre, c'est bien plus long qu'une page Web et ça peut éventuellement causer des problèmes à la recherche 'full text'. Mais il faudrait essayer. Si vous avez envie de tester localement, vous pouvez installer Federated (https://github.com/PeARSearch/PeARS-federated) pour voir ce qui marche et ce qui ne marche pas...
GitHub - PeARSearch/PeARS-federated: This is the version of PeARS for use in a federated context: admins create PeARS instances that users can join to contribute to the index. Federated can also be used as a private, single-user search engine when installed locally.

This is the version of PeARS for use in a federated context: admins create PeARS instances that users can join to contribute to the index. Federated can also be used as a private, single-user searc...

GitHub
Show threadcui cui contentMay 20, 2024
@pears est-ce que le lien est public ? (je n'ai pas trouvé l'info sur https://pearsproject.org/), mais je n'ai peut-être pas bien cherché)
PeARS - the People's Search Engine

PeARS is an open-source search engine that lets you take control of your search. It has privacy and energy efficiency at its core.

Show threadThe PeARS ProjectMay 20, 2024
@samulus Pas encore, ou voulait terminer les traductions avant de partager. Aussi, on s'attend à pas mal de bugs 🙄 donc on fera d'abord un appel aux testeurs pour la version alpha et partagerons le lien modérément... Si ça vous intéresse, je vous mets volontiers sur notre liste de volontaires 🙂 On espère être prêts d'ici quelques jours.
Show threadcui cui contentMay 20, 2024

@pears ok pas de souci, j'étais juste curieux. Vous faites bien de prendre le temps qu'il faut 🙂.

Je suis en train de tester l'installation de PeARSearch/PeARS-federated sur mon Raspberry pi

GitHub - PeARSearch/PeARS-federated: This is the version of PeARS for use in a federated context: admins create PeARS instances that users can join to contribute to the index. Federated can also be used as a private, single-user search engine when installed locally.

This is the version of PeARS for use in a federated context: admins create PeARS instances that users can join to contribute to the index. Federated can also be used as a private, single-user searc...

GitHub
Show threadThe PeARS ProjectMay 20, 2024
@samulus Ah super! Faites-nous savoir quels sont les problèmes que vous rencontrez. Ça sera super-utile!
Show threadcui cui contentMay 20, 2024
@pears

Ça tourne: https://pears.s1gm4.eu.

Une remarque : j'ai dû modifier le port utilisé dans run.py, car 8080 était déjà pris sur ma machine, ça pourrait être intéressant de le rendre paramètrable dans une variable d'environnement.

Par contre, je n'ai aucun résultat de recherche pour le moment (c'est sans doute normal).
J'ai lancé l'indexation de https://samuel.ortion.fr pour voir.
Show threadcui cui contentMay 20, 2024

@pears

J'ai l'impression que l'indexation ne fonctionne pas chez moi, il y a toujours marqué "0 pages recorded" dans la page indexer

Show threadThe PeARS ProjectMay 20, 2024
@samulus Hm... laissez-moi vérifier. Il faut que je m'absente brièvement, mais je reviens aussitôt que possible!
Show threadcui cui contentMay 20, 2024

@pears

Ah, j'avais zappé, mais j'ai eu cette erreur après soumission du formulaire d'indexation, lorsque je mets une URL complète, comme https://bioinfo-fr.net/ :

Unfortunately, an error occurred while we were trying to index the suggested URL. This could have various reasons. For instance, the website owner disallows automatic access to their content, or the server refused our request. Please also check that the URL still exists, and that you have not mistyped it.

INDEXER ERROR: compute_vectors: error during parsing

Bioinfo-fr.net

- Le blog participatif de bioinformatique francophone depuis 2012 -

Bioinfo-fr.net
Show threadThe PeARS ProjectMay 20, 2024

@samulus Okay, deux petites choses:

* nous avions oublié des instructions dans le README... il faut installer le français avec

python3 install_language.py fr

(et avoir 'fr' dans la variable PEARS_LANGS du .env, si possible en premier: PEARS_LANGS=fr,en)

* pour quelque raison que ce soit, la détection de langue sur ces deux pages n'est pas la meilleure. Je viens de poussé un hack pour qu'elles soient néanmoins indexées. Pouvez-vous faire un git pull avant de réessayer?

Merci beaucoup 🙂

Show threadThe PeARS ProjectMay 20, 2024

@samulus Très beau! 👏 Ah oui, le port, définitivement à changer!

Effectivement, l'index est à créer avec l'aide de contributeurs/trices. Une chose à savoir: l'interface ne permet d'indexer qu'une page à la fois. C'est un choix motivé par des raisons légales. Il y a un moyen plus rapide d'indexer depuis le terminal, mais un peu buggy pour l'instant.

Show threadcui cui contentMay 20, 2024
@pears pour info, actuellement ça tourne en mode 'debug' de flask.
Show threadcui cui contentJun 7, 2024
@pears À ce propos, j'ai fait un petit commit: https://github.com/samuelortion/PeARS-federated/commit/b073dcc54df7f0e48de44d603cd7f98bf663293f
(c'est basique, et sans doute pas le plus adapté, mais ça me semble good-enough pour désactiver le mode debug de Flask par défaut)

je ne sais pas si vous souhaitez l'intégrer, auquel cas je peux faire un PR (ou attendre d'autres modifs pour faire une PR plus fournie, suivant ce qui vous arrange ;-) ).
Disable flask debug mode by default, unless FLASK_ENV=development · samuelortion/PeARS-federated@b073dcc

This is the version of PeARS for use in a federated context: admins create PeARS instances that users can join to contribute to the index. - Disable flask debug mode by default, unless FLASK_ENV=development · samuelortion/PeARS-federated@b073dcc

GitHub
Show threadThe PeARS ProjectJun 7, 2024
@samulus Ah très bien! Oui, merci, si vous pouvez nous envoyer une petite PR, ça serait merveilleux.