Evolution du/des schedulers
Afin de mieux gérer les files d'attente entre pages à rafraichir l'analyse et les nouvelles URLs entrantes. Différentes idées :
- Garder un seul scheduler ou diviser en 2 schedulers entre URLs à rafraichir et nouvelle URL. Décision : ==TODO==
- Ajouter un champ de date de future analyse pour simplifier le choix des pages par le scheduler. OK/Pas OK ==TODO==
- Appliquer cette logique par page ou par groupe de page. Décision : ==TODO==
- Ajouter un nombre maximal de pages à scanner lors du passage du scheduler. Attention, impact fort si on garde la logique de groupe de pages.
- ==> Trancher sur la notion de groupe de pages et leur synchronicité des résultats. Penser à l'affichage des statistiques/graphiques qui ont une logique par groupe de pages, et le sens de cette analyse.