julienfroidefond/peakskills
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

refactor: improve logging and streamline skill synchronization process

Browse Source 
- Enhanced console logging for better clarity during skill category processing.
- Simplified skill update checks and utilized bulkInsertSkillsFromJSON for efficient skill management.
- Improved code readability by standardizing formatting and reducing unnecessary comments.
This commit is contained in:
Julien Froidefond
2025-08-22 16:41:41 +02:00
parent 734044d73b
commit 905e2b2081
1 changed files with 60 additions and 49 deletions
Download Patch File Download Diff File Expand all files Collapse all files

95
scripts/sync-skills.ts
View File

@@ -24,16 +24,20 @@ async function syncSkillsToDatabase(): Promise<void> {
// Charger les skills depuis les fichiers JSON
const skillCategoriesFromFiles = loadSkillCategoriesFromFiles();
console.log(`📁 ${skillCategoriesFromFiles.length} catégories trouvées dans les fichiers`);
console.log(
`📁 ${skillCategoriesFromFiles.length} catégories trouvées dans les fichiers`
);
// Récupérer les skills existantes de la base de données
const existingCategories = await SkillsService.getSkillCategories();
console.log(`💾 ${existingCategories.length} catégories existantes en base`);
console.log(
`💾 ${existingCategories.length} catégories existantes en base`
);
// Créer un map des skills existantes pour une recherche rapide
const existingSkillsMap = new Map<string, Skill>();
existingCategories.forEach(category => {
category.skills.forEach(skill => {
existingCategories.forEach((category) => {
category.skills.forEach((skill) => {
existingSkillsMap.set(skill.id, skill);
});
});
@@ -45,26 +49,31 @@ async function syncSkillsToDatabase(): Promise<void> {
skillsProcessed: 0,
newSkills: 0,
updatedSkills: 0,
skippedSkills: 0
skippedSkills: 0,
};
// Synchroniser chaque catégorie
for (const categoryFromFile of skillCategoriesFromFiles) {
console.log(`\n📂 Traitement de la catégorie: ${categoryFromFile.category}`);
console.log(
`\n📂 Traitement de la catégorie: ${categoryFromFile.category}`
);
const categoryId = categoryFromFile.category.toLowerCase();
// Vérifier si la catégorie existe, sinon la créer
const existingCategory = existingCategories.find(cat =>
cat.category.toLowerCase() === categoryFromFile.category.toLowerCase()
const existingCategory = existingCategories.find(
(cat) =>
cat.category.toLowerCase() === categoryFromFile.category.toLowerCase()
);
if (!existingCategory) {
console.log(` ➕ Création de la nouvelle catégorie: ${categoryFromFile.category}`);
console.log(
` ➕ Création de la nouvelle catégorie: ${categoryFromFile.category}`
);
await SkillsService.createSkillCategory({
id: categoryId,
name: categoryFromFile.category,
icon: categoryFromFile.icon
icon: categoryFromFile.icon,
});
}
@@ -72,40 +81,40 @@ async function syncSkillsToDatabase(): Promise<void> {
for (const skillFromFile of categoryFromFile.skills) {
const existingSkill = existingSkillsMap.get(skillFromFile.id);
if (!existingSkill) {
// Nouvelle skill - l'ajouter
console.log(` ➕ Nouvelle skill: ${skillFromFile.name} (${skillFromFile.id})`);
await SkillsService.createSkill({
id: skillFromFile.id,
name: skillFromFile.name,
description: skillFromFile.description,
icon: skillFromFile.icon,
categoryId: categoryId,
links: skillFromFile.links || []
});
stats.newSkills++;
} else {
// Skill existante - vérifier s'il faut mettre à jour description/icon/links
const needsUpdate =
existingSkill.description !== skillFromFile.description ||
// Utiliser bulkInsertSkillsFromJSON qui gère les conflits automatiquement
const needsUpdate = existingSkill
? existingSkill.description !== skillFromFile.description ||
existingSkill.icon !== skillFromFile.icon ||
JSON.stringify(existingSkill.links?.sort()) !== JSON.stringify(skillFromFile.links?.sort());
JSON.stringify(existingSkill.links?.sort()) !==
JSON.stringify(skillFromFile.links?.sort())
: true;
if (needsUpdate) {
console.log(` 🔄 Mise à jour de la skill: ${skillFromFile.name} (${skillFromFile.id})`);
// Utiliser la méthode bulkInsert avec une seule catégorie/skill pour la mise à jour
await SkillsService.bulkInsertSkillsFromJSON([{
category: categoryFromFile.category,
icon: categoryFromFile.icon,
skills: [skillFromFile]
}]);
stats.updatedSkills++;
} else {
console.log(` ✅ Skill inchangée: ${skillFromFile.name} (${skillFromFile.id})`);
stats.skippedSkills++;
}
if (!existingSkill) {
console.log(
` ➕ Nouvelle skill: ${skillFromFile.name} (${skillFromFile.id})`
);
stats.newSkills++;
} else if (needsUpdate) {
console.log(
` 🔄 Mise à jour de la skill: ${skillFromFile.name} (${skillFromFile.id})`
);
stats.updatedSkills++;
} else {
console.log(
` ✅ Skill inchangée: ${skillFromFile.name} (${skillFromFile.id})`
);
stats.skippedSkills++;
}
// Insérer/mettre à jour la skill (bulkInsert gère les conflits)
await SkillsService.bulkInsertSkillsFromJSON([
{
category: categoryFromFile.category,
icon: categoryFromFile.icon,
skills: [skillFromFile],
},
]);
stats.skillsProcessed++;
}
@@ -122,11 +131,13 @@ async function syncSkillsToDatabase(): Promise<void> {
// Vérification finale
const finalCategories = await SkillsService.getSkillCategories();
const totalSkillsInDb = finalCategories.reduce((sum, cat) => sum + cat.skills.length, 0);
const totalSkillsInDb = finalCategories.reduce(
(sum, cat) => sum + cat.skills.length,
0
);
console.log(`\n✅ Synchronisation terminée avec succès!`);
console.log(`💾 Total skills en base: ${totalSkillsInDb}`);
} catch (error) {
console.error("❌ Erreur lors de la synchronisation:", error);
process.exit(1);