Blog post in English here.

Nous sommes ravis d’annoncer aujourd'hui le nouvel Explorateur de données de Borealis. L’Explorateur de données est une application basée sur le web qui permet l’exploration, l’analyse et la conservation de variables dans des ensembles de données directement via Odesi et Borealis. 

Suivant la migration du répertoire de données Odesi de Nesstar à Borealis en automne 2023, les commentaires de la communauté nous ont informé que de nouveaux outils étaient nécessaire pour mieux supporter les conservateurs, les chercheurs, et les utilisateurs d’ensembles de données. Depuis, nous avons mis à jour et modernisé L’Explorateur de données original et l’outil de conservation de données (précédemment deux outils distincts) en les unissant sous une seule application connectée à Borealis et Odesi. 

L'Explorateur de données supporte désormais les utilisateurs et utilisatrices de Odesi et Borealis lors de la visualisation et l’exploration de fichier tabulaire, leurs variables associées, leurs métadonnées, leurs statistiques sommaires, leurs téléchargements et lors de la création de tableaux-croisés et graphiques récapitulatifs.

Le nouvel Explorateur de données permet à ses utilisateurs et utilisatrices qui possèdent les autorisations requises de voir et modifier les métadonnées de leurs ensembles de données en utilisant l’interface de programmation (API) de Dataverse et les métadonnées conformes au standard Data Documentation Initiative (DDI). Grâce à l’union des deux outils précédent, les nouvelles fonctions de l’Explorateur de données permettent aux administrateurs et conservateurs d’ensembles de données de facilement créer et modifier les métadonnées de variables pour tous fichiers tabulaires (tel que SPSS, R, Excel, CSV) directement au travers de Odesi et Borealis.

L’Explorateur de données est un logiciel open source basé sur le web conçu et développé par Scholars Portal (OCUL). Notre logiciel est entièrement intégré avec le logiciel open source “Dataverse repository project” (dataverse.org) développé par l’IQSS de l’université Harvard à l’aide de collaborateurs de la communauté internationale.

Pour en savoir plus sur l'utilisation du nouvel Explorateur de données, consultez la section L’Explorateur de données du guide pour utilisateur de Odesi, ainsi que deux nouveaux tutoriels vidéos.

• Mis à jour de l’interface utilisateur
• Exploration des variables améliorée
• Création des tableaux croisés
• Téléchargement de variable 
• Téléversement des Métadonnées conformes au standard DDI
• Téléchargement des livres de codes des métadonnées conformes au standard DDI sous format PDF et HTML
• Nouveaux guides et tutoriels vidéos
• Contactez-nous 

Mis à jour de l’interface utilisateur

Le nouvel Explorateur de données offre une interface utilisateur modernisée, dorénavant plus accessible et facile à utiliser grâce aux nouvelles icônes de navigations.

Nous avons ajouté de nouveaux boutons pour les groupes de variables et une nouvelle option pour voir toutes les variables de l’ensemble de données dans un seul groupe. L’interface utilisateur comporte désormais les nouveaux onglets “Variables” et “Tableaux croisés” pour simplifier le processus d’ajout de variables et de catégories lors de la création de tableaux croisés et de graphiques récapitulatifs. 

L’interface utilisateur est disponible an Français et en Anglais et peut aussi être passé au mode sombre si désiré. L’interface utilisateur améliore aussi l’utilisation de l’Explorateur de données sur les appareils mobiles. 

Exploration des variables améliorée

Le nouvel explorateur de données facilite désormais la recherche, la filtration et la visualisation des variables.

Les utilisateurs de l’Explorateur de données peuvent chercher les noms de variables, leurs étiquettes et leur code d’identification à l’aide de la barre de recherche située au haut du tableau des variables. Les variables peuvent aussi être accédées par groupes, catégories, et étiquettes pour plus facilement créer des tableaux croisés et des graphiques récapitulatifs. 

Les utilisateurs de l’Explorateur de données peuvent aussi sélectionner l’option “Visualiser une variable” pour accéder à son graphique récapitulatif et ses données, aux statistiques sommaires et aux informations de la variable telles que la question littérale, l’univers, les remarques et plus encore. Les données du graphique incluent les fréquences, le pourcentage de chaque fréquence, la fréquence pondérée, et le pourcentage de chaque fréquence pondérée. Chaque valeur présentée dans le graphique récapitulatif peut être ajoutée ou retirée à l'aide de leur case à cocher. Les utilisateurs peuvent passer de variable en variable sans fermer la fenêtre “Visualiser une variable” à l’aide des flèches de navigation situées au haut la fenêtre. 

Création des tableaux croisés

Le nouvel Explorateur de données permet de plus facilement créer des tableaux croisés. 

Pour créer des tableaux croisés, il faut d’abord sélectionner l’icône “Ajouter au tableau croisé” pour chaque variable désirée. Une fois qu’elles sont sélectionnées, vous pouvez ouvrir l’onglet “Tableaux croisés” situé au-dessus de la colonne des groupes. 

À partir de l’onglet des tableaux croisés, vous pouvez assigner à le rôle de ligne ou de colonne à chaque variable à l’aide du menu déroulant “Ligne ou colonne?”. Le tableau est automatiquement créé pour refléter vos décisions. 

Vous avez l’option de télécharger votre tableau croisé à l’aide du bouton rose “Exporter le tableau au format CSV” situé au-dessus du tableau croisé nouvellement créé. 

Téléchargement de variable 

Les utilisateurs de l’Explorateur de données ont aussi l’option télécharger les variables de leur choix. À partir de l’onglet des variables, les utilisateurs peuvent sélectionner les cases à cocher de chaque variable désirée. En sélectionnant ensuite le menu déroulant “Télécharger”, l’option “Télécharger le sous-ensemble” sera disponible. Le nombre de variables sélectionnées peut être trouvé sur le bouton “Télécharger”. 

Bien que l’Explorateur de données soit robuste pour les analyses de données préliminaires, les utilisateurs sont fortement encouragés à consulter les fichiers de données originales et, si applicable, les documents d’informations additionnels associés à l’ensemble de données en question. 

Téléversement des Métadonnées conformes au standard DDI

Le nouvel Explorateur de données permet aussi aux administrateurs et aux conservateurs de données de téléverser et réutiliser leur métadonnées conformes au standard DDI sous format XML. Ceci peut être accomplie en sélectionnant l’option “Importer les métadonnées” situé au-dessous de la fenêtre sous la colonne des groupes. Une fois sélectionné, le fenêtre “Importer XML” s’ouvrira et permettra aux utilisateurs de sélectionner quelles sections du fichier des métadonnées conformes au standard DDI à importer lors du téléversement.

Notez que seuls les fichiers XML générés par l’Explorateur de données peuvent être téléversé à ce moment. 

Téléchargement des livres de codes des métadonnées conformes au standard DDI sous format PDF et HTML

Une fois qu’un ensemble de données est publié, un livre de codes des métadonnées conformes au standard DDI sera automatiquement créé. Ce livre de code peut être téléchargé à l’aide du menu déroulant “Conditions d’accès au fichier”, dans lequel se trouve l’option “Métadonnées des variables”. Les métadonnées de l’ensemble de données peuvent aussi être téléchargées sous format PDF ou HTML à partir du menu déroulant “Télécharger” situé sur la l'interface utilisateur principale de l’Explorateur de données. 

Nouveaux guides et tutoriels vidéos

Pour accompagner le nouvel Explorateur de données, nous avons préparé de nouveaux guides et tutoriels vidéos pour supporter les chercheurs et les conservateurs d’ensemble de données. 

Nous avons révisé le guide pour utilisateur de Odesi et le guide pour utilisateur de Borealis pour inclure les nouvelles fonctions de l’Explorateur de données. Le guide d’administration Borealis fut aussi mis à jour.  

Deux nouveaux tutoriels vidéos sont maintenant disponibles sur la page des vidéos de formation de Odesi ainsi que sur la chaîne YouTube de Borealis. La première vidéo offre un aperçu du nouvel Explorateur de données. La deuxième offre plus d’information pour la conservation d’ensemble de données et s'adresse donc principalement aux administrateurs et conservateurs d’ensemble de données. 

Le dépôt GitHub de l’Explorateur de données est également accessible au public.

Contactez-nous 

Si vous avez des questions par rapport au nouvel Explorateur de données, n’hésitez pas à nous contacter à odesi@scholarsportal.info. Un membre de notre équipe sera en contact avec vous aussi tôt que possible. 

Article de blogue en français ici.

We are excited to announce the official release of the new and improved Data Explorer in Borealis. Data Explorer is a comprehensive web application designed to support data exploration, analysis, and curation at the variable-level in Odesi and Borealis. 

Following the Odesi data repository migration from Nesstar to Borealis in fall 2023, feedback from the community indicated a need for additional functionality in connected tools to better support data depositors, curators, researchers and users. Over the past year, we re-developed the Data Explorer and Data Curation Tool (previously two separate tools) and combined them into a single, enhanced application connected to Borealis and Odesi.

Data Explorer supports users in Odesi and Borealis with viewing and exploring tabular data files and variables by groups or category/subject, variable metadata, summary frequencies and statistics, building cross-tabulations, charts, subsetting, and downloading data. 

The new Data Explorer allows authorized users to view and edit variable metadata using the Dataverse APIs and Data Documentation Initiative (DDI) metadata. New features enable data administrators and curators to create and edit variable-level metadata for tabular files (e.g., SPSS, R, Excel, CSV) in Odesi and Borealis for enhanced curation workflows, combining the full functionalities of the previous Data Curation Tool.

Data Explorer is an open-source web application built and developed by Scholars Portal (OCUL). The application is fully integrated with the open-source Dataverse repository project (dataverse.org) developed by IQSS, Harvard University together with global collaborators. 

An overview of the new features and functionalities in Data Explorer is provided below. To learn more about getting started with the new Data Explorer, refer to the Using the Data Explorer section of the Odesi User Guide, as well as two new video tutorials. 

• Updated Web Interface
• Enhanced Variable Exploration
• Cross-Tabulations & Chart Builder
• Variable Subsetting & Download 
• Import DDI XML 
• DDI Codebook HTML & PDF Download
• New Documentation & How-to Videos
• Contact Us

Updated Web Interface

The new Data Explorer offers a refreshed, accessible web interface with updated navigation and icons. 

New navigational buttons for variable “Groups” and option to show “All Variables” are added, along with new “Cross Tabulation” and “Variables” tabs in order to view selected variables and categories to create tables and charts. 

The new user interface can be viewed in English or French, and users can view the application in dark mode, if desired. The updated interface also provides an improved experience for mobile-device users.

Enhanced Variable Exploration

The new Data Explorer provides enhanced variable searching, filtering, viewing, and exploration capabilities. 

Users can search by variable names, labels, and IDs using the “Search table” bar at the top of the center panel. Users can also view and filter variables by groups, categories, and labels to view frequencies and build cross-tabulations and charts. 

Users can select the “View Variable” graph icon to view variable frequencies and chart data, summary statistics, and additional variable information such as questions, interview instructions, weights, universes, and more. Charted data shows values, categories, counts, count percentages, weighted counts, and weighted percentages. Users can select or deselect checkboxes for each variable to include or remove selected categories and values from the summary graphs provided.

In the “View Variable” window, users can navigate between adjacent variables using the navigation arrows to view more variables.

Cross-Tabulations & Chart Builder

The new Data Explorer also provides improved functionality for creating cross tabulations and charts.

To build a cross tabulation, select the “Add to cross tabulation” icon for each desired variable. Once all variables have been selected, navigate to the “Cross Tabulation” window using the tab in the top left. 

From here, assign the variables as a row or column using the drop down menus, and apply any desired “Group” or “Category” filters. The table will automatically generate based on these inputs.

Users now have the option to export cross tabulation tables and charts from Data Explorer in CSV format for further analysis. Toggling between Chart and Table to choose the desired export format, click the “Export chart/table as CSV” button.

Variable Subsetting & Download 

Users can also download select variables as a subset. From the variables tab, users can select the check boxes next to the desired variables in order and then click the “Download” drop-down button in the top right corner. The number of selected variables will appear next to the “Download” button. Select “Download selected variables as a subset”. 

Note that we strongly recommend downloading the original data file in addition to any subsets, and users are strongly encouraged to consult original data files and accompanying documentation when conducting data analysis for their research. 

Import DDI XML 

With newly combined functionality for both exploration and curation, the new Data Explorer allows depositors and curators to import and reuse DDI XML metadata. 

In the bottom left corner of the “Groups” panel in Data Explorer, select “Import Metadata”. From the “Import XML” page, depositors and curators can select or deselect DDI sections and texts to include in the import. 

Please note that the “Import XML” feature only allows for import and re-use of Dataverse-generated DDI metadata at this time. 

DDI Codebook HTML & PDF Download

Upon publishing a dataset, a DDI standard metadata ‘DDI Codebook’ will be automatically created for that dataset. This Codebook can be downloaded through the “Access File” drop-down option in Borealis. Under “Metadata Download” select “Variable Metadata” to download the DDI Codebook.Users can also access a DDI Codebook as an HTML or PDF file through the Data Explorer’s “Download” tab.

New Documentation & How-to Videos

With the release of the new Data Explorer, we have prepared updated documentation to support researchers, depositories, and curators with the new interface and functionalities. 

The existing Odesi User Guide and Borealis User Guide have been revised to reflect the new Data Explorer, including updated screenshots. The Borealis Admin Guide has also been updated to reflect changes to curation workflows using the new Data Explorer. 

Two new video tutorials are also now available on the Video Tutorials tab of the Odesi User Guide and on the Borealis YouTube channel. The first video provides an overview of the new Data Explorer. The second video provides more information about using Data Explorer for data curation. 

The GitHub Repository for Data Explorer is also publicly available. 

Contact Us

If you have any questions or concerns about the new Data Explorer, please reach out to odesi@scholarsportal.info and a member of our team will be in touch as soon as possible.

Blog post in English here

Borealis passera à la version 6.4 le 27 janvier 2025. Veuillez noter que la plateforme sera indisponible pendant la mise à niveau, de 9 heures à 17 heures environ (heure de l'Est). 

Cette mise à jour apporte de nombreuses nouvelles fonctionnalités, y compris : 

• Explorateur de données entièrement redessiné
• Nouveau champ « Type de relation » pour les métadonnées des publications connexes afin de se conformer au schéma DataCite Metadata 4.5
• Amélioration de la gestion des fichiers shapefile/zip
• Le bloc de Métadonnées sur le flux de travail informatique comporte maintenant des URL cliquables.
• Amélioration des notifications par courrier électronique lorsqu'un registre de visites est utilisé pour des demandes d'accès à des fichiers.
• Bouton pour Délier l'ensemble de donnees
• Extension des normes de métadonnées, y compris la prise en charge de Croissant
• Améliorations de l'API de recherche
• La balise de métadonnées incomplète n'est plus visible publiquement
• Amélioration de l'indexation et des performances
• Corrections des bogues et plus encore !

Pour tester ces fonctionnalités, vous pouvez utiliser notre environnement de démonstration (bac à sable), qui a été mis à jour le 18 décembre.

Tous les détails sur les nouvelles fonctionnalités et les changements peuvent être trouvés dans les pages GitHub Release d'IQSS (en anglais uniquement). des notes de version GitHub d’IQSS (en anglais uniquement). Prenez note que les fonctionnalités décrites ne seront pas toutes activées dans Borealis.

• 6.3
• 6.4

N’hésitez pas à communiquer avec nous pour toute question ou commentaire.

Article de blogue en français ici

Borealis will upgrade to version 6.4 on January 27, 2025. Please note the platform will be unavailable during the upgrade from approximately 9 am - 5 pm ET.

This upgrade brings many new features, including:

• Fully redesigned Data Explorer
• New “Relation Type” field for Related Publication Metadata to comply with DataCite Metadata 4.5 schema
• Improvements to shapefile/zip handling
• Computational Workflow Metadata block now has clickable URLs
• Improved email notifications when a Guestbook is used for file access requests
• Unlink Dataset Button
• Expanded metadata standards including Croissant support
• Improvements to Search API
• Incomplete metadata tag no longer publicly viewable
• Indexing and performance enhancements
• Bug fixes and more!

To test these features, feel free to use our demo sandbox environment which was upgraded on December 18.

Full details about the new features and changes can be found in the IQSS GitHub Release pages (English only).  Please note that not all of the features available will be enabled in Borealis.

• 6.3
• 6.4

Please reach out if you have any questions or feedback.