SASSCAL WebSAPI: A Web Scraping Application Programming Interface to Support Access to SASSCAL's Weather Data SASSCAL WebSAPI: واجهة برمجة تطبيقات كشط الويب لدعم الوصول إلى بيانات الطقس الخاصة بـ SASSCAL SASSCAL WebSAPI : A Web Scraping Application Programming Interface to Support Access to SASSCAL' s Weather Data SASSCAL WebSAPI: una interfaz de programación de aplicaciones de raspado web para admitir el acceso a los datos meteorológicos de SASSCAL

The Southern African Science Service Centre for Climate and Land Management (SASSCAL) was initiated to support regional weather monitoring and climate research in Southern Africa. As a result, several Automatic Weather Stations (AWSs) were implemented to provide numerical weather data within the collaborating countries. Meanwhile, access to the SASSCAL weather data is limited to a number of records that are achieved via a series of clicks. Currently, end users can not efficaciously extract the desired weather values. Thus, the data is not fully utilised by end users. This work contributes with an open source Web Scraping Application Programming Interface (WebSAPI) through an interactive dashboard. The objective is to extend functionalities of the SASSCAL Weathernet for: data extraction, statistical data analysis and visualisation. The SASSCAL WebSAPI was developed using the R statistical environment. It deploys web scraping and data wrangling techniques to support access to SASSCAL weather data. This WebSAPI reduces the risk of human error, and the researcher's effort of generating desired data sets. The proposed framework for the SASSCAL WebSAPI can be modified for other weather data banks while taking into consideration the legality and ethics of the toolkit. تم إنشاء مركز الخدمات العلمية للجنوب الأفريقي لإدارة المناخ والأراضي (SASSCAL) لدعم رصد الطقس الإقليمي والبحوث المناخية في الجنوب الأفريقي. ونتيجة لذلك، تم تنفيذ العديد من محطات الطقس الأوتوماتيكية (AWSs) لتوفير بيانات الطقس العددية داخل البلدان المتعاونة. وفي الوقت نفسه، يقتصر الوصول إلى بيانات الطقس الخاصة بـ SASSCAL على عدد من السجلات التي يتم تحقيقها من خلال سلسلة من النقرات. في الوقت الحالي، لا يمكن للمستخدمين النهائيين استخراج قيم الطقس المطلوبة بشكل فعال. وبالتالي، لا يتم استخدام البيانات بشكل كامل من قبل المستخدمين النهائيين. يساهم هذا العمل في واجهة برمجة تطبيقات كشط الويب مفتوحة المصدر (WebSAPI) من خلال لوحة معلومات تفاعلية. الهدف هو توسيع وظائف SASSCAL Weathernet من أجل: استخراج البيانات وتحليل البيانات الإحصائية والتصور. تم تطوير SASSCAL WebSAPI باستخدام البيئة الإحصائية R. وهي تنشر تقنيات كشط الويب وخلاف البيانات لدعم الوصول إلى بيانات الطقس الخاصة بـ SASSCAL. يقلل WebSAPI هذا من خطر الخطأ البشري، وجهود الباحث في إنشاء مجموعات البيانات المطلوبة. يمكن تعديل الإطار المقترح لـ SASSCAL WebSAPI لبنوك بيانات الطقس الأخرى مع مراعاة شرعية وأخلاقيات مجموعة الأدوات. Le Southern African Science Service Centre for Climate and Land Management (SASSCAL) a été lancé pour soutenir la surveillance météorologique régionale et la recherche climatique en Afrique australe. En conséquence, plusieurs stations météorologiques automatiques (AWS) ont été mises en œuvre pour fournir des données météorologiques numériques dans les pays collaborateurs. Pendant ce temps, l'accès aux données météorologiques SASSCAL est limité à un certain nombre d'enregistrements qui sont réalisés via une série de clics. Actuellement, les utilisateurs finaux ne peuvent pas extraire efficacement les valeurs météorologiques souhaitées. Ainsi, les données ne sont pas pleinement utilisées par les utilisateurs finaux. Ce travail contribue avec une interface de programmation d'applications de grattage Web open source (WebSAPI) via un tableau de bord interactif. L'objectif est d'étendre les fonctionnalités du SASSCAL Weathernet pour : l'extraction de données, l'analyse de données statistiques et la visualisation. Le SASSCAL WebSAPI a été développé en utilisant l'environnement statistique R. Il déploie des techniques de grattage Web et de traitement des données pour faciliter l'accès aux données météorologiques SASSCAL. Ce WebSAPI réduit le risque d'erreur humaine et les efforts du chercheur pour générer les ensembles de données souhaités. Le cadre proposé pour le SASSCAL WebSAPI peut être modifié pour d'autres banques de données météorologiques tout en tenant compte de la légalité et de l'éthique de la boîte à outils. El Centro de Servicios Científicos de África Austral para la Gestión del Clima y la Tierra (SASSCAL) se inició para apoyar el monitoreo meteorológico regional y la investigación climática en África Austral. Como resultado, se implementaron varias Estaciones Meteorológicas Automáticas (AWS) para proporcionar datos meteorológicos numéricos dentro de los países colaboradores. Mientras tanto, el acceso a los datos meteorológicos de SASSCAL se limita a una serie de registros que se logran a través de una serie de clics. Actualmente, los usuarios finales no pueden extraer eficazmente los valores meteorológicos deseados. Por lo tanto, los datos no son utilizados completamente por los usuarios finales. Este trabajo contribuye con una interfaz de programación de aplicaciones de raspado web (WebSAPI) de código abierto a través de un panel interactivo. El objetivo es ampliar las funcionalidades de SASSCAL Weathernet para: extracción de datos, análisis de datos estadísticos y visualización. El SASSCAL WebSAPI se desarrolló utilizando el entorno estadístico R. Despliega técnicas de raspado web y disputas de datos para respaldar el acceso a los datos meteorológicos de SASSCAL. Esta WebSAPI reduce el riesgo de error humano y el esfuerzo del investigador por generar los conjuntos de datos deseados. El marco propuesto para el SASSCAL WebSAPI puede modificarse para otros bancos de datos meteorológicos teniendo en cuenta la legalidad y la ética del conjunto de herramientas.