 Public Sector National Accounts
Since 2004 PARADIGMA has continuously worked with Statistics Austria to develop tools to support the production process of the public sector national accounts.
High visibility as well as the political sensitivity of the quarterly released performance numbers of the public sector in the light of the introduction of the common currency, the EURO and the provisions of the Maastricht treaty motivated this investment.
Starting from the raw data set, containing data from ledgers of communities, regional government, national government as well as public institutions, PARADIGMA's framework supports all subsequent production stages:
- Transformation of public accounts to ESA transactions using a rule based engine
- Application of distribution methods, imputations and corrections
- preparation of tables/national accounts
- Publication of the authentic data
- Dissemination (EUROSTAT, OECD)
Benefits of the new process:
Using the system in their daily work, the department has seen a significant reduction in the transformation and rule application cycle, mapping the ledger accounts to NSA transactions. As a consequence, more time is available to analyze the data and to compile the accounts in compliance with ESA standards.
The ability to try alternative combinations of methods and to gauge their impact on the results in "quasi-real" time increases the data quality (consistency and coherence). Statistics experts are able to compute and compare different variants of the accounts, depending on the data used and the methodology deployed. The system provides for the persistent storage of these variants , enabling auditing and quality control of the production process as well as of the resulting tables.
The pervasive use of consistent metadata within the department allows the reuse of results and thus makes the department even more productive.
Final quarterly and annual results, the authentic data, are made available in a database which is available to internal users, enabling other departments to access the data without assistance from the national accounts experts.
Publication is supported through automated procedures submitting data to EUROSTAT as well as to Statistics Austria's statistical dissemination system, which is based on SuperWEB.
Romanian Agricultural Census - Use of SuperCROSS to analyse, publish and disseminate census data - Presentation at ISI Conference 2011 in Dublin
Download Folder
Like other member states of the European Union, Romania has started the agricultural census in 2010. Prior to embarking on the effort, the Romanian NSO has tendered the procurement of systems and technical support for the collection, production, analysis and dissemination of the census data.
Die Statistik Austria sieht sich im Bereich An- und Abmeldungen von Gebraucht- und Neuwagen mit einem durchschnittlichen Bestandsvolumen von nahezu 17 Millionen Datensätzen konfrontiert. Die Erfassung und Zurverfügungstellung dieser Daten in leicht zugängigen Datenbanken ist in vielerlei Hinsicht interessant. Unterschiedliche Anfragen im Bereich KFZ-Statistik, die eine Sonderauswertung erforderlich machen, können damit bearbeitet und in weiterer Folge beantwortet werden.
Datum: 17. März 2009
Ort: Industriellenvereinigung, Europasaal, Schwarzenbergplatz 4, 1031 Wien
Unter dem Motto "Vom unternehmensweiten Warehouse zum Informationwarehouse: Echtzeitrisikoanalyse & Compliance sicherstellen" gaben am 17. März 2009 zahlreiche ReferentInnen insbesondere Einblick darüber, warum Business Intelligence gerade in wirtschaftlichen Krisenzeiten eine wesentliche Rolle spielt und wie bestehende Systeme beispielsweise durch Softwarelösungen von IBM und SAP noch effizienter genutzt werden können.
 Space-Time Research ist Marktführer von Business Intelligence Lösungen und von "ad-hoc" Abfragen. Die hohe Performance, die breitgefächerten Anwendungsmöglichkeiten sowie die hohe Benutzerfreundlichkeit der Produktlösung SuperSTAR wird durch den Einsatz in Statistischen Zentralämtern und Behörden wie beispielsweise Australien, USA, Schweden und Österreich laufend bestätigt.
Zu den weiteren Kunden zählen weltweit auch Behörden in den Bereichen Erziehung, Wohlfahrt, Transport, Tourismus, Gesundheit, Verbrechensbekämpfung und Zivilschutz.
Das Datawarehouse als primärer Knotenpunkt des gesamten Datenmaterials bietet vielfältige Auswertungsoptionen. So manche Analyse erfordert aber eine Speziallösung.
Bei der Umsetzung von Datawarehouse Systemen setzen wir zum einen auf Open Source Software für die Implementierung von ETL Routinen und Userinterfaces, und zum anderen auf die OLAP-, Reporting- & Visualisierungskomponenten von SuperSTAR zur Präsentation der Ergebnisdaten.
Der Einsatz von Open Source Software erleichtert die Integration von unterschiedlichsten Datenquellen und Formaten, die von kommerziellen Tools oft nicht unterstützt sind. So kann die Entwicklung beschleunigt werden, und es kann mehr Gewicht auf die Analyse der Daten gelegt werden.
SuperSTAR von Space-Time-Research ist ein umfangreiches OLAP/Reporting System, das vor allem durch die hohe Verarbeitungsgeschwindigkeit im Umgang mit großen Datenmengen hervorsticht.
Unser Team hat sich auf diese Methode spezialisiert, wenn es um die Umsetzung neuer Lösungen geht. Wir verfügen aber auch über Erfahrungen mit anderen Systemen (insbesondere Hyperion ESSBASE)
Auswertungen auf Basis von Einzeldatensätze
Das Speichern der Einzeldatensätze in einer Datawarehouse Datenbank bietet den Vorteil, dass zukünftige Auswertungsanforderungen mit hoher Wahrscheinlichkeit ohne Änderungen erfüllt werden können. Werden hingegen (nur) voraggregierte Daten gespeichert, kommt bestimmt einmal die Anforderung, die nicht ohne Designänderung und Neubeladung umgesetzt werden kann (wenn die Daten überhaupt noch vorhanden sind).
Tagesaktuelle (oder stundenaktuelle) Auswertungen
Durch den Einsatz eines Datawarehouse Systems werden die Daten automatisiert in bestimmten Intervallen für Auswertungen vorbereitet. Bei größeren Datenmengen kann eine Beladung allerdings recht lange dauern und nicht alle Systeme skalieren mit dem Einsatz von schnellerer Hardware.
Die PARADIGMA bietet eine Implementierung speziell ausgelegt auf kurze Beladungszeiten und damit kleinere Intervalle und aktuellere Auswertungen.
Der Einsatz von SuperSTAR unterstützt uns dabei mit dem auf große Datenmengen ausgelegten System.
- Definition der Datenschemata, Eingabeschnittstellen & Verarbeitungsprozesse.
- Implementierung der ETL Routinen, nötige Userinterfaces (browserbasiert).
- Definition der OLAP Star-Schemata (dh. Definition der Datenstrukturen, welche für die gewünschten Auswertungen benötigt werden).
- Implementierung von Reports auf Basis von SuperSTAR eingebettet in Webseiten (Intranet) oder mit Desktop Clients“]
- Installation & Wartung der benötigten Tools (Datenbanksystem, Application Server, SuperSTAR Sytem, etc.)
- In einem Unternehmen gelangt man immer wieder in die Situation, dass aus gegebenem Anlass Informationen relevant werden, die zuvor nicht gebraucht wurden. Aus diesem Grund empfiehlt es sich, schon von Grund auf mit flexibler und anpassungsfähiger Software zu arbeiten.
- Das Aufrüsten von nicht geeigneter Software ist oftmals sehr teuer oder gar nicht möglich.
- Das Team der PARADIGMA bietet ausschließlich Lösungen für Ihr Problem, das nachhaltig von Nutzen ist. Unsere besondere Stärke liegt nach langjähriger Erfahrung im Weitblick für eventuelle künftige Anwendungsmöglichkeiten oder –anforderungen.
Unsere langjährige Erfahrung in der Zusammenarbeit mit der amtlichen Statistik verschafft uns einen Einblick in typische Probleme in der dort anfallenden täglichen Arbeit.
Im Bereich der Datenverarbeitung ist es oftmals die dezentrale Art und Weise der Datenhaltung und -aufbereitung, die zahlreiche Probleme nach sich zieht.
Die enorme Datenmenge, die in der amtlichen Statistik naturgemäß anfällt, muss auf unterschiedlichste Art und Weise aufbereitet werden um in weiterer Folge jederzeit abrufbar sein zu können.
Oftmals kommt es zu einer Vielzahl von Spreadsheets mit Inhalten, die nicht auf grundlegende Konsistenz überprüft werden können. Es fehlt der Überblick über die Datenbestände und über die Stufen im Verarbeitungsprozess.
Wir adressieren derartige Probleme mit dem Einführen von zentralen Datensystemen, Datenversionierung, validierten & konsistenten Tabellenbeständen, dokumentierten Datenänderungen und modularen Verarbeitungsprozessen.
Um das effizient und branchenoptimiert umsetzen zu können, greifen wir auf eigens entwickelte Frameworks zurück.
- Der Überblick über die große Menge an unterschiedlichen Datenbeständen geht verloren.
In der Statistik ist die „Datenproduktion“ das eigentliche Geschäft. Durch die Vielfalt an unterschiedlichen Daten und unterschiedlichen Methoden, die für die Aufbereitung zur Anwendung kommen müssen, kommt es naturgemäß zu heterogenen Strukturen und bei mangelnder Kontrolle wächst die Gefahr von Datenverlust oder Qualitätsmängeln. Diese Aspekte können durch (teilweise) Zentralisierung und Einführung von strukturierten Metadaten verbessert werden.
- Der Weg von Rohdaten zu Ergebnissen beinhaltet zahlreiche schwer nachvollziehbare Schritte. Die Ergebnisse können qualitativ nicht geprüft werden.
Durch die notwendige verteilte Aufbereitung der Daten kommt es an einzelnen Stellen oft zu lückenhafter Dokumentation oder nicht nachvollziehbaren manuellen Aufbereitungsschritten. Das erschwert die Rechtfertigung der Ergebnisse gegenüber externen Kontrollinstanzen. Solche Probleme können mit der Einführung spezieller Datenstrukturen und entsprechender Verarbeitungsmethoden adressiert werden. Die Aufbereitungsprozesse werden transparenter, und die Wartbarkeit steigt und damit kann auch die Qualität der Ergebnisse verbessert werden.
- Das Erfüllen von neuen Anforderungen ist sehr aufwendig, oder oft ressourcenbedingt nicht möglich.
Auch im Bereich der statistischen Datenproduktion können Datenaufbereitungsprozesse automatisiert werden. Die Mitarbeiter können den Arbeitsschwerpunkt verlagern: weg von repetitiven Routinearbeiten, die meist aus Berechnungen in Spreadsheets bestehen, hin zur Steuerung und Kontrolle der (automatisierten) Berechnungsprozesse. Es bleibt mehr Zeit für die Verarbeitung von Ad-Hoc Anfragen oder die dauerhafte Integration von zusätzlichen Standardprozessen
Für folgende Verbesserungen rund um die Datenqualität und –transparenz erarbeiten wir ein harmonisiertes Konzept:
- Zentrale Datenhaltung, Bearbeitung von Tabellen im Browser oder mit MS Excel
- Versionierung sämtlicher Datenbestände – und damit die Nachvollziehbarkeit von Änderungen
- Datenänderungen in dokumentierten Changesets – verringert die Fehleranfälligkeit.
- Flexible modulare Verarbeitungsprozesse – neue Anforderungen an Datenaufbereitungsprozesse können zielorientiert umgesetzt werden.
- Einsatz von regelbasierten Klassifikationssystemen – ermöglicht das Aufbereiten großer Datenmengen mithilfe eines überschaubaren Regel-Sets.
Auf Basis von PARADIGMA entwickelter Frameworks bieten wir:
- Analyse der Datenbestände & Prozesse und Entwurf eines Gesamtkonzepts
- Anpassungen und Applikationsentwicklung abgestimmt auf die Kundenbedürfnisse
- Schemadesign und kontinuierliche Integration, sowie Implementierung von Schnittstellen zu weiteren Systemen
- Umsetzung von Auswertungen & Analysen
- Informationsvorsprung durch rasche Auswertmöglichkeit der Daten
- Durch zentrale Datenhaltung erhalten Sie Kontrolle über die Bestände, Sicherung und Verfügbarkeit.
- Eine transparente Datenaufbereitung für raschen Informationsfluss mittels Dokumentation, Versionierung und nachvollziehbare Prozesse
- Eine erhöhte Reaktionsfähigkeit auf neue Auswertungsanforderungen
- Skalierbare Performance der Verarbeitungsprozesse
PARADIGMA konnte über einen längeren Zeitraum die nötigen Branchenkenntnisse aneignen, um effiziente Lösungen für typische Probleme anbieten zu können. Die lange Zusammenarbeit mit Statistik Austria hat es uns ermöglicht, die passenden Frameworks zu entwickeln.
Wir arbeiten mit der Erkenntnis, dass Daten und Prozesse in jeder Situation anders zu bewerten sind. Jeder Auftrag wird individuell betrachtet. Vorhandene Analogien werden genutzt und Lösungen auf die speziellen Bedürfnisse abgestimmt und erarbeitet.
Die PARADIGMA pflegt mit der Statistik Austria seit mehr als fünf Jahren intensive Geschäftsbeziehungen, berät das Management in Entwicklung und Implementierung der IT Strategien konform zur Mission und Strategie der Organisation.
Unter anderem entwickelte die PARADIGMA die Architektur und Software von IT Applikationen für STATISTIK AUSTRIA.
|
|
