LTAP heißt die neue Architektur von Databricks, mit der operative Datenbanken und analytische Systeme nur noch eine gemeinsame Datenbasis benötigen sollen.
]]>LTAP heißt die neue Architektur von Databricks, mit der operative Datenbanken und analytische Systeme nur noch eine gemeinsame Datenbasis benötigen sollen.
]]>
Die Open-Source-Plattform Airbyte erscheint in Version 2.0 mit deutlich höherer Sync-Geschwindigkeit, Data Activation und einem hybriden Enterprise-Ansatz.
]]>
Der Rechtsexperte Tim W. Dornis spricht über die rechtlichen Grauzonen beim Training von KI-Modellen.
]]>
Der weltgrößte Fachverlag hat seine Copyright-Hinweise überarbeitet. Er will verhindern, dass die Schöpfungen der Autoren fürs KI- Training missbraucht werden.
]]>
Airbyte extrahiert Daten aus unterschiedlichen Quellen und APIs und führt sie in einer zentralen Plattform zusammen – darunter nun auch Vektordatenbanken.
]]>
Mit MS Fabric Elemente von Power BI, Azure Synapse und Azure Data Factory in einer nahtlos integrierten Cloud-Umgebung verwenden. (10% Rabatt bis 27.08.)
]]>
Daten aus diversen Quellen verarbeiten, mit SQL analysieren und das Ergebnis in diversen Formaten exportieren – das Buch "DuckDB in Action" zeigt, wie’s geht.
]]>
Das von James Serra bei O'Reilly neu erschienene Lehrbuch erläutert Schlüsselkonzepte und Datenarchitekturen von Big Data.
]]>
Mit Delta Lake 3.0 führt Databricks UniForm ein. Das Universalformat erweitert den Datenzugriff um die Formate Apache Iceberg und Apache Hudi.
]]>
Version 2.4 der Datenintegrationsplattform Apache Hop unterstützt DuckDB und bietet eine neue JSR-223-Skripttransformation.
]]>
SAP stellt mit Datasphere die nächste Generation seines Portfolios fürs Datenmanagement vor. Es soll Zugriff und Nutzung von Daten aller Systeme vereinfachen.
]]>
Der Call for Proposals zur Konferenz für Data Scientists, Data Engineers und Data Teams ist eröffnet. Die data2day findet 2023 wieder in Karlsruhe statt.
]]>
Mit Databricks Workflows lassen sich Datentransformationsprojekte organisieren und Entwickler erhalten über VS Code direkten Zugriff auf Databricks-Cluster.
]]>
Für den Business Analytics Day 2023 suchen die Organisatoren im Rahmen des Call for Presentations noch bis zum 15. März Beiträge zu BI und Data Mining.
]]>
Am Wochenende treffen sich in Brüssel wieder tausende Open-Source-Enthusiasten zur jährlichen FOSDEM. Die Themen KI und Machine Learning nehmen viel Platz ein.
]]>
Die Ukraine überwacht feindliche Truppenbewegungen mit Palantir. Die Datenanalysesoftware helfe etwa bei der Ausrichtung von Panzern und Artillerie.
]]>
Der US-Konzern wirft der Überwachungsfirma Voyager Labs vor, gefälschte Accounts genutzt zu haben, um öffentlich einsehbare Daten massenweise auszuspähen.
]]>
Produktionsreife Datenpipelines und umfassende Governance verspricht der vollständig verwaltete DataOps-Dienst von Y42, der auf Snowflake und BigQuery aufsetzt.
]]>
Die Version 1.0 des Open-Source-Projekts Apache Iceberg bietet nicht nur mehr Stabilität bei den APIs, sondern nun auch einen Standard-REST-API-Katalog.
]]>
Der neue Cloud-Service MySQL HeatWave Lakehouse von Oracle zielt auf das hochperformante Laden und Analysieren großer Datenmengen.
]]>
Für 14 Millionen Euro wollte das LKA NRW ein System für Big-Data-Analysen. Inzwischen kostet das lange nur testweise laufende Projekt fast 40 Millionen.
]]>
Mit umfassendem Know-how für Datenteams und einer Keynote zum Inszenieren von Kulturdaten in gemischten Realitäten startet die data2day 2022 am 20. September.
]]>
Noch bis 15. August können sich Interessierte ein vergünstigtes Ticket zur Konferenz rund um Know-how und Best Practices für Datenteams sichern.
]]>
Die auf SQL und weitere Sprachen ausgelegte Suchmaschine Photon steht nun für Lakehouse-Datensysteme auf den wichtigsten Cloud-Plattformen bereit.
]]>
Wer sich vor Ort zu Know-how und Best Practices für Datenteams austauschen will, kann noch bis 8. August ein vergünstigtes Ticket für die Konferenz buchen.
]]>
Das Konferenzprogramm für Data Scientists, Data Engineers und Data Teams runden ganztägige Workshops zu MLOps, ML-Projektkalkulation und Data-as-a-Product ab.
]]>
Das Konferenzprogramm für Data Scientists, Data Engineers und Data Teams steht fest. Bis zum 8. August können sich Interessierte mit Frühbucherrabatt anmelden.
]]>
Data Scientists, Data Engineers und Data Teams können sich ab sofort schon vor Programmveröffentlichung die vergünstigte Teilnahme an der data2day sichern.
]]>
Data Scientists, Data Engineers und Data Teams bleibt Zeit bis zum 9. Mai, um Vorschläge zu Workshops und Vorträgen einzureichen.
]]>
Das Time-Series-Modul der In-Memory-Datenbank Redis verspricht höhere Performance und größere Flexibilität bei der Analyse von Zeitreihendaten.
]]>
Der in die Databricks-Plattform integrierte Dienst AutoML soll Data Scientists helfen, ML-Modelle schneller produktionsreif zu entwickeln.
]]>
Das ETL-Framework soll Data Engineers das aufwendige Erstellen, Betreiben und Warten von Daten-Pipelines erleichtern.
]]>
Den No-Code Cloud Stack Accelerator der KI-Plattform Dataiku gibt es nun auf AWS. Per Browser lassen sich Daten für ML-Modelle aufbereiten und analysieren.
]]>
Die auf SQL zugeschnittene Datenanalyse- und BI-Plattform Dremio Cloud steht ab sofort als vollständig verwalteter Service kostenfrei bereit.
]]>
Data Scientists, Data Engineers und Data Teams mögen Vorschläge zu Workshops und Vorträgen einreichen. Die data2day findet 2022 wieder in Karlsruhe statt.
]]>
Der von der EU-Kommission geplante "Datenzugang by Design" für vernetzte Dinge stößt auf ein geteiltes Echo. Ziel ist ein "datenpolitischer Goldstandard".
]]>
Entwicklung und Herstellung von Medikamenten soll schnell und sicher erfolgen. Dazu will der Pharmakonzern Pfizer Amazon Web Services nutzen.
]]>
Eine Woche Zeit bleibt Interessierten noch, sich zur Data-Science-Konferenz am 8. Dezember anzumelden.
]]>
Der Frühbucherrabatt für die Data-Science-Konferenz wurde bis zum 24. November verlängert.
]]>
Für die Konferenz unter dem Motto "Von den Daten zum datengetriebenen Unternehmen" gibt es noch bis zum 17. November vergünstigte Tickets.
]]>
Die UI-Technik des deutschen Start-ups soll die Einstiegshürde zu Databricks' Lakehouse-Plattform senken und Data Science sowie ML auch ohne Code ermöglichen.
]]>
Das Programm der Data-Science-Konferenz steht fest. Ab sofort können sich Interessierte bis zum 17. November mit Frühbucherrabatt registrieren.
]]>
Der Anbieter hinter der Data-Lakehouse-Architektur sichert sich außerdem eine weitere Finanzspritze in Höhe von 1,6 Milliarden US-Dollar.
]]>
Mithilfe selbstlernender Algorithmen können Unternehmen strukturierte Datenmengen effizient verarbeiten. Dabei haben sich zwei Verfahren in der Praxis bewährt.
]]>
Googles Data Validation Tool ist Open Source und kompatibel mit BigQuery, Cloud SQL, MySQL, Oracle, Teradata sowie weiteren Datenbanken und Dateisystemen.
]]>
Noch bis 2. August können sich Fachleute mit Vorträgen und Workshops zu Themen rund um Big Data, Data Science sowie maschinelles Lernen bewerben.
]]>
Die Polizei in Malaysia hebt mehrere Krypto-Mining-Farmen aus. Sie haben illegal das Stromnetz angezapft. Mit einer Walze zerstört die Polizei über 1000 Geräte.
]]>
Der Output einer Maschine ist urheberrechtlich nicht schutzfähig – er ist gemeinfrei. Das ist für den Zugang zu Wissen und Kultur wichtig, erklärt Julia Reda.
]]>
Mit einer neuen Datenarchitektur und Denkweise soll das Data-Mesh-Paradigma den Weg ebnen, unternehmerischen Mehrwert zu generieren.
]]>
Ab sofort können sich Fachleute mit Vorträgen und Workshops zu Tools, Methoden und Erfahrungen rund um Big Data, Data Science und maschinelles Lernen bewerben.
]]>
Data Engineers, Data Scientists und Product Owner sollen mit Databricks Machine Learning gemeinsam an ML-Projekten arbeiten können.
]]>
Das neue Open-Source-Projekt soll als offenes Protokoll den Datenaustausch und die unternehmensübergreifende Zusammenarbeit eröffnen – sogar in Echtzeit.
]]>
Bei einer Series-G-Finanzierungsrunde konnte sich das Unternehmen hinter der kommerziellen Redis-Enterprise-Datenbank weitere 110 Millionen US-Dollar sichern.
]]>
Power BI erhält neue Security-Features. Mit ihnen will Microsoft die Datensicherheit erhöhen und Unternehmen mehr Governance-Funktionen an die Hand geben.
]]>
Anwender können die Lakehouse-Plattform künftig erstmals in einer vollständig containerisierten Cloud-Umgebung nutzen.
]]>
Mit SQL Analytics komplettiert das Unternehmen seine Lakehouse-Architektur, die die Leistung von Data Warehouses mit dem Tempo von Data Lakes kombiniert.
]]>
Google veröffentlicht mehrere neue Funktionen für Sheets, mit denen sich unter anderem BigQuery-Daten direkt in der Tabellenkalkulation auswerten lassen.
]]>
Die Delta Engine verspricht Anwendern schnellere Abfragen ihrer Data Lakes. Für deren komfortable Analyse und Visualisierung dient Redash.
]]>
Data Warehouses in der Cloud werden immer beliebter. Jetzt bekommen Amazon und Google Konkurrenz von mehreren Seiten. Sieben Cloud Data Warehouses im Vergleich.
]]>
Mit Apache Samza lassen sich komplexe Daten-Pipelines aufbauen. Data-Mining-Tasks innerhalb der Verarbeitungskette fördern nebenbei manche Entdeckung zutage.
]]>
MariaDB bringt unter dem Namen SkySQL eine cloudgestützte Datenbank heraus, die gleichzeitig Transaktionen und analytische Anfragen abarbeiten soll.
]]>
Autonomes Fahren ist keine Zukunftsmusik mehr. Die Entwicklung selbstfahrender Autos baut auf die Analyse vieler Daten, Computer Vision und maschinelles Lernen.
]]>
Die meisten Paare sind sich hinsichtlich Alter und Attraktivität ähnlich – wie eine Analyse von Dating-Daten zeigt, hätten es viele offenbar lieber anders.
]]>
Partner-Suche im Internet eröffnet ungekannte Möglichkeiten für die Analyse von Daten. Mit einfachen Tricks kann man die Chance auf Kontakt zu attraktiveren Kandidaten erhöhen.
]]>
Zum neunten Mal findet am 15. März 2018 der von den Hochschulen Offenburg und Karlsruhe sowie dem Institute for Computers in Education (ICe) organisierte Business Analytics Day statt. Austragungsort ist das Steinbeis-Haus auf dem Campus der HS Karlsruhe.
]]>
Informationen über geschichtlich signifikante Entwicklungen stecken oft in staatlichen Archiven, ohne dass sie Historiker leicht auffinden könnten. Statistiker haben neue Modelle entwickelt, die hier helfen sollen.
]]>
Taiwanische Forscher haben ein Verfahren entwickelt, mit dem sich aus Tweets Rückschlüsse auf eine bipolare Störung ziehen lassen.
]]>
Mit Version 5.3 bereitet Pivotal sein Big-Data-Warehouse für den Einsatz von Container-Technologie vor. Query Interfaces für SQL, Python oder R sollen innerhalb der Plattform containerisiert werden.
]]>
Text- und Data-Mining soll künftig als urheberrechtlich relevante Handlung gelten. Wie beim Kopieren soll es ohne Zustimmung der Rechteinhaber oder Urheber verboten werden. Gegen diesen Plan laufen nun IT-Unternehmen und Forschungseinrichtungen Sturm.
]]>
Zum ersten Mal überreichen alle 18 deutschen Datenschutzbehörden dem frisch gewählten Bundestag einen Katalog mit handlungsorientierten Grundforderungen. Darin fordern sie eine Korrektur der jüngsten Gesetzgebung und ein Bekenntnis zu starkem Datenschutz.
]]>
Der russische Ministerpräsident Dmitri Medwedew betonte auf einem Innovationsforum, es sei problematisch, wenn kritische Infrastrukturen über fremde Plattformen kontrolliert würden. Vordenker kündigten den "perfekten Kapitalismus" an.
]]>
Lehrer und Forscher dürfen künftig 15 Prozent eines Werks kopieren oder in elektronische Semesterapparate einstellen. Auf einen entsprechenden Entwurf hat sich die Koalition jetzt verständigt. Die Regeln gelten aber zunächst nur bis 2023.
]]>
Man ist, was man isst? Diese Aussage haben iranische Forscher jetzt anhand einer großen Rezepte-Sammlung und einer aufwendigen Analyse von Daten aus verschiedenen Ländern überprüft.
]]>
Forscher aus dem Iran haben tausende von Rezepten analysiert, um Zusammenhänge zwischen typischen Zutaten und Gesundheitsdaten zu finden. Gerichte mit vielen Kohlenhydraten kommen dabei nicht gut weg.
]]>
Die Maker-Bewegung drohe kommerzialisiert und von ihrem Do-it-yourself-Ethos entfremdet zu werden, warnen Forscher. Sie wehren sich gegen die Logik, dass jeder mit 3D-Druck ein Geschäft machen und ein Startup gründen müsse.
]]>
Apache Kylin ist eine OLAP-Engine, die die in der Business Intelligence seit vielen Jahren etablierten OLAP-Cubes mit Unterstützung der Hadoop-Plattform in die Big-Data-Welt übertragen will.
]]>
Acht Monate nachdem Pivotal angekündigt hatte, die Quellen seiner Big-Data-Suite nach und nach offenzulegen, veröffentlichte das Unternehmen das Data Warehouse Greenplum unter der Apache-2-Lizenz.
]]>
Die Lufthansa verlangt seit Anfang des Monats eine Extra-Gebühr von 16 Euro für eine Flugbuchung, die nicht auf dem eigenen Portal erfolgt. Kunden und Partner protestieren scharf, aber in dem Streit geht es gar nicht nur ums Geld, sondern um Daten.
]]>Viele Unternehmen sammeln heute Daten, ohne wirklich zu wissen wofür. Data Mining ist eine der Disziplinen, die sich Datenmengen zunutze macht und hilft, Potenziale freizulegen.
]]>
Lebt es sich in einem Ballungsraum gesünder oder auf dem Land? Belgische Forscher nutzen Methoden aus der Data Science, um Gesundheitssysteme zu vergleichen.
]]>SAPs In-Memory-Datenbank HANA ist seit ihrer Vorstellung 2010 immer wieder im Fokus der Berichterstattung. Durch die Verlagerung der Daten von der Festplatte in den Hauptspeicher verspricht sie einen enormen Performance-Sprung. Diesem Anspruch soll anhand einer Process-Mining-Anwendung nachgegangen werden.
]]>
Kinoproduktionen können eine kostspielige Angelegenheit sein. US-Forscher haben jetzt untersucht, ob sich ihr kommerzieller Erfolg voraussagen lässt – mit teils überraschenden Ergebnissen.
]]>
Das Data-Warehouse-System für Apache Hadoop bekommt mit dem Update Neuerungen, die die Zusammenarbeit mit der Datenbankschnittstelle der Java-Plattform verbessern und den Einsatz von JSON-Dateien ermöglichen.
]]>Ein Dienst zur automatischen Übertragung von SPSS-Syntax in R-Code soll die manuelle Übersetzung komplexer SPSS-Skripte in Zukunft überflüssig machen.
]]>Einbrecher gehen oft nach dem gleichen Muster vor. Das will sich die Polizei zunutze machen: Ein Computerprogramm soll den Beamten dabei helfen. Von Mitte Oktober an wird die Software in München und im Großraum Nürnberg getestet.
]]>Die umstrittenen Experimente, die das Social Network durchführt, erfolgen mit Unterstützung bekannter US-Unis. Das ist nicht nur ethisch ein Problem, sagen Kritiker.
]]>
Die Data-Mining-Experimente von Facebook erfolgen ohne explizite Zustimmung der Nutzer. Inzwischen beteiligen sich auch Universitäten daran - und verletzen so die Grundregeln, die sie bei staatlich geförderter Forschung einhalten.
]]>Über 3000 Anwender wurden gefragt, welche Datamining- und Big-Data-Tools sie in den letzten zwölf Monaten in konkreten Projekten eingesetzt haben. Die Daten zeigen, dass die meisten Nutzer mehrere Werkzeuge verwenden.
]]>Forscher haben untersucht, wie sich Verschwörungstheorien in sozialen Netzwerken wie Facebook verbreiten.
]]>Für die Analyse großer Datenmengen bringt das spalten- gegenüber dem zeilenorientierten Speichern Geschwindigkeits- und Platzgewinne. Die von Citusdata entwickelte Erweiterung steht unter der Apache-Lizenz.
]]>Eine auf dem Mobile World Congress gezeigte Software ermöglicht es Mobilfunkunternehmen, ihren Kunden beim Surfen maßgeschneiderte Werbung zu präsentieren.
]]>Seine Serie an vorkonfigurierten Converged Systems erweitert HP um drei Varianten, die für Virtualisierung, Hosted Desktops und Big Data konzipiert sind.
]]>Die jetzt veröffentlichte Version 4.0 der flexibleren Urheberrechtslizenzen umfasst verwandte Schutzbestimmungen wie das Datenbank- und Leistungsschutzrecht und ist liberaler gegenüber versehentlichen Verstößen.
]]>Die meisten Anwender von Datenbank- und Data-Warehouse-Systemen möchten für alle Datenbestände vertraute Werkzeuge nutzen. Anbieter von Big-Data-Produkten rund um Hadoop setzen deshalb verstärkt auf verteilte SQL-Datenbanken, die den reinen Map-Reduce-Ansatz ergänzen.
]]>Microsoft konzentriert sich bei der nächsten Version seiner Datenbank ebenso wie Konkurrenten auf In-Memory-Technik und spaltenorientiertes Speichern. Zudem wird die Integration mit der hauseigenen Cloud verbessert.
]]>Forscher bei IBM haben mit anonymisierten Mobilfunkdaten ein besseres Busnetz für die größte Stadt der Elfenbeinküste entwickelt.
]]>
Forscher bei IBM haben mit anonymisierten Mobilfunkdaten ein besseres Busnetz für die größte Stadt der Elfenbeinküste entwickelt.
]]>Eine neue Untersuchung zeigt, dass die Analyse der Google-Nutzung dabei helfen kann, die Richtung der Wall Street zu bestimmen.
]]>
Eine neue Untersuchung zeigt, dass die Analyse von Suchmaschinendaten helfen kann, die Richtung von Bond- und Aktienmärkten vorherzusagen.
]]>Datensammeln allein nutzt nichts, man muss das Gesammelte auch auswerten können. Die Sprache R bietet hierzu zahlreiche analytische und statistische Möglichkeiten. Wie sich Modelle bilden und für Prognosen nutzen lassen, zeigt dieser Artikel.
]]>