Big Data Blog

3

.

12

.

2019

Neu

Building the ultimate map for e-cars

Why do we need the complete map with charging stations?

In 2010, the German government set a target of increasing the number of e-cars to 1 million by 2020 and making Germany a pacesetter in the field of e-mobility. But they did not ...

25

.

6

.

2019

Neu

Easily process big piles of IoT data with Akka Streams

An introduction to reactive world from a noob

Akka Streams provides very useful tools even for a developer like me, who is relatively new to development of systems requiring high throughput and resilience

9

.

4

.

2019

Neu

Deep Dive into Spline

Das Data Lineage Tracking- und Visualisierungstool für Apache Spark

In diesem Blogpost sehen wir uns näher an wie Spline die Data Lineage für deine Spark Jobs dokumentiert. Wir starten mit einer kleinen Einführung zur Data Lineage im Allgemeinen und deren Bedeutung für Apache Spark. Anschließend gehen wir im Detail darauf ein wie sich Spline die Data Lineage aus Spark Jobs konstruiert, archiviert und visualisiert.

21

.

3

.

2019

Neu

Natural Language Processing mit Python (Teil 2)

Vorverarbeitung von Texten mit spaCy

In diesem zweiten Teil unserer Blogserie zu NLP zeigen wir typische Vorverarbeitungsschritte für unstrukturierte Textdaten wie Tokenisierung, Lemmatisierung, Normalisierung, etc. mit Hilfe von spaCy.

15

.

1

.

2019

Neu

Natural Language Processing mit Python (Teil 1)

Web Scraping mit Scrapy

In unserer neuen Blogserie geben wir Dir eine Einführung in das Thema Natural Language Processing, also der computergestützten Verarbeitung natürlicher Sprache. Dazu erklären wir in diesem ersten Post zunächst das Thema Web scraping zur Beschaffung von Daten. In den darauffolgenden Posts beschreiben wir dann notwendige Schritte der Datenaufbereitung sowie konkrete Use Cases wie z.B. die automatisierte Klassifikation von Emails.

13

.

12

.

2016

Neu

My 8 Amazon Web Services Re:invent 2016 takeaways

European data and cloud nerd's view on AWS Re:invent

AWS Re:invent as seen by MD of comSysto, the oldest european AWS partner with Big Data Competency.

8

.

12

.

2015

Neu

Spark Summit Europe Amsterdam

At the end of October 2015 the first European Spark Summit took place at the Beurs van Berlage center in Amsterdam. The conference was the third of its kind this year dedicated to Apache Spark. 

23

.

11

.

2015

Neu

Hortonworks: Neuer Partner für die Big Data Community Alliance

Hortonworks ist am 02.11.15 der Big Data Community Alliance beigetreten. Wir freuen uns einen weiteren neuen Partner in der Big Data Community Alliance begrüßen zu dürfen und auf die enge Zusammenarbeit.

2

.

11

.

2015

Neu

Machine Learning with Spark

Kaggle’s Driver Telematics Competition

Do you want to learn how to apply high-performance distributed computing to real-world machine learning problems? Then this article on how we used Apache Spark to participate in an exciting Kaggle competition might be of interest.

15

.

9

.

2015

Neu

Herzlich Willkommen Bigstep

Bigstep in der Big Data Community Alliance!

Bigstep ist am 01.September 2015 der Big Data Community Alliance (BDCA) beigetreten. Wir freuen uns Bigstep als unseren neuen Partner begrüßen zu dürfen und freuen uns sehr auf die enge Zusammenarbeit!

6

.

8

.

2015

Neu

Combining Logstash and Graylog for Log Management

When working in a classic IT infrastructure you often face the problem that developers only have access to test or development environments, but not to production. In order to fix bugs or to have a glance at the system running in production, log file access is needed.

17

.

2

.

2015

Neu

Big Data Community Alliance Kick Off Meetup

Die Big Data Community Alliance ist ein Verbund von Unternehmen, die einen grundlegenden Wandel im Umgang mit Daten in Deutschland mitgestalten möchten. Nutzen Sie die erste Gelegenheit zum Austausch mit Gleichgesinnten, Alliance-Partnern und der Community beim Kick Off am 3. März!

16

.

2

.

2015

Neu

Big Data Anwendungsfälle in Deutschland

Live Webinar Session

Am 19.02.2015, wird Tomislav Zorc, einer der comSysto Geschäftsführer, die im Rahmen der Projekte oder Workshops identifizierten Big Data Anwendungsfälle in Deutschland vorstellen. Dies erfolgt während einer Live Webinar Session, zu welcher wir Sie herzlich einladen!

27

.

1

.

2015

Neu

Introduction to comSysto´s cS ONE Conference

We were planning this amazing event for a couple month. On December 4th, 2014 it was finally time to start with the cS One Conference. This event was the first ever internal conference for comSysto, therefore everyone was enthusiastic and very excited about the outcome.

5

.

1

.

2015

Neu

Teamgeist on Android Wear

Die ganze IT Welt spricht derzeit von Wearables. Also wollte ich mir in einem Lab die Android Wear API genauer anschauen. Schnell war auch schon der erste Anwendungsfall gefunden. In unserer Teamgeist App gibt es seit kurzem die Möglichkeit Kudos zu verteilen.

9

.

12

.

2014

Neu

A first timer’s experience at Strata Europe

I am totally overwhelmed by the impressions I got as a first timer at a Strata Europe conference, which was this year from 19 November to 21 November in Barcelona. The seven(!) different tracks included talks of high quality covering topics from a theoretical standpoint as well as an architectural and tooling view.

14

.

7

.

2014

Neu

Processing and analysing sensor data – Part II

A DIY approach

In a recent Lab, we set up sensors in our office to collect our own machine-generated data (see this blog post). For the follow-up lab, our team split up into three groups. 

5

.

6

.

2014

Neu

My experience at Berlin Buzzwords 2014

Search, Scale, Store

Last week was the first time that I participated in the conference Berlin Buzzwords. Even though I read that the conference is all about store, scale and search I wasn’t quite sure what to expect, except for lots of information about Elasticsearch (the Gold partner of the conference).

16

.

5

.

2014

Neu

Processing and analysing sensor data

A DIY approach

Motivated by a current customer project (and the interesting nature of Big Data projects from industry in general), we decided to get our hands on sensor data. We wanted to learn how to handle, store and analyze it and what specific challenges sensor data presents. 

6

.

5

.

2014

Neu

Cyclop – a web based editor for Cassandra Query Language

Cassandra is one of the most popular open source NoSQL databases, but it’s only a few years old, and therefore tools support is still limited, especially when it comes to free open source software.

20

.

3

.

2014

Neu

Does Datameer support a full Big Data analysis process?

Over the last days I had the chance to test Datameer Analytics Solution (DAS). DAS is a platform for Hadoop which includes data source integration, an analytics engine and visualisation functionality. datameer_lifecycleThis promise of a fully integrated Big Data analysis process motivated me to test the product.