#dataengineering
Я обновил архитектуру текущего решения. Тут есть и Streaming (Kinesis Firehose), и Big Data на базе Elastic Map Reduce и Spark, и NoSQL на базе DynamoDB, и Data Lake на базе Redshift Spectrum и Glue. Каждое решение дополняет друг друга и справляется со своей задачей отлично. В качестве главного ETL - Matillion, BI - Tableau.
Я подготил этот слайд для конференции, Enterprise Data World 2019, которая пройдет в Boston уже через 2 недели, где я буду рассказывать про это решение.
Все супер, только лететь придется за свой счет. Зато, бесплатно попаду на конференцию, а так бы цена 3K+$. В прошлом году, я выступал на EDW18 в San Diego, было там семьей и гуляли по городу, не посетил ни одной презентации. В этом году, один лечу и послушаю все и вся:) И конечно посещу MIT и Harward. Так же там есть Amazon Robotics и Amazon Alexa команды.
Я обновил архитектуру текущего решения. Тут есть и Streaming (Kinesis Firehose), и Big Data на базе Elastic Map Reduce и Spark, и NoSQL на базе DynamoDB, и Data Lake на базе Redshift Spectrum и Glue. Каждое решение дополняет друг друга и справляется со своей задачей отлично. В качестве главного ETL - Matillion, BI - Tableau.
Я подготил этот слайд для конференции, Enterprise Data World 2019, которая пройдет в Boston уже через 2 недели, где я буду рассказывать про это решение.
Все супер, только лететь придется за свой счет. Зато, бесплатно попаду на конференцию, а так бы цена 3K+$. В прошлом году, я выступал на EDW18 в San Diego, было там семьей и гуляли по городу, не посетил ни одной презентации. В этом году, один лечу и послушаю все и вся:) И конечно посещу MIT и Harward. Так же там есть Amazon Robotics и Amazon Alexa команды.
edw2019.dataversity.net
Enterprise Data World 2019 | Boston
Data and Information Technology Education Conference
❤🔥1
Супер новости от Google Cloud Platform - Big Query Sandbox, то есть вы можете использовать его для своих целей, лимит 10 Gb, и кредитная карта не нужна https://cloud.google.com/blog/products/data-analytics/query-without-a-credit-card-introducing-bigquery-sandbox
Google Cloud Blog
Query without a credit card: introducing BigQuery sandbox | Google Cloud Blog
With BigQuery sandbox, you can try out queries for free, to test performance or to try Standard SQL before you migrate your data warehouse.
Моя презентация для Victoria Tableau User Group https://www.slideshare.net/dimoobraznii/victoria-tableau-user-group-getting-started-with-tableau-134770093
SlideShare
Victoria Tableau User Group - Getting started with Tableau
Victoria Tableau User Group - Getting started with Tableau - Download as a PDF or view online for free
Еще один блог пост по ML, пока последний на ближайшее время https://medium.com/@RockYourData/getting-started-with-aws-deep-learning-by-training-convolutional-neural-network-to-predict-images-7111d315211b
Medium
Getting started with AWS Deep Learning by training Convolutional Neural Network to predict Images on CIFAR10 dataset
Introduction
Если вам интересно, как живется на острове в Канаде, то вот профиль моей жены в instagram, там не только фотографии детей, но и много красивых фотографий окрестностей. https://www.instagram.com/sveta.anoshina/