#Pulsar ի հետաքրքիր կիրառում որպես #Kafka ալտերնատիվ
https://streamnative.io/blog/tech/2020-04-21-from-apache-kafka-to-apache-pulsar/
https://streamnative.io/blog/tech/2020-04-21-from-apache-kafka-to-apache-pulsar/
StreamNative
Forwarded from DevBrain
Монументальный труд про построение бэкэнда на Python от Яндекса: https://habr.com/ru/company/yandex/blog/499534/
Хабр
Практическое руководство по разработке бэкенд-сервиса на Python
Привет, меня зовут Александр Васин, я бэкенд-разработчик в Едадиле. Идея этого материала началась с того, что я хотел разобрать вступительное задание ( Я.Диск ) в Школу бэкенд-разработки Яндекса. Я...
Մի քիչ հին պրեզենտացիա է ,բայց շատ հետաքրքիր կիրառում է #Spark օնլայն #ML համար։
https://youtu.be/wyfTjd9z1sY
https://youtu.be/wyfTjd9z1sY
YouTube
Prediction as a Service (Josef Habdank)
Data Science with SparkML on DataBricks is a perfect platform for application of Ensemble Learning on massive a scale. This talk will take you through a success story of development of a Prediction-as-a-Service platform which trains and predicts trends on…
#DataOps #DataGovernance
https://towardsdatascience.com/the-rise-of-dataops-from-the-ashes-of-data-governance-da3e0c3ac2c4
https://towardsdatascience.com/the-rise-of-dataops-from-the-ashes-of-data-governance-da3e0c3ac2c4
Medium
The Rise of DataOps (from the ashes of Data Governance)
Legacy Data Governance is broken in the ML era. Let’s rebuild it as an engineering discipline to drive orders-of-magnitude improvements
#Presto #book
https://www.starburstdata.com/oreilly-presto-guide-download/?utm_campaign=O%27Reilly%20Presto%20Book&utm_source=oreilly&utm_medium=newsletter&mkt_tok=eyJpIjoiTkRjMlltSXpabVprTWpFdyIsInQiOiJFQWppSXRpeFwvMndRTHI3dEp4Q2ZvSStQV2pkY3RkamE4UXZhNDkzVGlYMEZhaTJENFRibjlRUXdOVUl2MUlTWjBUdDAyeUwxamFza044c2tBU2g1UWkrbVl5c0dHaXZEdTFuWU1PQmZCMVBLbFwvM1FuNnVOdG8xV2cwKzBDVmErIn0%3D
https://www.starburstdata.com/oreilly-presto-guide-download/?utm_campaign=O%27Reilly%20Presto%20Book&utm_source=oreilly&utm_medium=newsletter&mkt_tok=eyJpIjoiTkRjMlltSXpabVprTWpFdyIsInQiOiJFQWppSXRpeFwvMndRTHI3dEp4Q2ZvSStQV2pkY3RkamE4UXZhNDkzVGlYMEZhaTJENFRibjlRUXdOVUl2MUlTWjBUdDAyeUwxamFza044c2tBU2g1UWkrbVl5c0dHaXZEdTFuWU1PQmZCMVBLbFwvM1FuNnVOdG8xV2cwKzBDVmErIn0%3D
Starburst
O'Reilly Trino Guide | Starburst
Hot off the press and valued at $69.99. Get your free digital copy from Starburst. ...
Շատ հավես #podcast #Linux #Fedora և #Lenovo ֆանատների համար։ Լիքը լավ նորություններ
https://podcasts.google.com/?feed=aHR0cHM6Ly9mZWVkcy5maXJlc2lkZS5mbS9saW51eGZvcmV2ZXJ5b25lL3Jzcw&ep=14&episode=OGEwY2NlNTUtYjM3NS00NWNiLTkxNGMtM2I4OTkxZDA4N2Nk
https://podcasts.google.com/?feed=aHR0cHM6Ly9mZWVkcy5maXJlc2lkZS5mbS9saW51eGZvcmV2ZXJ5b25lL3Jzcw&ep=14&episode=OGEwY2NlNTUtYjM3NS00NWNiLTkxNGMtM2I4OTkxZDA4N2Nk
Google Podcasts
Linux For Everyone - Episode 34: The Fedora + Lenovo Interview
The Fedora and Lenovo partnership is about more than just selling Thinkpads with Linux pre-installed. In this special video interview, Fedora lead Matthew Miller and Lenovo's Senior Linux Software Engineer Mark Pearson join me to discuss a TON of details.…
Forwarded from DataEng
Появились доклады с прошедших двух митапов по Data Engineering, последний, к слову, проходил онлайн 🦠:
— Николай Марков – Какие дата инженеры бывают и чего от них все хотят?
— Евгений Ермаков – Что под капотом у Яндекс.Такси?
— Егор Матешук – Обзор Lambda- и Kappa-архитектур
— Денис Хуртин – Как устроена платформа управления данными в Яндекс.Маркет?
Приятного просмотра!
— Николай Марков – Какие дата инженеры бывают и чего от них все хотят?
— Евгений Ермаков – Что под капотом у Яндекс.Такси?
— Егор Матешук – Обзор Lambda- и Kappa-архитектур
— Денис Хуртин – Как устроена платформа управления данными в Яндекс.Маркет?
Приятного просмотра!
YouTube
DE or DIE #1. Николай Марков – Какие дата инженеры бывают и чего от них все хотят?
Материалы всех наших митапов доступны на GitHub: https://github.com/deordie/deordie-meetups
Наш чат в Telegram: https://news.1rj.ru/str/deordie_chat
Новые события сообщества DE or DIE: https://deordie.timepad.ru/events/
Автор доклада: Николай Марков, Principal Architect…
Наш чат в Telegram: https://news.1rj.ru/str/deordie_chat
Новые события сообщества DE or DIE: https://deordie.timepad.ru/events/
Автор доклада: Николай Марков, Principal Architect…
Այստեղ լիքը լավ կուրսեր կան որոնք սովորաբար 4 ժամ են տևում, նենց որ մեկ շաբաթվա ընթացքում լիքը բան կարող ենք հասցնել սովորել։
https://www.datacamp.com/freeweek
https://www.datacamp.com/freeweek
Datacamp
DataCamp Sale 2025 | DataCamp Promo & Discount
Get the latest DataCamp promos and discounts for 2025. Take advantage of our latest sales and discounts to learn data science today, no promo codes needed.
#podcast #Pulsar մասին, կարծում եմ բավականին հետաքրքիր նախագիծ է որը առավելություններ ունի #Kafka նկատմամբ
https://podcasts.google.com/?feed=aHR0cHM6Ly93d3cuZGF0YWVuZ2luZWVyaW5ncG9kY2FzdC5jb20vZmVlZC9tcDMv&ep=14&episode=cG9kbG92ZS0yMDIwLTA1LTEwdDIzOjQzOjU2KzAwOjAwLTdiYjg1YTA4NzE5ZGViNA
https://podcasts.google.com/?feed=aHR0cHM6Ly93d3cuZGF0YWVuZ2luZWVyaW5ncG9kY2FzdC5jb20vZmVlZC9tcDMv&ep=14&episode=cG9kbG92ZS0yMDIwLTA1LTEwdDIzOjQzOjU2KzAwOjAwLTdiYjg1YTA4NzE5ZGViNA
Պարզվում է սենց հարմար օնլայն նոթբուկներ կան #ML և #Python համար։
https://colab.research.google.com/notebooks/welcome.ipynb#scrollTo=OwuxHmxllTwN
https://colab.research.google.com/notebooks/welcome.ipynb#scrollTo=OwuxHmxllTwN
Google
Welcome To Colab
Run, share, and edit Python notebooks
#AWS #summit այս տարի օնլայն է, և ինչպես միշտ անվճար։
https://aws.amazon.com/events/summits/online/emea/
https://aws.amazon.com/events/summits/online/emea/
Ինչ լեզվով կուզենաք տեսնել գրառումները:
Which language do you prefer for posts?
Which language do you prefer for posts?
Final Results
17%
Հայերեն / Armenian
34%
Անգլերեն / English
49%
Երկուսն էլ / Both
Ահա մի կարճ տեսանյութ Ray- ի մասին, որը դառնում է տարածված ընտրություն բաշխված Python հավելվածների նախագծման համար:
Here is a short video about Ray which become a popular choice for building distributed python application.
https://www.youtube.com/watch?v=M37hMsBcBnY&feature=youtu.be
Here is a short video about Ray which become a popular choice for building distributed python application.
https://www.youtube.com/watch?v=M37hMsBcBnY&feature=youtu.be
YouTube
Ray Community and the Ray Ecosystem
Ben Lorica (@bigdata) prepared this companion video for the blog post, "Understanding the Ray Ecosystem and Community", https://anyscale.com/blog/understanding-the-ray-ecosystem-and-community/, by Ben and Ion Stoica.
Spark summit is free this year and online of course :)
Spark գագաթնաժողովն այս տարի անվճար է, և իհարկե առցանց:
https://twitter.com/SparkAISummit/status/1263669671376674817
Spark գագաթնաժողովն այս տարի անվճար է, և իհարկե առցանց:
https://twitter.com/SparkAISummit/status/1263669671376674817
Twitter
#SparkAISummit (June 22-26)
Extraordinary times call for extraordinary measures. That’s why we transformed this year’s #SparkAISummit into a fully virtual experience and opened the doors to welcome everyone, free of charge. Learn more about what we have in store for data teams: htt…
Which topics are most interesting for you?
Ո՞ր թեմաներն են առավել հետաքրքիր ձեր համար։
Ո՞ր թեմաներն են առավել հետաքրքիր ձեր համար։
Final Results
35%
Data Engineering
51%
Machine learning
30%
Cloud (AWS)
32%
Programming (Python,Scala)
14%
Privacy
24%
Linux
AWS release white paper about best practices for Analytics applications. #AWS թողարկել է հոդված #Analytics լուծումների կառուցման վերաբերյալ:
https://aws.amazon.com/blogs/big-data/build-an-aws-well-architected-environment-with-the-analytics-lens/
https://aws.amazon.com/blogs/big-data/build-an-aws-well-architected-environment-with-the-analytics-lens/
Amazon
Build an AWS Well-Architected environment with the Analytics Lens | Amazon Web Services
Building a modern data platform on AWS enables you to collect data of all types, store it in a central, secure repository, and analyze it with purpose-built tools. Yet you may be unsure of how to get started and the impact of certain design decisions. To…
Probably the best book book about Linux command line, I've read it with great pleasure. Ebook is available for free download.
Հավանաբար, լավագույն գիրքը Linux հրամանների մասին, ես այն մեծ հաճույքով եմ կարդացել: Ebook- ը հասանելի է անվճար ներբեռնելու համար:
https://itbook.store/books/9781593273897
Հավանաբար, լավագույն գիրքը Linux հրամանների մասին, ես այն մեծ հաճույքով եմ կարդացել: Ebook- ը հասանելի է անվճար ներբեռնելու համար:
https://itbook.store/books/9781593273897
ITBook.store
The Linux Command Line
Free download - Book The Linux Command Line : A Complete Introduction by William E. Shotts
I came across of an interesting data quality measurement library from AWS for large datasets.
Բավականին հետաքրքիր գրադարան եմ գտել #AWSից մեծ ծավալի տվյալների որակի չափման համար։
https://github.com/awslabs/deequ
Բավականին հետաքրքիր գրադարան եմ գտել #AWSից մեծ ծավալի տվյալների որակի չափման համար։
https://github.com/awslabs/deequ
GitHub
GitHub - awslabs/deequ: Deequ is a library built on top of Apache Spark for defining "unit tests for data", which measure data…
Deequ is a library built on top of Apache Spark for defining "unit tests for data", which measure data quality in large datasets. - awslabs/deequ
Here is a vocabulary for data engineers, it is a good one but not complete of course :)
Ահա #DataEngineer ների համար բառարան, լավն է,բայց իհարկե ոչ ամբողջական։
https://towardsdatascience.com/complete-data-engineers-vocabulary-87967e374fad
Ահա #DataEngineer ների համար բառարան, լավն է,բայց իհարկե ոչ ամբողջական։
https://towardsdatascience.com/complete-data-engineers-vocabulary-87967e374fad
Medium
Complete Data Engineer’s Vocabulary
Concepts that data engineers must know in 10 words or less