Data Science | Machinelearning [ru] – Telegram
Data Science | Machinelearning [ru]
20.1K subscribers
631 photos
39 videos
29 files
3.52K links
Все о Data Science, машинном обучении и искусственном интеллекте: от базовой теории до cutting-edge исследований и LLM.

По вопросам рекламы или разработки - @g_abashkin

РКН: https://vk.cc/cJPGXD
Download Telegram
Средняя скорость 5G в США оказалась разочаровывающе низкой
Каждый новый стандарт связи обещает радикальное «ускорение интернета», да и заманчивые цифры в рекламе сетевого оборудования тоже впечатляют. Конечно, мы все давно привыкли, что это лишь какие-то «сказочные» гипотетические показатели, а на деле скорость скачивания контента из сети всегда гораздо ниже. Но иногда эта разница удивляет так, что в пору переспросить — «вы серьезно вообще?» Именно такая реакция возникает при взгляде на результаты тестирования сетей сотовой связи пятого поколения в Соединенных Штатах.
Байты (bytes и bytearray)
#python
Байтовые строки в Python - что это такое и с чем это едят? Байтовые строки очень похожи на обычные строки, но с некоторыми отличиями. Попробуем выяснить, с какими.
Что такое байты? Байт - минимальная единица хранения и обработки цифровой информации. Последовательность байт представляет собой какую-либо информацию (текст, картинку, мелодию...).
Мир больших данных

Большие данные — одна из таких замечательных идей. В современном социально активном мире данные растут огромными темпами, равными 2,5 квинтиллионам байтов в день, что примерно увеличится в ближайшие годы.
Бизнес-гиганты, такие как Facebook, Google, LinkedIn, Twitter и т. Д., Были среди первых нескольких ассоциаций, чья работа вращалась вокруг мира больших данных. Было бы неправильно сказать, что в целом это большая проблема «больших данных».
Github Students Pack - бонусы студентам-программистам Python

Программа Github Students Pack рассчитана на студентов, которые не могут себе позволить использование дорогостоящих подписок на платные сервисы для разработки.
В этой статье собраны вкусности, которые очень сильно пригодятся студентам, создающим проекты на Python.
Ключевые слова
#GO
Ключевые слова или зарезервированные слова — это слова в языке, которые используются для некоторого внутреннего процесса или представляют собой некоторые заранее определенные действия. Поэтому эти слова не разрешается использовать в качестве идентификатора. Это приведет к ошибке времени компиляции.
Печать всех решений в N-QUEEN проблема
#алгоритм
N Queen — это проблема размещения N шахматных ферзей на N × N шахматной доске, чтобы две королевы не атаковали друг друга. Например, следующее является решением проблемы 4 Queen.

N Queen — это проблема размещения N шахматных ферзей на N × N шахматной доске, чтобы две королевы не атаковали друг друга. Например, ниже приведены два решения проблемы 4 Queen.
​​ИИ не даст отслеживать браузер по «отпечаткам»

Американские разработчики из университетов Айовы и Калифорнии, а также Mozilla Corporation представили основанную на машинном обучении программу, способную определить, отслеживается браузер по его «отпечаткам».

Традиционные куки — не единственный способ, позволяющий следить за поведением пользователя в сети. Многие сайты уже давно используют «фингерпринт» или «отпечаток» — уникальную информацию о конфигурации и настройках браузера, позволяющую идентифицировать и отслеживать пользователей, даже если куки у них отключены.

Разработанная тремя американскими авторами программа FP-Inspector позволяет с помощью технологии машинного обучения и комбинации методов статистического и динамического анализа распознать, пытается ли веб-сайт отслеживать браузер по его «отпечатку», и блокировать эти попытки. Причем программа способна определить даже те методы «фингерпринтинга», о которых ранее ничего не было известно.
С помощью своей программы разработчики выяснили, что «фингерпринтинг» используется на четверти из 10 тысяч и на 10% из 100 тысяч самых популярных веб-сайтов. В первую очередь такой метод слежки применяют новостные ресурсы и интернет-магазины, и значительно реже он встречается на почтовых сервисах и образовательных сайтах.
Как объясняют авторы 
программы, «фингерпринтинг» в основном распространен на сайтах, которые финансируются за счет рекламы, а на новостных ресурсах этот метод также используется для пропуска через пэйволл, поскольку позволяет не только отслеживать отдельных пользователей, но также отсекает ботов и попытки взлома.
​​Что нужно, чтобы правильно использовать и разрабатывать MS SQL БД? 

03 сентября ждем всех разработчиков СУБД и бэкендеров на вебинаре, где Павел Стрекалов расскажет какие инструменты и навыки помогут писать сложные запросы, грамотно проектировать и оптимизировать свои БД. 

📍Вы познакомитесь с программой онлайн-курса «MS SQL Server разработчик», узнаете, чем курс отличается от конкурентов, как организована практика и какими способами можно сэкономить на обучении. 

👉Используйте эту возможность, чтобы пообщаться с экспертом и узнать больше о работе с СУБД. Регистрируйтесь на вебинар, и мы напомним вам о трансляции: https://otus.pw/GO6I/
Модуль random
#python
Модуль random предоставляет функции для генерации случайных чисел, букв, случайного выбора элементов последовательности.
В России научили искусственный интеллект "видеть" сквозь стены

Специалисты из Симферополя представили в рамках форума "Сильные идеи для нового времени" проект машинного зрения, которое может распознавать объекты сквозь стены, дождь и туман, сообщает фонд Росконгресс.
Специалисты из Симферополя представили на трек "Новые идеи для бизнеса" проект машинного зрения, которое основано на принципах радиооптики с применением искусственных нейронных сетей. Эксперты посчитали идею перспективной, поскольку технология уже готова: в 2021 году ИИ (искусственный интеллект – ред.) фактически выходит на рынок, уже доступен предзаказ", - говорится в сообщении.
Перейти к принятию решений (если, если-еще, nested-если, если-еще-если)
#GO
Принятие решений в программировании аналогично принятию решений в реальной жизни. При принятии решения кусок кода выполняется, когда выполняется данное условие. Иногда они также называются операторами потока управления. Голанг использует управляющие операторы для управления потоком выполнения программы на основе определенных условий. Они используются для продвижения и выполнения потока выполнения в зависимости от изменений состояния программы.
Модуль shutil
#Python

Модуль shutil содержит набор функций высокого уровня для обработки файлов, групп файлов, и папок. В частности, доступные здесь функции позволяют копировать, перемещать и удалять файлы и папки. Часто используется вместе с модулем os.
​​В России начали тестировать поезда с искусственным интеллектом
АО "Российские железные дороги" начала тестирование первых российских поездов с искусственным интеллектом. Как сообщила ТАСС директор компании-разработчика Cognitive Pilot (дочернее предприятие Сбербанка и Cognitive Technologies) Ольга Ускова, в настоящее время данная технология нигде в мире не применяется.
По задумке авторов, ИИ должен помочь свести к минимуму число ЧП из-за человеческого фактора. "Мы уже сделали 10 опытных локомотивов с ИИ, они поступили на тестирование в РЖД. Сейчас проходит один из этапов испытаний для сертификации продукта. Если все получится, то безопасность на железных дорогах России сильно изменится, искусственный интеллект должен свести к минимуму число ЧП из-за человеческого фактора, он не даст человеку совершить ошибку", - сказала Ускова.
Локомотивы оснащены разработанным компанией комплексом Cognitive Rail Pilot, который позволяет при помощи компьютерного зрения обнаружить объекты на железной дороге - другие составы, стрелки, пути, людей, светофоры и т. д. Комплекс оценивает обстановку и выдает машинисту предупреждающие об опасности сигналы. А в случае отсутствия его реакции может принимать необходимые решения.
Получить разрешение на промышленное производство компания планирует осенью 2020 года. Технологией уже интересуются европейские транспортные компании, сообщила Ускова.
Kotlin- стандартный ввод/вывод
#Kotlin
В этой статье мы обсудим, как принимать ввод и как отображать вывод на экране в Kotlin. Стандартные операции ввода-вывода Kotlin выполняются для передачи последовательности байтов или потоков байтов из устройства ввода, такого как клавиатура, в основную память системы и из основной памяти в устройство вывода, такое как монитор.
В Java мы используем System.out.println(message) для печати вывода на экран, но в Kotlin println(message) используется для печати.
Модуль subprocess
#python
Модуль subprocess отвечает за выполнение следующих действий: порождение новых процессов, соединение c потоками стандартного ввода, стандартного вывода, стандартного вывода сообщений об ошибках и получение кодов возврата от этих процессов.
Рекомендуемым подходом к работе с подпроцессами является использование следующих вспомогательных функций для всех случаев, где они могут справиться. Для более сложных случаев может быть использован непосредственно интерфейс Popen.
Что такое Dark Data?
Большинство компаний собирают, обрабатывают и хранят большие объемы данных, которые могут помочь им улучшить свои товары и услуги в будущем. Есть новый телефон Samsung? Samsung, скорее всего, будет собирать ваши данные об использовании. У вас есть аккаунт в Facebook? Facebook собирает ваши данные о просмотре, списки друзей и т. Д. И это верно практически для всех компаний. После того, как эти данные собраны, тогда Data Analytics выходит на сцену!
Но есть большая часть собранных данных, которые нельзя проанализировать с помощью обычной аналитики данных. Эти данные известны как Темные Данные, которые обладают огромным количеством неиспользованного потенциала. Несмотря на то, что Dark Data может предоставить огромную информацию для компании, которая может привести к увеличению прибыли и росту бизнеса, в основном она хранится в архивах компании и не подвергается анализу. Это потому, что очень трудно собирать, идентифицировать и точно анализировать Dark Data.
Kotlin с надписью продолжить
#Kotlin
В этой статье мы узнаем, как использовать continue в Kotlin. При работе с циклом в программировании иногда желательно пропустить текущую итерацию цикла. В этом случае мы можем использовать оператор continue в программе. В основном, используется для повторения цикла для определенного условия. Он пропускает следующие операторы и продолжает следующую итерацию цикла.
Большой мир данных: большой, большой и самый большой

Коллекция больших и сложных наборов данных, которые трудно хранить и обрабатывать с использованием традиционных баз данных и инструментов обработки данных, рассматривается как большие данные. Большие данные собираются из традиционных и цифровых источников, которые при правильном уточнении могут использоваться для исследований и анализа. Со временем организации растут, и данные, полученные из этих организаций, также растут в геометрической прогрессии. Задача состоит в том, чтобы...
Модуль fractions
#python
Модуль fractions предоставляет поддержку рациональных чисел.
class fractions.Fraction(numerator=0, denominator=1)
class fractions.Fraction(other_fraction)
class fractions.Fraction(float)
class fractions.Fraction(decimal)
class fractions.Fraction(string)
Класс, представляющий собой рациональные числа. Экземпляр класса можно создать из пары чисел (числитель, знаменатель), из другого рационального числа, числа с плавающей точкой, числа типа decimal.Decimal, и из строки, представляющей собой число.
Переменные GO
#GO
Типичная программа использует различные значения, которые могут изменяться во время ее выполнения. Например , программа, которая выполняет некоторые операции над значениями, введенными пользователем. Значения, введенные одним пользователем, могут отличаться от значений, введенных другим пользователем. Следовательно, это делает необходимым использование переменных, поскольку другой пользователь не может использовать те же значения. Когда пользователь вводит новое значение, которое будет использоваться в процессе работы, он может временно сохранять в памяти произвольного доступа компьютера, и эти значения в этой части памяти меняются на протяжении всего выполнения, и, следовательно, появился другой термин для этого, который известен в качестве переменных . Таким образом, переменная является заполнителем информации, которая может быть изменена во время выполнения. А переменные позволяют извлекать и манипулировать хранимой информацией.
Введение в HADOOP
#Hadoop
Что такое Hadoop?
Hadoop — это программная среда с открытым исходным кодом для хранения большого количества данных и выполнения вычислений. Его фреймворк основан на Java-программировании с некоторым собственным кодом на языке C и сценариями оболочки.