Data Science | Machinelearning [ru] – Telegram
Data Science | Machinelearning [ru]
20.1K subscribers
631 photos
39 videos
29 files
3.52K links
Все о Data Science, машинном обучении и искусственном интеллекте: от базовой теории до cutting-edge исследований и LLM.

По вопросам рекламы или разработки - @g_abashkin

РКН: https://vk.cc/cJPGXD
Download Telegram
Печать всех решений в N-QUEEN проблема
#алгоритм
N Queen — это проблема размещения N шахматных ферзей на N × N шахматной доске, чтобы две королевы не атаковали друг друга. Например, следующее является решением проблемы 4 Queen.

N Queen — это проблема размещения N шахматных ферзей на N × N шахматной доске, чтобы две королевы не атаковали друг друга. Например, ниже приведены два решения проблемы 4 Queen.
​​ИИ не даст отслеживать браузер по «отпечаткам»

Американские разработчики из университетов Айовы и Калифорнии, а также Mozilla Corporation представили основанную на машинном обучении программу, способную определить, отслеживается браузер по его «отпечаткам».

Традиционные куки — не единственный способ, позволяющий следить за поведением пользователя в сети. Многие сайты уже давно используют «фингерпринт» или «отпечаток» — уникальную информацию о конфигурации и настройках браузера, позволяющую идентифицировать и отслеживать пользователей, даже если куки у них отключены.

Разработанная тремя американскими авторами программа FP-Inspector позволяет с помощью технологии машинного обучения и комбинации методов статистического и динамического анализа распознать, пытается ли веб-сайт отслеживать браузер по его «отпечатку», и блокировать эти попытки. Причем программа способна определить даже те методы «фингерпринтинга», о которых ранее ничего не было известно.
С помощью своей программы разработчики выяснили, что «фингерпринтинг» используется на четверти из 10 тысяч и на 10% из 100 тысяч самых популярных веб-сайтов. В первую очередь такой метод слежки применяют новостные ресурсы и интернет-магазины, и значительно реже он встречается на почтовых сервисах и образовательных сайтах.
Как объясняют авторы 
программы, «фингерпринтинг» в основном распространен на сайтах, которые финансируются за счет рекламы, а на новостных ресурсах этот метод также используется для пропуска через пэйволл, поскольку позволяет не только отслеживать отдельных пользователей, но также отсекает ботов и попытки взлома.
​​Что нужно, чтобы правильно использовать и разрабатывать MS SQL БД? 

03 сентября ждем всех разработчиков СУБД и бэкендеров на вебинаре, где Павел Стрекалов расскажет какие инструменты и навыки помогут писать сложные запросы, грамотно проектировать и оптимизировать свои БД. 

📍Вы познакомитесь с программой онлайн-курса «MS SQL Server разработчик», узнаете, чем курс отличается от конкурентов, как организована практика и какими способами можно сэкономить на обучении. 

👉Используйте эту возможность, чтобы пообщаться с экспертом и узнать больше о работе с СУБД. Регистрируйтесь на вебинар, и мы напомним вам о трансляции: https://otus.pw/GO6I/
Модуль random
#python
Модуль random предоставляет функции для генерации случайных чисел, букв, случайного выбора элементов последовательности.
В России научили искусственный интеллект "видеть" сквозь стены

Специалисты из Симферополя представили в рамках форума "Сильные идеи для нового времени" проект машинного зрения, которое может распознавать объекты сквозь стены, дождь и туман, сообщает фонд Росконгресс.
Специалисты из Симферополя представили на трек "Новые идеи для бизнеса" проект машинного зрения, которое основано на принципах радиооптики с применением искусственных нейронных сетей. Эксперты посчитали идею перспективной, поскольку технология уже готова: в 2021 году ИИ (искусственный интеллект – ред.) фактически выходит на рынок, уже доступен предзаказ", - говорится в сообщении.
Перейти к принятию решений (если, если-еще, nested-если, если-еще-если)
#GO
Принятие решений в программировании аналогично принятию решений в реальной жизни. При принятии решения кусок кода выполняется, когда выполняется данное условие. Иногда они также называются операторами потока управления. Голанг использует управляющие операторы для управления потоком выполнения программы на основе определенных условий. Они используются для продвижения и выполнения потока выполнения в зависимости от изменений состояния программы.
Модуль shutil
#Python

Модуль shutil содержит набор функций высокого уровня для обработки файлов, групп файлов, и папок. В частности, доступные здесь функции позволяют копировать, перемещать и удалять файлы и папки. Часто используется вместе с модулем os.
​​В России начали тестировать поезда с искусственным интеллектом
АО "Российские железные дороги" начала тестирование первых российских поездов с искусственным интеллектом. Как сообщила ТАСС директор компании-разработчика Cognitive Pilot (дочернее предприятие Сбербанка и Cognitive Technologies) Ольга Ускова, в настоящее время данная технология нигде в мире не применяется.
По задумке авторов, ИИ должен помочь свести к минимуму число ЧП из-за человеческого фактора. "Мы уже сделали 10 опытных локомотивов с ИИ, они поступили на тестирование в РЖД. Сейчас проходит один из этапов испытаний для сертификации продукта. Если все получится, то безопасность на железных дорогах России сильно изменится, искусственный интеллект должен свести к минимуму число ЧП из-за человеческого фактора, он не даст человеку совершить ошибку", - сказала Ускова.
Локомотивы оснащены разработанным компанией комплексом Cognitive Rail Pilot, который позволяет при помощи компьютерного зрения обнаружить объекты на железной дороге - другие составы, стрелки, пути, людей, светофоры и т. д. Комплекс оценивает обстановку и выдает машинисту предупреждающие об опасности сигналы. А в случае отсутствия его реакции может принимать необходимые решения.
Получить разрешение на промышленное производство компания планирует осенью 2020 года. Технологией уже интересуются европейские транспортные компании, сообщила Ускова.
Kotlin- стандартный ввод/вывод
#Kotlin
В этой статье мы обсудим, как принимать ввод и как отображать вывод на экране в Kotlin. Стандартные операции ввода-вывода Kotlin выполняются для передачи последовательности байтов или потоков байтов из устройства ввода, такого как клавиатура, в основную память системы и из основной памяти в устройство вывода, такое как монитор.
В Java мы используем System.out.println(message) для печати вывода на экран, но в Kotlin println(message) используется для печати.
Модуль subprocess
#python
Модуль subprocess отвечает за выполнение следующих действий: порождение новых процессов, соединение c потоками стандартного ввода, стандартного вывода, стандартного вывода сообщений об ошибках и получение кодов возврата от этих процессов.
Рекомендуемым подходом к работе с подпроцессами является использование следующих вспомогательных функций для всех случаев, где они могут справиться. Для более сложных случаев может быть использован непосредственно интерфейс Popen.
Что такое Dark Data?
Большинство компаний собирают, обрабатывают и хранят большие объемы данных, которые могут помочь им улучшить свои товары и услуги в будущем. Есть новый телефон Samsung? Samsung, скорее всего, будет собирать ваши данные об использовании. У вас есть аккаунт в Facebook? Facebook собирает ваши данные о просмотре, списки друзей и т. Д. И это верно практически для всех компаний. После того, как эти данные собраны, тогда Data Analytics выходит на сцену!
Но есть большая часть собранных данных, которые нельзя проанализировать с помощью обычной аналитики данных. Эти данные известны как Темные Данные, которые обладают огромным количеством неиспользованного потенциала. Несмотря на то, что Dark Data может предоставить огромную информацию для компании, которая может привести к увеличению прибыли и росту бизнеса, в основном она хранится в архивах компании и не подвергается анализу. Это потому, что очень трудно собирать, идентифицировать и точно анализировать Dark Data.
Kotlin с надписью продолжить
#Kotlin
В этой статье мы узнаем, как использовать continue в Kotlin. При работе с циклом в программировании иногда желательно пропустить текущую итерацию цикла. В этом случае мы можем использовать оператор continue в программе. В основном, используется для повторения цикла для определенного условия. Он пропускает следующие операторы и продолжает следующую итерацию цикла.
Большой мир данных: большой, большой и самый большой

Коллекция больших и сложных наборов данных, которые трудно хранить и обрабатывать с использованием традиционных баз данных и инструментов обработки данных, рассматривается как большие данные. Большие данные собираются из традиционных и цифровых источников, которые при правильном уточнении могут использоваться для исследований и анализа. Со временем организации растут, и данные, полученные из этих организаций, также растут в геометрической прогрессии. Задача состоит в том, чтобы...
Модуль fractions
#python
Модуль fractions предоставляет поддержку рациональных чисел.
class fractions.Fraction(numerator=0, denominator=1)
class fractions.Fraction(other_fraction)
class fractions.Fraction(float)
class fractions.Fraction(decimal)
class fractions.Fraction(string)
Класс, представляющий собой рациональные числа. Экземпляр класса можно создать из пары чисел (числитель, знаменатель), из другого рационального числа, числа с плавающей точкой, числа типа decimal.Decimal, и из строки, представляющей собой число.
Переменные GO
#GO
Типичная программа использует различные значения, которые могут изменяться во время ее выполнения. Например , программа, которая выполняет некоторые операции над значениями, введенными пользователем. Значения, введенные одним пользователем, могут отличаться от значений, введенных другим пользователем. Следовательно, это делает необходимым использование переменных, поскольку другой пользователь не может использовать те же значения. Когда пользователь вводит новое значение, которое будет использоваться в процессе работы, он может временно сохранять в памяти произвольного доступа компьютера, и эти значения в этой части памяти меняются на протяжении всего выполнения, и, следовательно, появился другой термин для этого, который известен в качестве переменных . Таким образом, переменная является заполнителем информации, которая может быть изменена во время выполнения. А переменные позволяют извлекать и манипулировать хранимой информацией.
Введение в HADOOP
#Hadoop
Что такое Hadoop?
Hadoop — это программная среда с открытым исходным кодом для хранения большого количества данных и выполнения вычислений. Его фреймворк основан на Java-программировании с некоторым собственным кодом на языке C и сценариями оболочки.
Добрый вечер ✌️
Хотите разбираться в технологиях и быть продвинутым?
@FastTecPR подготовила для вас интересные каналы на тему технологии.
Просвящайтесь⤵️

🔥 @EventsMoscow - это еженедельный дайджест событий из мира технологий, бизнеса и стартапов от комьюнити @StartupRussiaCo.
Все события отбираются вручную и проходят несколько фильтров критики, поэтому на выходе всегда получается только выжимка из самых полезных событий в индустрии.

🔥 @notboring_tech — Это авторский канал с лёгким и нескучным изложением, статьями и ссылками про новейшие технологии, нейросети, машинное обучение, ИИ, VR и многое другое.

🔥 @hata_hack - Канал про ИБ,доступно о многом - Статьи/Новости/Софт.

🔥 @topit_media - Тот самый канал, с которого начинают утро неравнодушные к ИТ и технологиям.
В нем нет бесконечной ленты новостей! Ежедневный утренний дайджест и самые важные новости в течении дня.

☝️Переходите по ссылкам,знакомьтесь с содержанием и подписывайтесь☝️
Hadoop-история или эволюция
#Hadoop

Hadoop — это платформа с открытым исходным кодом, контролируемая Apache Software Foundation, написанная на Java для хранения и обработки огромных наборов данных с кластером стандартного оборудования. Есть в основном две проблемы с большими данными. Первый — хранить такое огромное количество данных, а второй — обрабатывать эти сохраненные данные. Традиционного подхода, такого как RDBMS, недостаточно из-за неоднородности данных. Таким образом, Hadoop является решением проблемы больших данных, то есть хранения и обработки больших данных с некоторыми дополнительными возможностями. В основном Hadoop состоит из двух компонентов: распределенной файловой системы Hadoop (HDFS) и еще одного согласователя ресурсов (YARN) .
Kotlin операторы
#Kotlin

Операторы — это специальные символы, которые выполняют различные операции над операндами. Например, + и — это операторы, которые выполняют сложение и вычитание соответственно. Как и Java, Kotlin содержит различные виды операторов.
​​Модуль cmath
#python
Модуль cmath – предоставляет функции для работы с комплексными числами.
cmath.phase(x) - возвращает фазу комплексного числа (её ещё называют аргументом). Эквивалентно math.atan2(x.imag, x.real). Результат лежит в промежутке [-π, π].
Получить модуль комплексного числа можно с помощью встроенной функции abs().
cmath.polar(x) - преобразование к полярным координатам. Возвращает пару (r, phi).
cmath.rect(r, phi) - преобразование из полярных координат.
cmath.exp(x) - ex.
cmath.log(x[, base]) - логарифм x по основанию base. Если base не указан, возвращается натуральный логарифм.
cmath.log10(x) - десятичный логарифм.
cmath.sqrt(x) - квадратный корень из x.
cmath.acos(x) - арккосинус x.
cmath.asin(x) - арксинус x.
cmath.atan(x) - арктангенс x.
cmath.cos(x) - косинус x.
cmath.sin(x) - синус x.
cmath.tan(x) - тангенс x.
cmath.acosh(x) - гиперболический арккосинус x.
cmath.asinh(x) - гиперболический арксинус x.
cmath.atanh(x) - гиперболический арктангенс x.
cmath.cosh(x) - гиперболический косинус x.
cmath.sinh(x) - гиперболический синус x.
cmath.tanh(x) - гиперболический тангенс x.
cmath.isfinite(x) - True, если действительная и мнимая части конечны.
cmath.isinf(x) - True, если либо действительная, либо мнимая часть бесконечна.
cmath.isnan(x) - True, если либо действительная, либо мнимая часть NaN.
cmath.pi - π.
cmath.e - e.
Apache Hive
#Hadoop

Apache Hive— это хранилище данных и инструмент ETL, который обеспечивает SQL-подобный интерфейс между пользователем и распределенной файловой системой Hadoop (HDFS), которая интегрирует Hadoop. Он построен поверх Hadoop. Это программный проект, который обеспечивает запрос и анализ данных. Он облегчает чтение, запись и обработку широких наборов данных, которые хранятся в распределенном хранилище и запрашиваются с помощью синтаксиса Structure Query Language (SQL). Он не предназначен для рабочих нагрузок OLTP. Он часто используется для задач хранилищ данных, таких как инкапсуляция данных, специальные запросы и анализ огромных наборов данных. Он разработан для повышения масштабируемости, расширяемости, производительности, отказоустойчивости и слабой связи с входными форматами.