#python #langdetect #fasttext
Мне трудно поверить в это, но в 2023 у питоновского сообщества, похоже, нет нормальных оффлайновых детекторов языка.
Ну что это за хрень, из 4 либ, представленных в статье, только Гугл переводчик (онлайновый) понимает, что, блять, строка "Safe delivery" - это английский, а не датский и не суахили?
P.S.:
fastText справился! ) используйте его, не тратьте время на остальной мусор. Пример в комментах.
https://towardsdatascience.com/4-python-libraries-to-detect-english-and-non-english-language-c82ad3efd430
Мне трудно поверить в это, но в 2023 у питоновского сообщества, похоже, нет нормальных оффлайновых детекторов языка.
Ну что это за хрень, из 4 либ, представленных в статье, только Гугл переводчик (онлайновый) понимает, что, блять, строка "Safe delivery" - это английский, а не датский и не суахили?
P.S.:
fastText справился! ) используйте его, не тратьте время на остальной мусор. Пример в комментах.
https://towardsdatascience.com/4-python-libraries-to-detect-english-and-non-english-language-c82ad3efd430
Medium
4 Python libraries to detect English and Non-English language
We will discuss spacy-langdetect, Pycld2, TextBlob, and Googletrans for language detection.
🤯2
#python #langdetect #fasttext #googletranslate
Странно, я был уверен, что гугл переводчик это топ, там же большие языковые модели, нейросети, все такое. Но он походу в 10 раз больше ошибается, чем fasttext.
Странно, я был уверен, что гугл переводчик это топ, там же большие языковые модели, нейросети, все такое. Но он походу в 10 раз больше ошибается, чем fasttext.
💔2
#fastText
Так, я вообще в тупике. Стал внимательнее смотреть, что fastText считает не английской речью.
Так, я вообще в тупике. Стал внимательнее смотреть, что fastText считает не английской речью.
🤔1
#nlp #mlm #transformers
Друзья, а какая из публично доступных моделей сейчас считается SOTA для мультиязыкового masked language prediction? Bert-ы что-то не вдохновляют.
капец. похоже, ошибку нашёл в contextualSpellChecker.
для "Я ушл в магазин.", bert-base-multilingual-cased предлагает топовый ответ '##шел' с вероятностью 0.3896,
Либа думает, что решётка означает склейку токенов, и склеивает очищенный от решёток вариант с предыдущим токеном. Хотя, кажется, Берт имеет в виду вовсе не склейку с предыдущим токеном, а скорее склейку с текущим токеном, но выброшенными посл 2-мя символами. А, нет, это уже глюки. ## это просто признак субтокена.
Друзья, а какая из публично доступных моделей сейчас считается SOTA для мультиязыкового masked language prediction? Bert-ы что-то не вдохновляют.
капец. похоже, ошибку нашёл в contextualSpellChecker.
для "Я ушл в магазин.", bert-base-multilingual-cased предлагает топовый ответ '##шел' с вероятностью 0.3896,
Либа думает, что решётка означает склейку токенов, и склеивает очищенный от решёток вариант с предыдущим токеном. Хотя, кажется, Берт имеет в виду вовсе не склейку с предыдущим токеном, а скорее склейку с текущим токеном, но выброшенными посл 2-мя символами. А, нет, это уже глюки. ## это просто признак субтокена.
#shock #content
https://3dnews.ru/1086831/tesla-prodemonstrirovala-novie-sposobnosti-chelovekopodobnih-robotov-optimus
https://3dnews.ru/1086831/tesla-prodemonstrirovala-novie-sposobnosti-chelovekopodobnih-robotov-optimus
3DNews - Daily Digital Digest
Все самое интересное из мира IT-индустрии
Самые интересные и оперативные новости из мира высоких технологий. На нашем портале - все о компьютерном железе, гаджетах, ноутбуках и других цифровых устройствах. А также обзоры новых игр, достижения современной науки и самые любопытные онлайн-проекты.
#business #news #projects
Пока с облачным проектом неожиданный затык (ограничения по скрейпингу AWS), решил переключиться обратно на прогнозную модель для трейдинга. Собираю сегодня допинфо о параметрах биржевых сессий и ГО, и вернусь к блокам фичей.
Пока с облачным проектом неожиданный затык (ограничения по скрейпингу AWS), решил переключиться обратно на прогнозную модель для трейдинга. Собираю сегодня допинфо о параметрах биржевых сессий и ГО, и вернусь к блокам фичей.
Telegram
Aspiring Data Science
#trading #predictions #ml
По пункту 1, прогнозирование, решил работать поблочно.
Модели строить буду для следующих блоков признаков:
1) текущие факторы:
-активные заявки
-биржевые "стаканы" и их вариации
2) интервальные факторы
-поток заявок и сделок
…
По пункту 1, прогнозирование, решил работать поблочно.
Модели строить буду для следующих блоков признаков:
1) текущие факторы:
-активные заявки
-биржевые "стаканы" и их вариации
2) интервальные факторы
-поток заявок и сделок
…
🔥1
Forwarded from Техножрица 👩💻👩🏫👩🔧
В первый раз сегодня повзаимодействовала с банкоматом нового типа, в хипстерском стиле таким, с огромным экраном. Написано было у него на этом экране "заплатить через Сбербанк онлайн".
Ткнув туда, узнала, что можно действительно не вставлять в него карту, а просто через приложение два раза отсканировать QR-код, и банкомат даст денежек 😱
До сих пор не могу привыкнуть к этим новшествам всем...
Помню, у меня первая банковская карта только в 20 лет появилась. И ещё лет пять я с нее просто снимала кеш, и кешем за все платила, а саму карту никуда не тыкала, кроме банкомата. Только лет в 25 приучилась самой картой платить... а там уже мне беспроводную карту дали, которую не только тыкать, но и прикладывать можно.
Лет в 28 начала впервые пользоваться приложением банковским - и то потому что поехала в Лондон, и мне там дали карту банка, у которого не было банковских отделений, и все делалось через это приложение... только после этого поняла, зачем это все нужно, и на российские приложения также стала обращать внимание и устанавливать их себе. Теперь уже и вспомнить трудно, как это я так без приложений всем пользовалась.
Единственное, что вызывало у меня опасение — это оплата с помощью NFC-чипа в телефоне. Ничто в мире не бывает более беспомощным, безответственным и порочным, чем NFC-чип. Но я знаю, что рано или поздно перейду и на эту дрянь.😄
P.S. Капец я мамонт, конечно))
Ткнув туда, узнала, что можно действительно не вставлять в него карту, а просто через приложение два раза отсканировать QR-код, и банкомат даст денежек 😱
До сих пор не могу привыкнуть к этим новшествам всем...
Помню, у меня первая банковская карта только в 20 лет появилась. И ещё лет пять я с нее просто снимала кеш, и кешем за все платила, а саму карту никуда не тыкала, кроме банкомата. Только лет в 25 приучилась самой картой платить... а там уже мне беспроводную карту дали, которую не только тыкать, но и прикладывать можно.
Лет в 28 начала впервые пользоваться приложением банковским - и то потому что поехала в Лондон, и мне там дали карту банка, у которого не было банковских отделений, и все делалось через это приложение... только после этого поняла, зачем это все нужно, и на российские приложения также стала обращать внимание и устанавливать их себе. Теперь уже и вспомнить трудно, как это я так без приложений всем пользовалась.
Единственное, что вызывало у меня опасение — это оплата с помощью NFC-чипа в телефоне. Ничто в мире не бывает более беспомощным, безответственным и порочным, чем NFC-чип. Но я знаю, что рано или поздно перейду и на эту дрянь.
P.S. Капец я мамонт, конечно))
Please open Telegram to view this post
VIEW IN TELEGRAM
🤣1
#dotnet #linux
Оказывается, скомпилированные Net приложения запускаются прям в линуксе (через mono)!! вот это приятная новость.. я думал, это не работает.
https://www.codesdope.com/course/c-sharp-introduction/
Оказывается, скомпилированные Net приложения запускаются прям в линуксе (через mono)!! вот это приятная новость.. я думал, это не работает.
https://www.codesdope.com/course/c-sharp-introduction/
CodesDope
C# Tutorials
Start learning C#. Learn about C#. Learn to run C# codes on Windows, Linux and Mac. Start with simple tutorials.
#git
Так можно добавить в git существующий проект. Рекомендуется это сделать тем, кто над одним и тем же кодом работает с разных компов и мест. Ну или командой из нескольких человек, тогда вообще обязательно.
Хороший .gitignore в камментах, чтобы не тянуть в облако временные файлы и прочий мусор.
https://kbroman.org/github_tutorial/pages/init.html
Так можно добавить в git существующий проект. Рекомендуется это сделать тем, кто над одним и тем же кодом работает с разных компов и мест. Ну или командой из нескольких человек, тогда вообще обязательно.
Хороший .gitignore в камментах, чтобы не тянуть в облако временные файлы и прочий мусор.
https://kbroman.org/github_tutorial/pages/init.html
kbroman.org
Start a new git repository
Creating a new git repository
#butusov #music #python
Сердце обнял и погладил
Ласковый Python )
https://www.youtube.com/watch?v=DGKEyv2oYyA
Сердце обнял и погладил
Ласковый Python )
https://www.youtube.com/watch?v=DGKEyv2oYyA
YouTube
Вячеслав Бутусов - Звезда Поэта
#astronomy
"Красный сверхгигант Бетельгейзе продолжает лихорадить после произошедшего в 2019 году титанического выброса коронарной массы в 400 млрд раз больше обычного выброса на нашем Солнце. После отмеченного четыре года назад Великого Потускнения в виде снижения светимости на 25–35 %, сегодня наблюдается резкий рост блеска. В апреле звезда достигла пика светимости в 156 % от первоначального. Неужели мы на пороге взрыва гигантской сверхновой всего в 700 световых годах от Земли?"
Dort in der Tiefe
unendlich fern
ein helles Licht
Doch es stirbt ein Stern
Und wir tanzen
so blind durch die Nacht
spielen mit den Göttern
das Spiel um die Macht
bis ein Roter Riese
am Horizont erscheint
und eine Explosion
uns mit dem All vereint
https://www.youtube.com/watch?v=0pIAx_t92vE
"Красный сверхгигант Бетельгейзе продолжает лихорадить после произошедшего в 2019 году титанического выброса коронарной массы в 400 млрд раз больше обычного выброса на нашем Солнце. После отмеченного четыре года назад Великого Потускнения в виде снижения светимости на 25–35 %, сегодня наблюдается резкий рост блеска. В апреле звезда достигла пика светимости в 156 % от первоначального. Неужели мы на пороге взрыва гигантской сверхновой всего в 700 световых годах от Земли?"
Dort in der Tiefe
unendlich fern
ein helles Licht
Doch es stirbt ein Stern
Und wir tanzen
so blind durch die Nacht
spielen mit den Göttern
das Spiel um die Macht
bis ein Roter Riese
am Horizont erscheint
und eine Explosion
uns mit dem All vereint
https://www.youtube.com/watch?v=0pIAx_t92vE
3DNews - Daily Digital Digest
Великое Потускнение Бетельгейзе сменилось нарастанием яркости — звезда резко нарастила блеск
Красный сверхгигант Бетельгейзе продолжает лихорадить после произошедшего в 2019 году титанического выброса коронарной массы в 400 млрд раз больше обычного выброса на нашем Солнце.
#news #nvidia
"Что интересно, за сутки NVIDIA прибавила больше, чем капитализация всей таких компаний, как AMD и Intel. Первая оценивается в $192 млрд, тогда как цена второй сократилась до всего лишь $113 млрд.
Решение о создании компании было принято в апреле 1993 года, когда теперешний её глава Дженсен Хуанг (Jensen Huang) обсуждал с двумя коллегами-инженерами возможности улучшить компьютерную графику. В конце 2006 года NVIDIA совершила революцию, предложив средства разработки ПО, использующего мощности графических процессоров для целей, не связанных с графикой. Вскоре стало ясно, что чипы NVIDIA подходят для вычислений, необходимых для работы систем ИИ — они превосходно выполняют множество операций одновременно, тогда как центральные процессоры справляются с этой задачей менее эффективно."
https://3dnews.ru/1087429/nvidiavplotnuyu-podobralas-k-rinochnoy-kapitalizatsii-v-1-trillion
"Что интересно, за сутки NVIDIA прибавила больше, чем капитализация всей таких компаний, как AMD и Intel. Первая оценивается в $192 млрд, тогда как цена второй сократилась до всего лишь $113 млрд.
Решение о создании компании было принято в апреле 1993 года, когда теперешний её глава Дженсен Хуанг (Jensen Huang) обсуждал с двумя коллегами-инженерами возможности улучшить компьютерную графику. В конце 2006 года NVIDIA совершила революцию, предложив средства разработки ПО, использующего мощности графических процессоров для целей, не связанных с графикой. Вскоре стало ясно, что чипы NVIDIA подходят для вычислений, необходимых для работы систем ИИ — они превосходно выполняют множество операций одновременно, тогда как центральные процессоры справляются с этой задачей менее эффективно."
https://3dnews.ru/1087429/nvidiavplotnuyu-podobralas-k-rinochnoy-kapitalizatsii-v-1-trillion
3DNews - Daily Digital Digest
Капитализация NVIDIA за день выросла на $198 млрд — это больше, чем целиком стоят Intel или AMD
Взрывной рост стоимости акций NVIDIA после квартального отчёта накануне остановился на отметке в 24 % — это стало следствием не только превзошедших ожидания аналитиков финансовых показателей компании, но и очень оптимистическими прогнозами на будущее благодаря…
#news
"Более половины работников исследовательского подразделения были переведены в другие отделы Arm — научные проекты не были закрыты полностью, но их направление было скорректировано в сторону конкретных возможностей для бизнеса с перспективой около 10 лет по нескольким направлениям. В последние годы Arm Research занималось, в частности, сенсорами малой мощности, контролирующими подачу питания от аккумуляторов; ИИ-суперкомпьютерами с архитектурой по образцу человеческого мозга; а также новыми полупроводниковыми материалами.
Некоторые проекты, включая направления машинного обучения и архитектуры микросхем, были переданы другим подразделениям компании — расформированию подверглись команды, занимавшиеся инновационными материалами, устройствами и схемами, промышленная реализация которых пока невозможна."
https://3dnews.ru/1087425/arm-zakrila-issledovatelskoe-podrazdelenie-radi-optimizatsii-pered-ipo
"Более половины работников исследовательского подразделения были переведены в другие отделы Arm — научные проекты не были закрыты полностью, но их направление было скорректировано в сторону конкретных возможностей для бизнеса с перспективой около 10 лет по нескольким направлениям. В последние годы Arm Research занималось, в частности, сенсорами малой мощности, контролирующими подачу питания от аккумуляторов; ИИ-суперкомпьютерами с архитектурой по образцу человеческого мозга; а также новыми полупроводниковыми материалами.
Некоторые проекты, включая направления машинного обучения и архитектуры микросхем, были переданы другим подразделениям компании — расформированию подверглись команды, занимавшиеся инновационными материалами, устройствами и схемами, промышленная реализация которых пока невозможна."
https://3dnews.ru/1087425/arm-zakrila-issledovatelskoe-podrazdelenie-radi-optimizatsii-pered-ipo
3DNews - Daily Digital Digest
Arm закрыла флагманское исследовательское подразделение ради оптимизации перед выходом на биржу
Британская Arm закрыла флагманское исследовательское подразделение, которое занималось разработкой перспективных технологий, и перенаправило усилия на более жизнеспособные в коммерческом плане проекты в преддверии долгожданного выхода на биржу, сообщает Financial…
Минутка проверки знаний иностранных языков. Как можно перевести на английский слово "баловать"? Не заглядывайте в словарь! )
Anonymous Quiz
16%
to pamper
0%
to featherbed
16%
to coddle
0%
to cosset
0%
to cosher
0%
to dandle
3%
to grandmother
13%
to baby
34%
ALL of above
19%
NONE of above
🤔1