Data science [ru]
4.66K members
262 photos
4 videos
29 files
469 links
Статьи на тему data science, machine learning, big data, python, математика

Правила рекламы:
https://teletype.in/@abaha.91/rJiPDQPf8

По сотрудничеству - @g_abashkin
Download Telegram
to view and join the conversation
Крупнейший прорыв за последние пять лет. Google начала внедрять новый ИИ-алгоритм правописания для лучшего понимания запросов с орфографическими ошибками.

Еще один немаловажный анонс презентации Google Search On 2020, посвященной последним достижениям компании в области ИИ, касается обновления поисковых алгоритмов.
В прошлом году поисковая система Google перешла на технологию BERT (Bidirectional Encoder Representations from Transformers или двунаправленная нейросеть-кодировщик), наделяющую поисковик способностью понимать естественный человеческий язык. В рамках Search On 2020 компания анонсировала еще ряд улучшений, чтобы более точно интерпретировать запросы пользователей.
Kotlin | Лямбда-выражения и анонимные функции
#Kotlin
В этой статье мы собираемся изучить выражение лямбда-выражения и анонимную функцию в Kotlin. Синтаксически сходные лямбды Kotlin и Java имеют очень разные функции.
Выражение лямбда-выражения и функция Anonymous означают, что эти функции не объявлены, а переданы немедленно как выражение.

Лямбда-выражение —
Как известно, синтаксис Kotlin lambdas похож на Java Lambdas. Функция без имени называется анонимной функцией. Для лямбда-выражения можно сказать, что это анонимная функция.
Scala Идентификаторы
#Scala
В языках программирования идентификаторы используются для целей идентификации. В Scala идентификатором может быть имя класса, имя метода, имя переменной или имя объекта.
А ты знал, что специалистов по анализу данных не хватает на рынке, а уровень зарплат постоянно растёт? Давно задумываешься о карьере в IT? Тогда познакомься с профессией Data Scientist на бесплатном онлайн-интенсиве от Skillbox!

Подробная программа занятий: 👉 https://clc.am/b3_UuA

Ты научишься:
⚡️ использовать Python для data-аналитики;
⚡️ находить аномалии и восстанавливать недостающие данные;
⚡️ работать с библиотеками Pandas и Matplotlib;
⚡️ решать реальные задачи, с которыми сталкивается Data Scientist.

🎉 Каждый участник получит подарок от издательства «МИФ», а авторы лучших проектов — сертификат на 30 000 рублей для обучения в Skillbox.

Ждём тебя 26–28 октября в 19:00 по МСК.
Нейросеть для разбитых сердец
Одна из проблем сегодняшних нейросетей — это их тупиковость при необходимости дать сложный ответ. Т. е. она довольно просто она может отличить кошку от не кошки, но определить, что это динозавр, а не кошка, она затруднится. Но разработчики программы Oshi — el прогнали ее через несколько японских форумов с темами «любовные советы» и научили находить причинно-следственные связи в вопросах и ответах.
«Я понимаю ваши чувства, сейчас вам тяжело. Мне кажется, что у младшего из них есть к вам чувства. Он вам открылся, поэтому все не так уж плохо. Я желаю вам счастья. Продолжайте действовать!» — такой ответ дала нейросеть женщине, попавшей в любовный треугольник.
Интересно, что полторы тысячи опрошенных на сайте знакомств людей даже не догадались, что разговаривают с роботом. И качество его ответов нравилось людям почти в раза чаще, чем качество ответов живого психолога. Возможно потому, что когда дело доходит до любви, люди в первую очередь думают о красоте сказанного.
Оператор объявления короткой переменной (: =) в Go

#GO
Оператор объявления короткой переменной (: =) в Golang используется для создания переменных, имеющих собственное имя и начальное значение. Основная цель использования этого оператора для объявления и инициализации локальных переменных внутри функций и для ограничения области видимости переменных. Тип переменной определяется типом выражения. Ключевое слово var также используется для создания переменных определенного типа. Таким образом, вы можете сказать, что есть два способа создания переменных в Golang следующим образом:
Kotlin Рекурсия
#Kotlin

В этом уроке мы изучим рекурсивную функцию Kotlin. Как и другие языки программирования, мы можем использовать рекурсию в Kotlin.
Функция, которая вызывает себя, называется рекурсивной функцией, и этот процесс повторения называется рекурсией .

Всякий раз, когда вызывается функция, есть две возможности:
Нормальный вызов функции
Рекурсивный вызов функции
Взаимодействовать с файлами в Python
#Python

Python также поддерживает обработку файлов и позволяет пользователям обрабатывать файлы, читать, писать, создавать, удалять и перемещать файлы, а также многие другие параметры обработки файлов для работы с файлами. Концепция обработки файлов простиралась на различные другие языки, но реализация сложна или длительна, но, как и другие концепции Python, эта концепция здесь также проста и коротка.
​​У меня есть страх даже подачи резюме в компанию мечты, потому что считаю, что еще не до конца подготовлен.

Многим IT специалистам страшно даже выслать резюме, кажется что есть всего один шанс попасть в компанию мечты, скорей всего это обусловлено тем что каждый программист хорошо знает что программирование, это огромный объем информации, даже то что казалось бы знаешь хорошо, но все равно сомнения, вдруг зададут вопрос на который я не смогу дать ответ.

Что же на самом деле? Вопросы вам задавать будут тоже люди и эти люди прекрасно понимают что невозможно объять необъятное, это просто практически нереально досконально изучить любой язык программирования.

Есть методы побороть страх перед собеседованием:
1. Понять и принять что шансов на самом деле гораздо больше чем один.
2. Постоянно посещать собеседования и совсем не важно, хотите вы работать в той компании после собеседования или нет.
3. Максимально расслабиться на ( тренировочном) собеседование, возможно попробовать примерить маску веселого парня)
4. Выпишите для себя 10-20 вопросов на какие вы затрудняетесь ответить.
На самом деле вариантов прокачать себя для собеседования очень много но не стоит зацикливаться на этом занятие.
Несколько смешных собеседований.
Состоялся релиз Ubuntu 20.10 с полной поддержкой Raspberry

PiUbuntu 20.10 впервые предлагает официальный рабочий стол и серверные сборки, доступные для Raspberry Pi
На днях на странице загрузки Ubuntu появился дистрибутив Ubuntu 20.10 «‎Groovy Gorilla»‎. Его поддержка будет осуществляться до июля 2021 года. Новые образы созданы в следующих редакциях: Ubuntu, Ubuntu Server, Lubuntu, Kubuntu, Ubuntu Mate, Ubuntu Budgie, Ubuntu Studio, Xubuntu и UbuntuKylin (редакция для Китая).

Кроме того, впервые в день появления релиза Ubuntu разработчики выложили и специализированный релиз для Raspberry Pi. Причем это полноценный десктопный дистрибутив, а не серверная версия с оболочкой, как в случае предыдущих версий. В общем, теперь с «‎малинкой» Ubuntu работает из коробки.
Автор: Ян Гарланд
Название: Изучаем программирование на примере Minecraft

Эта забавная и познавательная книга познакомит детей с захватывающим миром программирования с помощью их любимой игры Minecraft. Знакомые персонажи и сюжеты сделают обучение интересным, а яркие иллюстрации помогут с легкостью разобраться даже в самых сложных заданиях. Вы узнаете о циклах, переменных и функциях и, конечно же, научитесь их применять. Каждый ребенок найдет что-то интересное для себя – будь то создание сайта Стива или анимация крипера. Вас ждет по-настоящему удивительное путешествие в мир программирования. И начинается оно прямо сейчас!
Разработчик на ремоуте: как искать работу на биржах, и кому это подойдёт?
Поработать с зарубежными заказчиками хочется, а переезжать в другую страну и сталкиваться со всеми трудностями релокейта — нет.
Что делать? Вариант — искать проекты на удалёнке из той страны, где вы живёте. На прошлый вебинар мы пригласили Дмитрия Рязанцева, ведущего Android-разработчика: последние пять лет он путешествует и работает в режиме ремоут, например, с Emirates и Crowdservice. Расспросили его про поиск проектов на бирже Toptal, плюсы, минусы и подводные камни удалённой работы. Ответы Дмитрия на вопросы — в сегодняшней статье.
Использование функции enumerate()
#Python
Функция enumerate() добавляет счетчик в итерируемый объект, в котором используется метод iter , возвращающий итератор. Он может принимать последовательные значения индекса, начиная с нуля. И выдаёт ошибку IndexError, когда индексы больше недействительны.

Типичный пример использования функции enumerate() — создание цикла по списку с отслеживанием индекса. Для этого можно использовать переменную в качестве счетчика. Но функция enumerate() позволяет сделать то же самое намного удобнее.

# First prepare a list of strings
subjects = ('Python', 'Coding', 'Tips')
for i, subject in enumerate(subjects):
 print(i, subject)

# Output:
0 Python
1 Coding 
2 Tips
Какие продвинутые навыки стоит освоить Data Science специалистам?
27 октября в 20:00 (мск) приглашаем познакомиться с онлайн-курсом "Machine Learning. Продвинутый курс".

Преподаватель Дмитрий Сергеев представит программу, расскажет, как организована практика и ответит на ваши вопросы о карьере Data Science.
Вебинар предназначен для практикующих Data Science специалистов, желающих повысить свой профессиональный уровень до Middle/Senior. Интересно, как можно продвинуться в Data Science?
Тогда регистрируйтесь, чтобы не пропустить, и приходите: https://otus.pw/2tj0/
​​Bracket Pair Colorizer 2
Это расширение позволяет идентифицировать совпадающие скобки по цвету. Пользователь может определить, какие токены должны соответствовать и какие цвета использовать.
Скриншот👇
Проверьте свои знания по data science.

Что такое жизненный цикл проекта в области data science?
Функции, поддерживающие только именованные аргументы (kwargs)
#Python
Для того чтобы при использовании некоей функции сделать так, чтобы ей можно было бы передавать только именованные аргументы, можно поступить следующим образом:

def test(*, a, b):
 pass

test("value for a", "value for b") # TypeError: test() takes 0 positional arguments...
test(a="value", b="value 2") # А так - работает...

Это может быть полезно для того, чтобы улучшить понятность кода. Как видите, наша задача легко решается при помощи использования аргумента * перед списком именованных аргументов. Здесь, что вполне очевидно, можно использовать и позиционные аргументы — в том случае, если поместить их до аргумента *.
Новая востребованная профессия - онтоинженер

Развитие современных технологий влечет за собой появление новых профессий. Специальность онтоинженер является одной из них. Профессия молодая, но ее представители уже востребованы в различных сферах. Люди, которые решили выбрать это направление, являются великолепными лингвистами, программистами, разностороннее развитыми личностями, имеющими склонности к точным наукам. Профессия появилась на стыке программирования, лингвистики, информационных технологий, работать в этой сфере смогут люди, имеющие высшее образование.
Создание объектов, поддерживающих выражение with
#Python

Все знают о том, как, например, открыть файл, или, возможно, как установить блокировку с использованием оператора with. Но можно ли самостоятельно реализовать механизм управления блокировками? Да, это вполне реально. Протокол управления контекстом исполнения реализуется с использованием методов enter и exit:

class Connection:
 def __init__(self):
 ...

 def __enter__(self):
 # Инициализируем соединение...

 def __exit__(self, type, value, traceback):
 # Закрываем соединение...

with Connection() as c:
 # __enter__() executes
 ...
 # conn.__exit__() executes

Это — наиболее распространённый способ реализации возможностей менеджера контекста в Python, но то же самое можно сделать и проще:

from contextlib import contextmanager

@contextmanager
def tag(name):
 print(f"<{name}>")
 yield
 print(f"</{name}>")

with tag("h1"):
 print("This is Title.")

Здесь протокол управления контекстом реализован с использованием декоратора contextmanager. Первая часть функции tag (до yield) выполняется при входе в блок with. Затем выполняется сам этот блок, а после этого выполняется оставшаяся часть функции tag.
Для чего нужны списки в Python?
#Python
Списки в Python — одна из 4 структур данных, предназначенных для работы с итерируемыми объектами. Представим, что нам нужно написать скрипт, который проверяет, является ли модель машины производства компании Tesla. Код будет выглядеть следующим образом:
# Объявим переменную, содержащую список всех моделей машин tesla_models = ['Model S', 'Model 3', 'Model X', 'Model Y'] # Название машины - это строка. Строки объявляются в двойных (") или одинарных (') кавычках # Проверем, производит ли Tesla модель AMG GT 4 door. содержащую список всех моделей машин print('AMG GT 4 door' in tesla_models) # Выведет False (Ложь). Эту модель производит Mercedes-Benz # А Model 3 – флагманская модель Tesla print('Model 3' in tesla_models) # Выведет True (Истина) # Значения регистрозависимы — Model Y не одно и то же, что и model y print('model y' in tesla_models) # Выведет False