Ребят, планирую начать публиковать контент в сторис, кто за - бустаните, плиииз ))) ⛽️

https://t.me/DenoiseLAB?boost

Намедни, тусили с тестировщиками, мне задарили ультра-модную панамку. Ееее)))) Ребята вы лучшие !!!!! Теперь я, как Хантер Томпсон, осталось раздобыть очки и заняться гонзо-журналистикой. Только в моем случае это будет гонзо- ревью кода )))))

❓200 Вопросов по Машинному обучению (Machine Learning) - Вопрос_127

🔠Что такое ?

👉Ответ: OSMNX - это пакет Python, который позволяет загружать пространственные геометрии и моделировать, проектировать, визуализировать и анализировать реальные уличные сети из API-интерфейсов OpenStreetMap.

conda config --prepend channels conda-forge
conda create -n ox --strict-channel-priority osmnx

import osmnx as ox
graph = ox.graph_from_place('Berlin, Germany')

ox.plot_graph(graph)

Ccылка: https://habr.com/ru/companies/skillfactory/articles/654239/

#osmnx #python #spatialgeometry #streetnetworks #visualization #analysis #openstreetmap #api

❓200 Вопросов по Машинному обучению (Machine Learning) - Вопрос_128

🔠Что за формат данных Apache ORC ?

👉Ответ: Apache ORC (Optimized Row Columnar) — это формат хранения данных, разработанный Apache Software Foundation. Он предназначен для эффективного и компактного хранения структурированных данных, особенно для аналитических нагрузок.

ORC представляет собой гибридный формат, который использует преимущества как строкового, так и столбцового подходов к хранению данных. Данные в ORC-файлах организованы в столбцах, что позволяет эффективно сжимать и быстро обрабатывать отдельные столбцы. Это помогает улучшить производительность при выполнении запросов, так как обычно только несколько столбцов данных должны быть прочитаны для выполнения операции.

Кроме того, ORC поддерживает различные методы сжатия данных, включая Snappy, Zlib и LZO, что позволяет сократить размер файла и увеличить скорость чтения и записи.

😎Ссылка: https://habr.com/ru/companies/alfastrah/articles/458552/

#apache #orc #hadoop

❓200 Вопросов по Машинному обучению (Machine Learning) - Вопрос_129

🔠Что такое RBAC ?

RBAC (Role-Based Access Control) является методом управления доступом к ресурсам в информационных системах. Он основан на назначении ролей пользователям и предоставлении доступа к определенным ресурсам в системе на основе их роли.

В RBAC определяются следующие компоненты:
1. Роли: определяют группы пользователей с общим набором привилегий и доступа к ресурсам.
2. Права доступа: определяют допустимые операции с ресурсами, которые могут выполнять пользователи в рамках своих ролей.
3. Ресурсы: представляют объекты, к которым пользователи могут запрашивать доступ.
4. Пользователи: пользователи, которым назначаются определенные роли и права доступа.

Ссылка: https://habr.com/ru/articles/539778/

#rbac #rolebasedaccesscontrol #accesscontrol #informationsecurity #resources #roles #permissions #users

❓200 Вопросов по Машинному обучению (Machine Learning) - Вопрос_130 (Часть_1)

🔠Как устроен RCFile ?

RCFile (Record Columnar File) - это формат хранения данных в столбцовом формате. Он разработан для улучшения производительности чтения и записи больших объемов данных. Вот некоторая информация о том, как устроен RCFile:

1. Блоки данных: RCFile разбивает данные на блоки фиксированного размера, обычно 64 или 128 Кб. Большие файлы разбиваются на множество таких блоков.

2. Заголовок блока: Каждый блок начинается с заголовка, содержащего метаданные. Заголовок включает в себя информацию о сжатии столбцов, оффсеты и длины столбцов в блоке, а также информацию о наличии или отсутствии значений NULL.

#RCFile #data_storage_format #columnar_storage #hadoop
#big_data #data_serialization
#compression #indexing
#apache_hive

Сделали первый ролик по собесам ML, если тема зайдет, будем выкатывать такие постоянно. Сейчас все на стадии обкатки, звук, видео, монтаж.

Зацените, мы старались. Если у вас есть пожелания или замечания мы с удовольствием их рассмотрим.

https://www.youtube.com/watch?v=eAcp2N1gxO8

Всем приятного просмотра !!!

❓200 Вопросов по Машинному обучению (Machine Learning) - Вопрос_130 (Часть_1)

🔠Как устроен RCFile ? (Часть_2)

3. Колонки данных: После заголовка каждого блока содержатся столбцы данных. Для каждого столбца создается отдельный поток данных. Все значения столбца сериализуются последовательно и записываются в блок. Значения могут быть сжаты для снижения требуемого места хранения и улучшения производительности чтения.

4. Индекс: RCFile поддерживает индекс, который позволяет быстро локализовать данные в блоках. Индекс облегчает поиск значений по ключу и выполнение операций, таких как фильтрация и слияние данных.

#RCFile #data_storage_format #columnar_storage #hadoop #big_data #data_serialization #compression #indexing #apache_hive

🧭Аналитика статей по Машиному обучению №1

• Психология потребительских сделок важна для розничных продавцов электронной коммерции.
• Скидки вызывают у клиентов чувство волнения, удовольствия и счастья.
• Искусственный интеллект и машинное обучение помогают ритейлерам анализировать данные и оптимизировать предложения.
• ИИ и ML могут определять наиболее эффективные скидки, варианты копирования и местоположения предложений.
• Персонализация предложений с помощью ИИ и ML повышает релевантность сделок и увеличивает продажи.
• Использование ИИ и ML в психологии потребительских сделок может привести к революционным изменениям в обслуживании сделок.

#consumerpsychology #ecommerce #retailers #discounts #excitement #pleasure #happiness #artificialintelligence #machinelearning #dataanalysis #optimization #effectivediscounts #copywriting #locationbasedoffers #personalization #relevantsales #revolutionarychanges #transactionalservice

https://www.forbes.com/sites/forbestechcouncil/2023/05/03/how-ai-and-machine-learning-can-help-accelerate-studies-of-consumer-deal-psychology/?sh=1af2805c2f5c

❓200 Вопросов по Машинному обучению (Machine Learning) - Вопрос_130 (Часть_3)

🔠Как устроен RCFile ? (Часть_3)

5. Компрессия: RCFile поддерживает сжатие данных для уменьшения размера файлов и ускорения операций ввода-вывода. Для каждого столбца можно указать схему сжатия. Некоторые из поддерживаемых схем сжатия включают Gzip, LZO и Snappy.

6. Сериализация: Значения столбцов сериализуются перед записью в блок и десериализуются при чтении. RCFile использует схему сериализации, чтобы преобразовать значения в байты и наоборот.

#RCFile #data_storage_format #columnar_storage #hadoop #big_data #data_serialization #compression #indexing #apache_hive

🌟Второй ролик по собесам ML. На этот раз говорим о том в чем разница между классификацией и регрессией.

✅Если у вас есть пожелания или замечания мы с удовольствием их рассмотрим.

https://youtu.be/AEYD_FfJ7ZU

❓200 Вопросов по Машинному обучению (Machine Learning) - Вопрос_131

🔠Где и зачем используют формат Record Columnar File ?

Формат record columnar file используется для хранения и организации структурированных данных, таких как таблицы или базы данных. Он широко используется в системах управления базами данных (СУБД) для хранения и обработки больших объемов данных.

Преимущество формата record columnar file заключается в его эффективности и оптимизации использования ресурсов. Вместо хранения данных по строкам, как в традиционной форме записи, record columnar file организует данные по столбцам. Это позволяет сжимать данные более эффективно и улучшает быстродействие запросов к базе данных.

Некоторые популярные СУБД, которые используют формат record columnar file, включают Apache Parquet, Apache ORC и ClickHouse.

#RCFile #data_storage_format #columnar_storage #hadoop #big_data #data_serialization #compression #indexing #apache_hive

🧭Аналитика статей по Машиному обучению №2

〽️Индия стремится догнать мировых лидеров в области генеративного искусственного интеллекта.
〽️Индийская экосистема стартапов имеет потенциал для влияния на развитие ИИ.
〽️Индийские стартапы используют машинное обучение для улучшения бизнес-процессов.
〽️Искусственный интеллект может вытеснить рабочие места в сфере обслуживания.
〽️Молодые индийские стартапы, такие как Gan, TrueFoundry и Cube, развиваются в области генеративного ИИ.
〽️Венчурные фонды Индии разрабатывают инвестиционные стратегии в развивающемся пространстве ИИ.
〽️Индия не планирует регулировать развитие ИИ, придерживаясь подхода, отличающегося от подходов других стран.

👉Ссылка: https://techcrunch.com/2023/05/03/where-is-india-in-the-generative-ai-race/

#India #AI #ArtificialIntelligence #Startups #MachineLearning #Technology #Innovation #VentureFunds #Development #Ecosystem #Jobs #Regulation

❓200 Вопросов по Машинному обучению (Machine Learning) - Вопрос_132 (Чать_1)

🔠Какие есть аналоги библиотеки request ? (Чать_1)

1. aiohttp - сторонняя асинхронная библиотека Python для выполнения HTTP-запросов. Обеспечивает возможность асинхронной работы с HTTP-соединениями и поддержку различных прокси-серверов.

2. httplib2 - сторонняя библиотека Python для выполнения HTTP-запросов. Предоставляет удобный интерфейс для отправки запросов и обработки ответов, а также поддерживает кеширование.

3. treq - сторонняя библиотека Python, являющаяся асинхронной оболочкой над requests. Обеспечивает возможность асинхронной работы с HTTP-соединениями и упрощает асинхронную обработку запросов.

#http.client #urllib #aiohttp #httplib2 #treq

❓200 Вопросов по Машинному обучению (Machine Learning) - Вопрос_132 (Чать_2)

🔠Какие есть аналоги библиотеки request ? (Чать_2)

1. urllib: Входит в стандартную библиотеку Python, предоставляет возможности для отправки HTTP-запросов, но является более низкоуровневым по сравнению с requests, поэтому требует больше кода для выполнения простых задач.

2. http.client: Еще один модуль из стандартной библиотеки Python, предоставляет низкоуровневые возможности для работы с HTTP-запросами, но также более сложен в использовании и требует больше кода.

3. aiohttp: Библиотека для асинхронных HTTP-запросов. Предоставляет возможности работы с HTTP-запросами в асинхронным режиме, что полезно для работы с большим количеством запросов или при использовании асинхронных фреймворков.

#http.client #urllib #aiohttp #httplib2 #treq

🧭Аналитика статей по Машиному обучению №3

〽️Принятие решений на основе данных может привести к более точным и эффективным результатам.
〽️Данные датчиков могут использоваться для планирования и принятия важных решений.
〽️Анализ данных может помочь контролировать качество и производительность оборудования.
〽️Мониторинг потребления энергии позволяет оценить затраты на эксплуатацию оборудования.
〽️Использование данных для прогнозного технического обслуживания повышает эффективность.
〽️Анализ данных помогает отслеживать проблемы и предотвращать их возникновение.
〽️Сбор, анализ и использование данных может повысить эффективность производства и использование ресурсов.
〽️Автоматизация производства может выйти на новый уровень благодаря данным.

👉Ссылка: https://www.designworldonline.com/data-driven-decision-making/

#dataanalysis #datadriven #decisionmaking #sensordata #equipmentmonitoring #energyconsumption #predictivemaintenance #datacollection #automation

❓200 Вопросов по Машинному обучению (Machine Learning) - Вопрос_132 (Чать_3)

🔠Какие есть аналоги библиотеки request ? (Чать_3)

1. httpx: Новая альтернатива requests, сочетающая в себе простоту использования и удобные возможности для работы с HTTP-запросами. httpx является совместимым с async/await и также поддерживает HTTP/2.

2. treq: Аналог requests для Twisted - асинхронная библиотека для фреймворка Twisted, которая предоставляет возможности для работы с HTTP-запросами и обработки ответов.

3. http.client2: Модуль промежуточного уровня, основанный на http.client и предоставляющий некоторые упрощенные возможности для работы с HTTP-запросами.

#http.client #urllib #aiohttp #httplib2 #treq

🌟🌟🌟Ребята всем привет, мы запустили первые Shorts на нашем канале по генеративному ИИ.

🫡Это серия коротких роликов, просто "залипательных", которые мы запилили. Первый выпуск посвящен Metall Skull.

🔥Всех прошу заценить и как обычно, комментарии и пожелания приветствуются !!! Все остальные рубрики:
- Вопросы/ответы
- Аналитика
- Собесы
Так же продолжат выходить планово!

👉https://www.youtube.com/shorts/cvV25HicObU

🏆Приятного просмотра!!!🏆

❓200 Вопросов по Машинному обучению (Machine Learning) - Вопрос_133

🔠Как устроена технология RFID ?

1. RFID-метка: Это электронный брелок или этикетка, содержащая чип и антенну. Метка может быть пассивной (не содержит энергии и передает информацию только при активации считывателем) или активной (имеет собственное питание и может передавать данные независимо).

2. Считыватель: Устройство, которое считывает информацию с RFID-меток. Считыватель использует радиочастотные волны для активации и чтения данных с меток. Он может быть подключен к компьютеру или другому устройству для обработки полученной информации.

https://habr.com/ru/articles/592403/

#rfid #tag #electronic #chip #antenna #passive #active #power #data #reader #device #radiofrequency #wave #activation #information #computer #processing #hostsystem #inventory #accesscontrol #tracking #management #task

🧭Аналитика статей по Машиному обучению №4

〽️Искусственный интеллект может быть полезен в самых разных сферах жизни.
〽️Академики и интеллектуалы начинают видеть в ИИ потенциал для защиты окружающей среды и смягчения последствий изменения климата.
〽️Искусственный интеллект используется климатологами и метеорологами для улучшения прогнозов погоды.
〽️ИИ может помочь в картографировании лесных массивов и водных путей, что может быть полезным для природоохранных организаций.
〽️Чесапикский заповедник использует ИИ для исследований климата.
〽️Искусственный интеллект может стать частью стратегии Мериленда по климатическим решениям.

👉Ссылка: https://www.marylandmatters.org/2023/08/07/can-ai-save-the-planet-some-marylanders-are-trying-to-make-the-case/

#ArtificialIntelligence #ClimateChange #EnvironmentalProtection #WeatherForecasts #Mapping #NatureConservation #ChesapeakeBayReserve #ClimateStudies #ClimateSolutions #MarylandClimateStrategy