❓100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_60

🔠Q_60: Что такое CRISP-DM ? Часть_1

✔️Ответ:

CRISP-DM (Cross Industry Standard Process for Data Mining) - это стандартный процессный подход к разработке и реализации проектов по добыче знаний из данных (data mining). Он предоставляет методологический каркас, который помогает командам по анализу данных планировать, разрабатывать и реализовывать свои проекты с помощью систематических шагов.

CRISP-DM состоит из шести основных этапов:

1. Понимание бизнес-проблемы: команда аналитиков данных и заинтересованные лица в организации определяют критические бизнес-вопросы и цели, которые требуется решить.

2. Понимание данных: команда изучает доступные данные, проводит исследование и оценку качества данных для определения того, какие данные доступны для анализа.

#work #CRISP-DM #learning #knowledge #ml #learning #adaptation #knowledge #modal #learning

❓100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_60

🔠Q_60: Что такое CRISP-DM ? Часть_2

✔️Ответ:

3. Подготовка данных: этот этап включает очистку данных, выбор и преобразование признаков, агрегацию данных и другие процессы для обеспечения качества и пригодности данных для анализа.

4. Моделирование: команда выбирает и применяет различные методы моделирования данных для создания модели, которая может решить заданные бизнес-проблемы.

5. Оценка: полученные модели оцениваются и анализируются в контексте поставленных бизнес-целей. Результаты сравниваются с требованиями и необходимыми метриками для проверки их полезности.

6. Внедрение: успешные модели превращаются в практически полезные инструменты или решения для организации.

#work #CRISP-DM #learning #knowledge #ml #learning #adaptation #knowledge #modal #learning

Привет, друзья! 💻

Хотите быть в курсе последних новостей из мира backend разработки? Тогда этот канал для вас!

Меня зовут Олег и на своем авторском канале Backend Terki я делюсь только самыми интересными и актуальными новостями из мира бэкэнда, которые помогут вам оставаться на вершине в своей области.

Так же я делюсь своим богатым опытом 🚀. Подписывайтесь на мой канал и получайте самую свежую информацию о новых технологиях, инструментах и трендах в backend разработке. Я также буду делиться с вами своими собственными проектами и советами по улучшению качества вашей работы.

Подписывайтесь на https://t.me/backend_terki прямо сейчас и будьте в курсе всех событий.

🌐 Поделитесь этой ссылкой с друзьями, чтобы пригласить их присоединиться к каналу и развиваться вместе 🙌!

#реклама

⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_44

🔠Q43: Что такое что такое ngnix ? Часть_1

✔️Ответ:

NGINX - это веб-сервер, обратный прокси-сервер и сервер приложений. Он предлагает несколько функций, которые могут повысить безопасность веб-сервера и приложений. Вот некоторые из них:

1. Защита от DDoS-атак: NGINX способен эффективно обрабатывать и разрешать атаки типа Distributed Denial-of-Service (DDoS) благодаря своей высокой производительности и способности балансировать нагрузку.

2. Балансировка нагрузки: NGINX позволяет распределять входящий трафик между несколькими серверами, обеспечивая равномерное распределение нагрузки и предотвращая отказ от обслуживания.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#file #ngnix #malware #penetration #vulnerabilities #coding #qa #analysis #penetration

⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_44

🔠Q43: Что такое что такое ngnix ? Часть_2

✔️Ответ:

3. Обратный прокси: NGINX может работать как прокси-сервер, скрывая реальные IP-адреса серверов и обеспечивая дополнительный слой анонимности.

4. SSL/TLS-терминация: NGINX может быть использован для расшифровки и шифрования трафика, обеспечивая безопасное соединение между клиентами и серверами. Он может принимать и проверять SSL-сертификаты, а также предоставлять возможности конфигурации безопасных протоколов и шифров.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#file #ngnix #server #penetration #vulnerabilities #coding #qa #analysis #penetration

Да здесь, кто ответил !df -mem, то же подходит, но имелось ввиду в более широком смысле получение сведений о дисковом пространстве.

❓100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_61

🔠Q_61: Как работает Hadoop ? Часть_1

✔️Ответ:

Apache Hadoop - это фреймворк для обработки и анализа больших объемов данных, который распределяет и выполняет задачи по кластерам. Эта основополагающая технология хранения и обработки больших данных BigData является проектом верхнего уровня фонда Apache Software Foundation.

Hadoop работает в следующих этапах:

1. Хранение данных: Hadoop разделяет данные на блоки и дублирует их по узлам в кластере. Каждый блок данных реплицируется на несколько узлов для обеспечения отказоустойчивости.

2. Обработка данных: Hadoop использует модель MapReduce для распределения задач на исполнение по узлам кластера. Задачи MapReduce включают два основных шага: Map (отображение) и Reduce (сведение). Можно создавать пользовательские функции Map и Reduce для обработки данных в соответствии с требуемой логикой.

#work #ml #hadoop #server #dl #bigdata #adaptation #knowledge #modal #learning

❓100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_61

🔠Q_61: Как работает Hadoop ? Часть_2

✔️Ответ:

3. Управление данными: Hadoop имеет распределенную файловую систему HDFS (Hadoop Distributed File System), которая обеспечивает надежное и эффективное хранение данных на узлах кластера. HDFS автоматически обнаруживает отказы и восстанавливает утраченные данные.

4. Масштабируемость: Hadoop обеспечивает горизонтальное масштабирование, т.е. возможность расширения кластера компьютеров при добавлении новых узлов. Это позволяет обрабатывать большие объемы данных путем добавления новых узлов в кластер.

Основные технологии: Hadoop Common, HDS, YARN, MapReduce

#work #ml #hadoop #server #dl #bigdata #hdfs #yarn #mapreduce #learning

⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_45

🔠Q43: Как устроена FAT32 ? Часть_1

✔️Ответ:

1. Секторы и кластеры: FAT32 разбивает хранилище данных на отдельные секторы, которые являются минимальными единицами хранения информации на физическом носителе. Группы секторов называются кластерами и являются минимальными единицами выделения пространства для файлов.

2. File Allocation Table (FAT): Это таблица, которая отслеживает использование кластеров и хранит информацию о расположении каждого файла на диске. FAT содержит записи для каждого кластера, указывающие, занят он или свободен, а также номер следующего кластера в цепочке файла.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#fat32 #system #os #penetration #server #coding #qa #analysis #penetration

⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_45

🔠Q45: Как устроена FAT32 ? Часть_2

✔️Ответ:

3. Каталоги: FAT32 использует специальные кластеры под названием каталоги для хранения информации о файлах и подкаталогах. Они содержат записи с метаданными файлов, такими как имя, размер и атрибуты.

4. Атрибуты файла: FAT32 поддерживает различные атрибуты файлов, включая чтение, запись, скрытость, системность и другие. Они определяют правила доступа и поведение файловой системы в отношении файлов.

5. Длина и размер файлов: FAT32 может хранить файлы максимальным размером около 4 гигабайт, а длина имени файла ограничена 255 символами.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#fat32 #system #os #penetration #server #coding #qa #analysis #penetration

❓100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_62

🔠Q_62: Что такое Pruning ?

✔️Ответ:

Pruning, в контексте моделей машинного обучения, относится к процессу удаления ненужных параметров или связей в модели с целью сокращения её размера и улучшения её эффективности. В результате pruning'а, модель может стать более компактной и требовать меньше вычислительных ресурсов для работы, но сохранять при этом подобное или даже лучшее качество предсказаний. Pruning обычно применяется к моделям с большим количеством параметров, таким как нейронные сети, и может быть выполнен как во время обучения модели, так и после него.

#work #ml #pruning #model #ml #bigdata #hdfs #yarn #mapreduce #learning

❓100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_63

🔠Q_63: Что такое AVRO ?

✔️Ответ:

Avro представляет собой систему сериализации данных, которая предоставляет компактное и эффективное представление данных для передачи и хранения. Этот формат независим от языка программирования, что делает его очень удобным для обмена данными между различными системами. Avro также обеспечивает поддержку эволюции данных, что означает, что можно добавлять, изменять или удалять поля данных без необходимости модификации всей структуры данных. Avro сохраняет схему в независимом от реализации текстовом формате JSON.

#work #ml #avro #model #ml #bigdata #hdfs #yarn #mapreduce #learning

⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_46

🔠Q45: Как устроена NTFS ? Часть_1

✔️Ответ:

NTFS (New Technology File System) - это проприетарная файловая система, разработанная компанией Microsoft для операционных систем семейства Windows. Она устроена следующим образом:

1. Объектно-ориентированная структура: NTFS организована в виде набора объектов, включая тома, файловые записи, индексы и директории. Это позволяет упростить управление файлами и достичь более высокой степени надежности.

2. Журналирование: NTFS использует технологию журналирования для записи изменений перед их выполнением. Это снижает риск повреждения данных при сбоях системы или отключении питания.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#fat32 #system #os #penetration #server #coding #qa #analysis #penetration

⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_46

🔠Q45: Как устроена NTFS ? Часть_2

✔️Ответ:

3. NTFS поддерживает развитую систему контроля доступа, которая позволяет установить различные уровни доступа к файлам и папкам для различных пользователей или групп.

4. NTFS предоставляет функциональность по установке ограничений на использование дискового пространства пользователями или группами пользователей.

5. NTFS поддерживает использование альтернативных потоков данных, позволяя хранить дополнительную информацию о файлах внутри самих файлов.

6. NTFS предоставляет интегрированные функции шифрования файлов, позволяющие защитить конфиденциальные данные от несанкционированного доступа.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#fat32 #system #os #penetration #server #coding #qa #analysis #penetration

❓100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_65

🔠Q_65: Какие плюсы и минусы AVRO ?

✔️Ответ:

Плюсы AVRO:
1. Схематизация данных: AVRO предоставляет строгую схему для сериализации данных, что обеспечивает однородную структуру и упрощает работу с данными в процессе машинного обучения.
2. Эффективность: формат данных AVRO компактный и эффективный в использовании ресурсов.

Минусы AVRO :
1. Сложность чтения: AVRO данные обычно сохраняются в бинарном формате. Для чтения и интерпретации данных требуется знание схемы данных.
2. Неудобство при отладке: из-за компактности формата данных AVRO, отладка становится сложнее в случае возникновения ошибок или проблем с данными.

#work #avro #model #ml #bigdata #hdfs #yarn #mapreduce #learning