DenoiseLAB
486 subscribers
1.33K photos
159 videos
3 files
1.57K links
Блог DenoiseLAB (машинное обучение, аналитика)

Информация в канале служит только для ознакомления и не является призывом к действию. Не нарушайте законы РФ и других стран. Мы не несем отвественность за ваши действия или бездействия.
Download Telegram
100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_85

🔠Q_84: С какими типами данных работают в DataLake ?

✔️Ответ:

Data Lake (озеро данных) включает:
- структурированные данные из реляционных баз данных (строки и колонки),
- полуструктурированные данные (CSV, лог файлы, XML, JSON),
- неструктурированные данные (почтовые сообщения, документы, pdf)
- бинарные данные (видео, аудио, графические файлы).

#work #datalake #algorithms #math #ml #dl #tree #learning #machine
⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_66

🔠Q66: Какие операционные системы вы знаете для безопасности/ разведки? Часть_2

✔️Ответ

- Tails;
- Kali Linux;
- Parrot OS;
- ArchLinux;
- BlackArch;
- Pentoo;
- Fedora Security Lab;
- BackBox;
- SamuraiWTF;
- SIFT Workstation;
- REMnux;
- CommandoVM;
- FLARE VM и ThreatPursuit VM

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#apfs #system #os #penetration #server #rc6 #rc5 #qa #analysis
100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_86

🔠Q_86: Какие процессы и объекты затрагивает DevOps ?

✔️Ответ:

1 Code (Код) – разработка и анализ, контроль версий и слияния кода;
2 Build (Сборка) – непрерывная интеграция различных сборок;
3 Test (Тест) – непрерывное тестирование, обеспечивающее обратную связь по бизнес-рискам;
4 Operate (Работа с пакетами) – репозиторий артефактов, предварительная установка приложения;
5 Release (Выпуск) – управление изменениями, официальное утверждение выпуска, автоматизация выпуска;
6 Deploy (Развертывание конфигурации) – управление инфраструктурой как кодом;
7 Monitor (Мониторинг) – мониторинг производительности приложений, опыт работы с конечным пользователем.

#work #datalake #algorithms #math #ml #dl #tree #learning #machine #devops #coding
100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_87

🔠Q_87: Какие процессы технологии и процессы применяет DevOps ?

✔️Ответ:

1/ Распределенный контроль версий (Git, Mercurial, Subversion, CVS);
2/ Контейнеризация (Docker, Rocket, Kubernetes);
3/ Непрерывная интеграция – сборка и тестирование конечного продукта (Jenkins, TeamCity, Bamboo);
4/ Управление инфраструктурой как кодом (Puppet, Chef, Ansible);
5/ Виртуализация (Vagrant);
6/ Балансировка облачных ресурсов (VMware DRS).

#work #datalake #algorithms #math #ml #dl #tree #learning #machine #devops #coding
100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_87

🔠Q_87: Какие процессы технологии и процессы применяет DevOps ?

✔️Ответ:

1/ Распределенный контроль версий (Git, Mercurial, Subversion, CVS);
2/ Контейнеризация (Docker, Rocket, Kubernetes);
3/ Непрерывная интеграция – сборка и тестирование конечного продукта (Jenkins, TeamCity, Bamboo);
4/ Управление инфраструктурой как кодом (Puppet, Chef, Ansible);
5/ Виртуализация (Vagrant);
6/ Балансировка облачных ресурсов (VMware DRS).

#work #datalake #algorithms #math #ml #dl #tree #learning #machine #devops #coding
⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_66

🔠Q66: что такое классы IP ? Часть_1

✔️Ответ

IP-классы – это способ классификации и разделения IP-адресов на различные группы, которые определяются их структурой и используются для идентификации сетей и устройств в сетевых протоколах, таких как IPv4. В IPv4 есть пять основных классов: A, B, C, D и E.

- Класс A: Первый байт адреса зарезервирован для идентификации группы сети, а оставшиеся три байта предоставляют адреса узлов. Этот класс предназначен для больших сетей и может содержать до 16 миллионов узлов.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#apfs #system #os #penetration #server #rc6 #rc5 #qa #analysis
⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_66

🔠Q66: что такое классы IP ? Часть_2

✔️Ответ

- Класс B: Первые два байта адреса зарезервированы для идентификации группы сети, а оставшиеся два байта предоставляют адреса узлов. Класс B можно использовать для средних по размеру сетей и поддерживает около 65 тысяч узлов.

- Класс C: Первые три байта адреса зарезервированы для идентификации группы сети, а последний байт предоставляет адреса узлов. Класс C подходит для небольших сетей и поддерживает около 254 узлов.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#apfs #system #os #penetration #server #rc6 #rc5 #qa #analysis
100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_88

🔠Q_88: Что такое Apache Flink ?

✔️Ответ:

Apache Flink - это мощный и масштабируемый фреймворк для обработки потоковых и пакетных данных. Он предоставляет высокую производительность и надежность в области распределенных вычислений и обработки данных в реальном времени.

Apache Flink поддерживает обработку данных в формате стрима (поточная обработка) и батча (параллельная обработка). Это позволяет анализировать и обрабатывать данные непрерывно в реальном времени, а также выполнять масштабные задачи обработки данных по требованию.

Apache Flink спользует подход ориентированного графа, устраняя необходимость в отображении.

#work #datalake #algorithms #math #ml #dl #tree #learning #machine #devops #coding #apache #flink
100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_88

🔠Q_89: Как устроен Apache Flink ?

✔️Ответ:

Он поддерживает различные источники данных, включая Apache Kafka, Apache Hadoop HDFS, Amazon S3 и другие.

Архитектура Flink состоит из нескольких ключевых компонентов. Одним из них является JobManager, который управляет выполнением задачи, планирует и назначает задачи на исполнение. TaskManager отвечает за реализацию и исполнение конкретных задач, работающих на каждом узле кластера. Кластер Flink также включает в себя ресурсы, такие как JobManager или TaskManager.

Flink поддерживает различные API для написания приложений, включая DataStream API и DataSet API. DataStream API позволяет обрабатывать потоковые данные, в то время как DataSet API предназначен для работы с пакетными данными.

#work #datalake #algorithms #math #ml #dl #tree #learning #machine #devops #coding #apache #flink
⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_67

🔠Q66: В чем плюс веб-прокси-серверов ? Часть_1

✔️Ответ

1. Анонимность: Используя веб-прокси, вы можете скрыть свой IP-адрес, что поможет обеспечить анонимность в Интернете. Это может быть полезно, когда вы хотите предотвратить отслеживание своей активности или обойти ограничения доступа.

2. Обход блокировок и фильтров: Веб-прокси может помочь в обходе блокировок, которые наложены на определенные сайты или контент. Если у вас есть доступ к веб-прокси, вы сможете обойти такие ограничения и получить доступ к заблокированному контенту.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#apfs #system #os #penetration #server #rc6 #rc5 #qa #analysis
⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_67

🔠Q67: В чем плюс веб-прокси-серверов ? Часть_2

✔️Ответ

3. Улучшение безопасности: Использование веб-прокси может помочь защитить ваши личные данные и конфиденциальную информацию. Прокси-серверы могут скрыть ваш IP-адрес и предоставить защищенное соединение между вами и целевым сервером, что поможет предотвратить возможность хакерских атак или прослушивания.

4. Кэширование и ускорение загрузки: Веб-прокси-серверы могут кэшировать веб-содержимое и ускорить загрузку страниц. Когда вы запрашиваете контент через прокси, он может быть закэширован на сервере, что позволяет уменьшить количество трафика и ускорить время загрузки страниц.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#apfs #system #os #penetration #server #rc6 #rc5 #qa #analysis #proxy
Выкатили список докладов по BlackHat Asia 2023 / BlackHat USA 2023 советую ознакомиться. очень интересные есть наработки и решения. Будет особенно интересно для спецов в облаcnb ИБ и в целом для разработчиков с целью анализа написания безопасного кода. Ссылочку как всегда прикладываю:

https://github.com/onhexgroup/Conferences

#conference #system #os #penetration #soc #redteam #blueteam #analysis
100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_88

🔠Q_89: Что такое glove ?

✔️Ответ:

Global Vectors for Word Representation (GloVe) - это метод представления слов в виде векторов в компьютерных моделях. Он позволяет представить семантические и синтаксические отношения между словами в числовой форме. Эти векторы могут быть использованы для обработки естественного языка, анализа текстов и других задач.

#work #datalake #algorithms #math #ml #dl #tree #learning #machine #devops #coding #apache #glove
100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_90

🔠Q_90: Что такое hbase ?

✔️Ответ:

HBase (Hadoop Database) - это распределенная система хранения данных, которая работает на основе Apache Hadoop. Она предоставляет возможность хранить и обрабатывать большие объемы структурированных данных в реальном времени. HBase базируется на модели ключ-значение и построена на основе Hadoop Distributed File System (HDFS). Она предоставляет высокую отказоустойчивость, масштабируемость и производительность при обработке больших данных. HBase широко используется в области аналитики, поиска и хранения данных в реальном времени для различных приложений.

#work #datalake #algorithms #math #ml #dl #tree #learning #machine #devops #coding #apache #glove
⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_68

🔠Q68: Что такое маска подсети ?

✔️Ответ

Маска подсети - это числовое значение, которое определяет, какая часть IP-адреса сети относится к сетевой части, а какая к хосту. Она состоит из последовательности битов, где значение 1 указывает на сетевую часть, а значение 0 - на часть, отведенную для хоста. Маска подсети используется для разделения IP-адресов на сети и подсети, позволяя устройствам в сети определить, являются ли они частью одной сети или нет.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#apfs #system #os #penetration #server #rc6 #rc5 #qa #analysis #proxy #mask #net
⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_69

🔠Q69: Что такое 127.0.0.1 и localhost?

✔️Ответ

127.0.0.1 и localhost оба относятся к локальному адресу в компьютерных сетях. Этот адрес используется для обращения к собственному компьютеру, что обеспечивает возможность тестирования или взаимодействия с локальными серверами и сервисами, не выходя в Интернет. 127.0.0.1 - это IP-адрес loopback, который всегда указывает на текущий компьютер. "localhost" является понятным именем домена, которое также упирается в 127.0.0.1. При обращении к 127.0.0.1 или localhost через веб-браузер вы обычно просматриваете содержимое локального веб-сервера на вашем компьютере.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#apfs #system #os #penetration #server #rc6 #rc5 #qa #analysis #proxy #mask #net
100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_91

🔠Q_91: Что такое HDInsight ?

✔️Ответ:

HDInsight - это облачная платформа анализа больших данных, предоставляемая компанией Microsoft. Она позволяет организациям обрабатывать и анализировать огромные объемы данных с использованием инструментов и технологий с открытым исходным кодом, таких как Hadoop, Spark, Hive, HBase и другие. HDInsight обеспечивает масштабируемость, надежность и гибкость для работы с данными и решениями анализа Big Data.

#work #datalake #algorithms #math #ml #dl #tree #learning #machine #devops #coding #apache #glove
⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_70

🔠Q70: В чем разница между RDP и KVM? ?

✔️Ответ

Протокол RDP или протокол удаленного рабочего стола является основным методом, с помощью которого можно осуществлять удаленный доступ к системам Windows для устранения неполадок, и является программным методом.
KVM или Keyboard Video and Mouse, с другой стороны, обеспечивают быстрое переключение между различными системами, но с использованием одной и той же клавиатуры, монитора и мыши. KVM обычно представляет собой аппаратно-управляемую систему с распределительной коробкой, размещенной между пользователем и соответствующими системами.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#apfs #system #os #penetration #server #rc6 #rc5 #qa #analysis #proxy #mask #net
⚠️100 CEH (Certificated Ethical Hacker) - Вопрос_71

🔠Q71: Что такое проброс портов?

✔️Ответ

Использование таблицы переадресации портов в самом маршрутизаторе или другом устройстве управления соединениями может позволить автоматически перенаправлять определенный трафик в конкретный пункт назначения.
Если в вашей сети работает веб-сервер и вы хотите, чтобы доступ к нему был предоставлен извне, вы должны настроить переадресацию портов на порт 80 на рассматриваемом сервере. Это будет означать, что любой, кто введет ваш IP-адрес в веб-браузер, будет немедленно подключен к веб-сайту сервера.

🔥🔥🔥Отказ от ответственности: Материалы публикуем в канале несут лишь информационный характер, редакция канала не несет ответственности за ваши возможные действия и последующие за ними последствия. Мы также не призываем вас нарушать закон.

#apfs #system #os #penetration #server #rc6 #rc5 #qa #analysis #proxy #mask #net
100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_92

🔠Q_92: Как устроен Apache Hive ? (Часть_1)

✔️Ответ:

Внутренне Hive состоит из следующих компонентов:

1. Hive Query Language (HQL): HQL - это SQL-подобный язык запросов, который позволяет пользователям писать запросы для анализа и обработки данных. HQL компилируется в MapReduce-задачи, которые выполняются в рамках Hadoop кластера.

2. Metastore: Metastore - это регистр метаданных, который хранит информацию о схемах данных, таблицах, столбцах и других объектах Hive. Metastore может использовать различные базы данных, такие как Apache Derby, MySQL, PostgreSQL и другие.

#work #datalake #algorithms #math #ml #dl #tree #learning #machine #devops #coding #apache #glove