Ищем человека по email в GitHub. Использование внутреннего поиска, grep.app и Google BigQuery.

https://telegra.ph/Ishchem-po-email-v-GitHub-11-01

Начал работу над руководством по Counter-OSINT. Первая часть: зачем и от кого необходимо защищать свои данные.

https://telegra.ph/Counter-OSINT-rukovodstvo-po-privatnosti-i-zashchite-svoih-dannyh-v-Seti-CHast-1-11-23

The first talk of the RuCTFE Conference will be published this Thursday! soxoj will tell you about information leaks and their usage in OSINT. Come and watch him on January the 14th at 19:00YEKT (UTC+5) on our YouTube channel. Feel free to discuss and ask questions!

Приходите в четверг слушать мой доклад "Shadow OSINT: information leaks usage" про использование утечек информации из сайтов.

Дисклеймер: речь не о слитых базах данных, а о малоприметных вещах вроде подсказок при восстановлении доступа, автодополнении ввода и т.д.

English subtitles will be available. The talk's paper also in English and will be published later.

🕵️‍♂️ Обновление инструмента для поиска по нику Maigret:
- более 2000 сайтов
- экспорт отчётов в PDF, HTML и майндкарты XMind
- улучшенный парсинг популярных сайтов и определение вероятных персональных данных

🔥 И самое главное -- установить теперь можно одной командой: pip install maigret.

В кооперации с HowToFind создал утилиту для сбора информации о Яндекс-аккаунтах -- YaSeeker.

Всё максимально унифицировано: на вход даёте логин, на выходе получаете словарь с данными о пользователе из всех сервисов Яндекса, до которых удалось дотянуться.

Имя, фото, пол, дата регистрации, ссылки на соцсети, активность, вот это всё. Идеально для встраивания в собственный пайплайн сбора данных.

Подробнее: анонс, схема поиска.

Прерываем ковидное затишье смело и мощно: OSINT mindset voice chat #1.

Обсудим последние новости и дела насущные. Будет интересно!

Время: понедельник, 14.06, в 16:00 UTC+3
Место: OSINT mindset
Гости: создатели @osint_san_framework, @osint_club_channel и @tmgroupsecurity.

Приходите послушать и поднимайте руку, если есть что рассказать! 😉

Запись первого эфира OSINT mindset voice chat.

YouTube: https://www.youtube.com/watch?v=JDd4rw7TP3g

Гости: Максим (Bafomet), Артём и Мефодий (MiF).

Темы:
- Деанонимизация Telegram-аккаунтов.
- Законность сбора данных парсингом сайтов и использования утечек.
- OSINT сетевой инфраструктуры;
- Популярные OSINT-инструменты и рекомендации от наших гостей.
- Использование canary-токенов и их обфускация.

Topics:
- Deanonymization of Telegram accounts.
- Legal aspects of sites scraping and use of leaks.
- OSINT of network infrastructure;
- Popular OSINT tools and recommendations from our guests.
- The use of canary tokens and their obfuscation.

Ловите моё новое выступление по теме OSINT -- про методы сбора информации по адресу электронной почты. Видеозапись выступения c Chaos Constructions 2021 будет здесь.

🎉 Анонсирую новую OSINT-утилиту для поиска существующих email по юзернейму.

Mailcat уже умеет проверять больше 25 почтовых провайдеров и находить больше 100 доменных алиасов.

📩 Для этого используются проверки через SMTP, API сервисов, а также попытки регистрации и авторизации (без уведомления владельцам).

Инструмент активно развивается, так что закидывайте фича-реквесты и stay tuned!

Вернулся к написанию статеек. Держите обзор нового интернет-сканера Netlas.io — разбираемся, какие в нём есть данные и как их использовать в OSINT.

MARPLE

New tool from
@Sox0j
(creator Maigret, YaSeeker, Mailcat).

It collect links contains nickname/name/surname in url from Google and DuckDuckGo search results.

https://github.com/soxoj/marple

#python #opensource #github

Давно не было апдейтов по моей активности. Надо держать в курсе коллег по цеху и подписчиков, так что исправляюсь. 🙂

🕵️‍♂️ Maigret. Медленно продолжаю совершенствовать свой уберпоиск по нику на >2500 сайтах. Появилась сборка для запуска в Windows без зависимостей, ускорена работа, правятся ложные срабатывания. Планирую развитие серверной части maigret-adapter для интеграции с другими инструментами и запуска приватного облачного Maigret Cloud.
@maigret_osint_bot пока не развивается, но в HTML-отчётах появились ссылки для жалобы на ошибки детекта. При возможности жалуйтесь! ⭐️

📖 Marple. Активно развиваю новую утилиту для сбора данных по нику из поисковиков. Для этого требуется принципиально другой подход, поэтому это не включено в Maigret. Пришлось разработать свою систему оценки ссылок на "мусорность" и переписать под себя одну из библиотек для работы с поиском. Сейчас поддерживается больше 10 поисковиков, включая региональные; есть загрузка и анализ метаданных PDF-документов; поддержка прокси и экспорта в CSV. Количество источников будет ещё больше, также расширится система плагинов. 👍

🐱Mailcat. Не мой, но очень крутой инструмент для проверки существования email, в который я активно коммичу. Появилась поддержка новых почтовых провайдеров, все проверки сделаны асинхронными, что в целом повысило скорость и стабильность. 🔧

Другие новости одной строкой:
- написал руководство и опубликовал инструменты по задачам, связанным с поиском вариантов ников человека;
- доработал GHunt для извлечения контактных данных владельца почты (другие почты, адреса, места учебы и работы) и канонического вида email;
- выложил на GitHub ещё несколько новых проектов, но их пока обсуждать рано, так что ознакомьтесь сами, если любопытно;
- завёл Patreon: там будут непубличные кейсы расследований, приватные утилиты и доступ к Maigret Cloud (на поддержку которого неминумо потребуются финансы); ну и если просто хотите поддержать меня, то буду рад донатам. 🙂

Stay tuned, не теряйте!

🛠 В процессе написания с нуля очередной консольной OSINT-утилиты я понял, что очень не хватает шаблона исходного кода для подобных инструментов.

⭐️ Хотелось бы, чтобы из коробки программа поддерживала возможность получения данных по > 1 цели, могла экспортировать данные в CSV/PDF/HTML, умела интегрироваться с другими инструментами в качестве библиотеки и т.д.

👉 Погружаться в пучину перфекционизма я не стал и уже выложил скелет проекта на GitHub. В ближайшее время буду допиливать, используя опыт разработки всех остальных инструментов.

👍 Использовать его очень просто: достаточно нажать на кнопку "Use this template" в интерфейсе GitHub.

🎤 В очередной раз подискутировал про OSINT, на этот раз с точки зрения приватности и защиты от слежки. Обсудили всё: от тривиальных рекомендаций скрывать персональные данные до советов по выбору защищённого телефона и провайдеров виртуальных номеров.

👉 А ещё 9 февраля я буду выступать с докладом "Приватность в интернете" в хакспейсе Campfire. Записи не будет. Приходите!

UPD. Дата доклада сдвинулась. Следите за анонсами в канале Campfire!

🔥 Запись нашего первого подкаста (только вторая половина, увы).

Вопросы, лучи поддержки и предложения направляйте в @deep_qu3st!

При поддержке Горизонта Событий и OSINT mindset. ⭐️