Компендиум аналитика: резюме

Как оказалось, многие еще недостаточно хорошо владеют английским языком, чтобы читать документы ЦРУ в оригинале.

Но это не повод оставлять их за бортом развития аналитических навыков!

Специально для всех, кто еще не успел или не смог ознакомиться с "Компендиумом аналитика" мы подготовили краткий перевод резюме с нашими аннотациями.

Приглашаю вас с ним ознакомиться по ссылке ниже:

https://telegra.ph/Kompendium-analitika-CRU-s-kommentariyami-07-19

Спасибо Роману за поддержку! Если кто не знает, Роман Ромачев - это один из первопроходцев частной разведки в России. Кто не подписался на его канал - рекомендую это сделать!

‼️ Уважаемые коллеги

Вы часто спрашиваете, как мы формируем знания в профессиональной разведывательной деятельности, откуда черпаем сведения в области стратегической разведки, какими источниками пользуемся для получения разведывательной информации и данных в рамках экономической, корпоративной, разведки и в других видах деятельности.

Информация - один из основополагающих ресурсов в современном мире. Для разведывательной деятельности необходимы источники достоверной информации. Из массы источников в информационной среде используем компетентные, надежные каналы, проверенные в разных сферах разведывательной деятельности.

Для вас мы подготовили перечень таких каналов:

▶️ Russian OSINT - все об OSINT и информационной безопасности

▶️ Масалович и партнеры: OSINT - Канал КиберДеда, так же известного как "Любимый OSINTер Кремля", он же "Леший".

▶️ Поисковик ZВИ - наш источник в оценке военного потенциала зарубежных стран

▶️ Mycroft Intelligence - Техно-маг и фокусник OSINT. Фундаментальные мысли о разведывательном анализе

▶️ Islamic World News - наши глаза на Ближнем Востоке

▶️ ДруZья Кабельо - Канал нашего партнера и Профессора МГУ Манойло А.В., руководителя магистратуры "Информационные и гибридные войны"

▶️ Писарь из спецнаzа - наш источник с передовой СВО

▶️ Freedom F0x - наш информатор в хакерском сообществе

▶️ Кибернетика - прикладная философия

И это далеко не полный список 😉

Помнится, я вам обещал показать, как с помощью SimilarWeb можно примерно прикинуть рентабельность того или иного предприятия.

Сразу оговорюсь, это цифры примерные, как средняя температура по больнице. Это не точные данные, а отправная точка для дальнейшего исследования.

Выруч. = (Пос. * Конв.) * Ср.чек

Вот такая простая формула вычисления прибыли. Мы умножаем количество посетителей, например, интернет-магазина, на коэффициент конверсии и затем умножаем на средний чек.

Поскольку мы делаем прогноз, то две из трех переменных мы вынуждены сделать константами и приравнять их к среднему по отрасли.

Теперь наша задача узнать средние, к примеру, для интернет-магазина косметики. По исследованиям DataInsight за 2020 год конверсия в этой отрасли составляет 5,1% [1]. По тем-же данным, средний чек составил 1083 рубля.

Далее возьмем магазин Подружка [2] и увидим, что у них 909 тыс. посетителей за последний месяц. 45% - bounce rate, то есть тех, кто не стал смотреть дальше первой страницы. Вычитаем их из общего количества. Они точно ничего не купили.

Итого получаем 409 тыс. посетителей. Еще где-то треть это боты и краулеры, так что их тоже в минус. Ну и округлим количество посетителей до 300 тыс. Теперь считаем:

300 000 * 0,051* 1083 = 16 569 900 руб.

Вот таким нехитрым способом можно навскидку прикинуть выручку интернет-магазина.

Еще раз подчеркну, это не точные цифры, это просто прикидка, от чего мы будем дальше плясать. Но инструмент несложный и применим в любой ситуации.

#инструментарийаналитика

Продолжим тему полезных расширений для браузеров. У вас бывало так, что браузер весь забит вкладками и потому съедает всю оперативку? У меня — постоянно.

Чтобы более эффективно работать со вкладками я нашел для себя One Tab Manager [1].

Что он делает? Одним кликом мыши он может отправить одну, несколько или даже все вкладки браузера в один удобный список на отдельной веб-странице.

Этот список остается активным. При нажатии на вкладку она открывается в отдельном окне и удаляется из общего перечня.

Особенно это удобно, когда вы открыли кучу вкладок по одной тематике и можете моментально их сгруппировать.

Но самое крутое - этот перечень можно опубликовать на отдельной веб-странице и отправить себе на сохранение или поделиться с коллегой по исследованию.

Лично для меня эта функция стала определяющей и сделала One Tab постоянным инструментом в моей повседневной работе.

Пользуйтесь на здоровье.

#инструментарий

Парсинг — дело очень неблагодарное. Почти каждый создатель сайтов решает изобрести велосипед, что делает некоторые ресурсы вообще не читаемыми машинами.

Дальше всех в этом деле зашли индусы. Наши программисты ковырялись неделю, чтобы настроить стабильный сбор информации с одного хитрого сайта, посвященного госзакупкам вооружений. И это люди, которые не одну собаку съели на машинном сборе информации.

Но человечество нашло решение этой проблемы. Имя ему RSS. Сегодня RSS — это один из самых удобных способов поженить парсеры и сами сайты для стабильного сбора информации без танцев с бубном.

Если коротко, RSS — это формат стандартизированной разметки, который сам показывает роботу, где и что лежит. Мол, это — заголовок, это — текст статьи, а это — мусор, его можно не собирать.

По моим подсчетам, более двух третей сайтов международных СМИ используют или RSS, или Atom для облегчения работы по сбору информации.

Встает вопрос — чем читать RSS. Таких решений пруд-пруди. Но лично у меня два фаворита — это Feedly [1] и RssOwl [2].

Первая — одна из лучших читалок для RSS, красивая, мощная, с кучей преднастроенных источников. Вам даже ничего искать не надо, просто нашли нужные источники в поиске и подписались на них. В общем, кто за эстетику и удобство — это в Feedly. Правда имейте в виду, что он немножко платный.

RssOwl — это олдскул. Как говорится, нет школы лучше, чем старая школа. Каждая RSS подключается вручную. Но! В RssOwl можно настроить семантику: если текст из RSS соответствует некоторым заданным ключевым словам — новость попадет в отдельную папку. Этакий Avalanche на минималках. К тому же бесплатно! Чего еще желать!

RssOwl — это моя первая любовь. Еще в Питере, работая в госструктурах, я с ее помощью настроил целую систему мониторинга, которой пользовались еще несколько лет после моего ухода.

Про RSS и парсинг сайтов мы еще с вами поговорим. Тема-то неисчерпаемая. И там есть очень много интересного. А пока — пользуйтесь инструментами на здоровье.

Брутфорс директорий сайта

Сегодня у нас в меню брутфорсинг. Что это такое и с чем его едят? Зачем он нужен? Что можно, а чего нельзя? А что по инструментам? Все ответы уже в статье.

https://telegra.ph/Brutfors-direktorij-sajta-07-23

#инструментарий

Какой-то очередной Вася пишет вам странные письма? Хотите проверить, надежна ли ваша почта? Не доверяете отправителю письма? Вы владелец интернет-магазина и нужно проверить покупателя?

Семь бед — один ответ. Есть простой как пять копеек сервис проверки репутации почты. Он так и называется Simple Email Reputation [1].

В коротком отчете человеческим языком будет сказано, подозрительная это почта или нет, была ли она замечена в уважаемых источниках информации, была ли она замечена в распространении всякой гадости, возможен ли спуфинг.

Все максимально емко и по делу. Ничего лишнего. Только концентрированная полезная информация.

Пользуйтесь на здоровье!

#инструментарий

Есть у меня один инструмент, который разделил мою жизнь на до и после. Инструмент этот yED Graph Editor [1]. Это не просто какой-то очередной отрисовщик связей, это целый аналитический швейцарский нож.

Что по функционалу:

Во-первых, это сам по себе отличный редактор связей. Я уже давно не делаю ресерчи в текстовых редакторах, а сразу рисую схему взаимосвязей. Это удобнее и нагляднее, чем писать текст. Текст все равно потом придется писать, но с визуалом проще думается.

Во-вторых, к каждому объекту можно прицепить гиперссылку с первоисточником, что очень и очень полезно. Тоже самое ты делаешь и в обычном тексте. Но тут это просто более эстетично выглядит.

В-третьих – это возможность добавлять текст аннотации к конкретному объекту. Опять-же, это крайне удобно, вся информация по объекту в одном месте.

В-четвертых, он позволяет раскрасить связи и объекты как пожелаешь, что упрощает их группировку. Собственно, операции можно проводить сразу со всей группой.

Ну и в-пятых, в него вшит отличный механизм по управлению вашей схемой. Не нравится, что получается? Пусть с этим разбираются роботы!

Собственно, я и дальше могу перечислять его преимущества, потому что их реально много. Но вместо тысячи слов я рекомендую его попробовать на практике. Он скажет все сам за себя.

Резюме. Фактически мы имеем перед собой очень мощный инструмент для визуализации связей, текстовый редактор и коллекцию гиперссылок в одном флаконе.

Пользуйтесь на здоровье!

#инструментарий

Есть еще один инструмент, который помогает мне в работе. А точнее, два. Это менеджер закладок Raindrop [1] и инструмент для аннотаций Liner [2].

В чем смысл:

Raindrop позволяет не просто делать закладки, а создавать html-копии страниц. Даже если страницу снесли — у меня все равно остается сохраненная копия. Вторая фича — возможность создавать каталоги папок. Что очень удобно, когда ведешь ресерч по большому количеству объектов. На каждый объект - своя папка.

Liner позволяет выделять и сохранять конкретные куски текста, а также писать к ним заметки. Liner выступает в роли соковыжималки, когда из текста убирается вся вода и остается только самое главное. И это самое главное потом разбавляется комментариями и аннотациями. Ну и расшарить свои заметки и выжимку можно парой кликов.

Но от Liner я, скорее всего, откажусь. А все потому, что аналогичный функционал появился и в Raindrop. А зачем за одну функцию платить дважды? Но здесь уже дело вкуса и привычки. На вкус-то все фломастеры разные.

Так что кому нужно перерабатывать большие объемы текста — пользуйтесь этими инструментами на здоровье.

#инструментарий

Одна из бед современного образования — нигде не учат нормально писать. Ну серьезно. Письменная речь — это один из важнейших инструментов маркетинга. Нам нужно привлекать, доказывать, обосновывать, продавать. А как это сделать если ты не умеешь толком писать?

В школе мы пишем сочинения, где есть «правильное мнение» учителя автора и ваше неправильное. Да чего уж там говорить, учителя-то и сами далеко не всегда умеют хорошо писать. Научить могут, а сами писать — нет. Парадокс.

В университете мы учимся писать по-научному. То есть перегружая текст умными терминами, которые зачастую сами не понимаем. Мы пишем очень длинными сложноподчиненными и сложносочиненными предложениями с несколькими оборотами. А все потому, что так было принято. Не пишешь сложно — не ученый.

А у меня все было еще хуже. На «академическую» манеру писания навесили тонну канцеляризмов из моей чиновничьей жизни. В общем, то, что я писал, читать было решительно невозможно. Я страдал пока писал, остальные страдали пока читали. Случай был клинический.

Ситуацию отчасти исправила одна из моих бывших руководителей, филолог по образованию. Она познакомила меня с Розенталем [1] и базой информационного стиля. Хотя бы за это я ей очень благодарен.

Но все равно для консалтинга мой слог не подходил решительно. И путем долгой и мучительной практики мне приходилось выдавливать по капле из себя жлоба ученую канцелярскую крысу.

К чему это я все веду. Если бы у меня в начале карьеры появилась книга «Пиши-сокращай» Максима Ильяхова, то в моей жизни было бы на порядок меньше страданий [2].

Правда, если бы такой книги не было, я бы сам ее написал. Потому что информационный стиль в редакции Ильяхова очень сильно коррелирует с нормами стилистики, которые мы приняли у себя в компании.

Это одна из лучших книг по русскому языку для консалтера кого угодно. Очень ее рекомендую к прочтению, даже если у вас с письмом все хорошо. Будет еще лучше!

#книжнаяполка

Сегодня у нас на главное блюдо не просто инструмент. О, нет! Легенда! Этот инструмент был создан никем иным, как небезызвестным Джулианом Ассанжем. И называется он Surfraw [1].

В чем смысл?

Ассанж изначально считал, что нужно прекратить кормить корпорации добра за счет рекламы и сбора данных и вернуться к «богоугодному» (sic: серьезно, так он и говорил!) терминалу.

И как оказалось, он был прав. Осуществлять поиск из терминала гораздо проще, чем бегать по закладкам и вбивать заново поисковые запросы.

Фактически, Surfraw — это предшественник метапоисковиков. Вы вбиваете в терминал следующий запрос:

surfraw google site:.gov filetype:pdf biden

И получаете полноценную поисковую выдачу, по которой вы можете осуществлять навигацию с помощью текстового браузера lynx. Если выдача не нравится — просто меняем поисковик:

surfraw yahoo site:.gov filetype:pdf biden

Ну а если работа в терминале вас не устраивает, то можете запрограммировать Surfraw на открытие вашего дефолтного браузера с данным запросом в нужной поисковой системе.

Ну и я рекомендую навесить VPN, чтобы не светить своим IP'шником направо и налево. И, конечно, избегать бана капчи за слишком частые запросы.

Само собой, что для работы с Surfraw настоятельно рекомендуется Linux [2]. Но вы ведь уже поставили себе виртуальную машину, правда [3]?

Поиск в терминале - вещь своеобразная, к ней надо привыкнуть. Но когда привыкнешь - уже не отвыкнешь. Так что рекомендую!

#инструментарий

Сегодня буду краток. Если у вас проблемы с текстами, с запятыми и грамматикой, то на помощь придёт сервис Орфограммка [1].

Подгружаете текст и он автоматически покажет все косяки.

Это особенно удобно, когда нужно вычитать н-цать страниц текста, а дедлайн сгорел ещё вчера.

Пользуйтесь на здоровье!

#инструментарий

Говорят, что FlightRadar – это просто красивые самолетики и ничего более. Но это не так. И я сейчас это вам докажу.

С помощью FlightRadar вообще-то можно спокойно следить за активностью НАТО в целых регионах.

Как это делается? Да очень просто. С помощью FlightRadar можно без труда отслеживать перемещения самолетов радиолокационной разведки НАТО.

Вот, например, самолет с позывными NATOO1 регулярно трется у границ России. Я его замечал около Калининграда, а сейчас он очень часто летает около Румынии. Пока я пишу этот пост этот самолет уже вылетел из базы в Германии и направляется куда-то в сторону Восточной Европы.

Если интересно, можете последить за ним самостоятельно [1]. Из интересного могу предложить также понаблюдать за другим разведчиком из этого-же семейства [2].

Ну и в целом, рекомендую поглядывать за тем, кто вылетает и приземляется на NATO Air Base Geilenkirchen. Судя по всему, именно оттуда ведется основная активность по наблюдению и разведке.

#запискианалитика

Все просто с ума сходят по возможному визиту Нэнси Пелоси в Тайвань.

Этот ажиотаж привёл к тому, что FlightRadar закрыл доступ к передвижениям этого самолёта.

Всё коллеги в нашем дружном OSINT-комьюнити пригорюнились и сетуют на жестокую судьбу поведение сервиса.

А в чем беда-то? Таких сервисов на пятачек дают пучок. И рубь на сдачу.

Кто хочет следить за передвижениями нашей маразматичной бабульки - используйте FlightAware [1], например (борт SPAR19). И никаких проблем.

#инструментарий

Случается так, что на проведение полноценного OSINT-расследования в отношении проверяемого иностранного юрлица просто нет времени.

Когда мы попадаем в ситуацию, что информация была нужна «еще вчера», единственный выход – это искать клад. А именно искать такой источник информации, который ответит на все наши вопросы быстро, полно и достоверно. И такое бывает. Редко, но бывает.

Для меня таким ресурсом-кладом стал EMIS [1]. Из всех перекупов информации он мне нравится больше всех. Фактически, EMIS – это недорогая замена DnB, Orbis и иже с ними.

В чем профит? На EMIS собираются досье по компаниям из более чем 100 стран мира. Особенно хорошо сервис показал себя в работе с Юго-Восточной Азией. В частности, с Индонезией и Филиппинами. Но есть базы и по старушке Европе, Латинской Америке и много кому еще.

Что самое важное – либеральные цены. За 10-20 баксов вы получите полный отчет о компании, включая экономику, менеджмент и проблемные места. И это при том, что при проверке европейской компании только бухгалтерский баланс будет стоить 10-15 вечнозеленых. Такое досье спасет вас в ситуации дефицита времени и ресурсов.

Кстати, они еще делают маркетинговую аналитику иностранных рынков, экономики стран и целых макрорегионов. Так что если нужно заходить на рынок лесозаготовки в какой-нибудь стране Центральной Америки – за такой инфой это к ним.

Пользуйтесь на здоровье!

#контрагенты

А вечер-то перестает быть томным. Решил я в очередной раз посмотреть на ситуацию в Украине глазами американских парламентариев и вот те на. Нашел такую новость.

18 июля 2022 года верхняя палата парламента США, в простонародье Сенат, утвердил бюджет на военные мероприятия на 2023 фискальный год [1].

И угадайте, чего там нет? Правильно, ни цента на поддержку Украины. Не верите? Убедитесь сами.

Откройте страницу 927 и посмотрите на раздел UKRAINE SECURITY ASSISTANCE INITIATIVE. За прошлый год сумма составила 800 млн долларов. А в планах на 2023 фискальный год красуется гордо цифра НУЛЬ.

Какие из этого выводы? Вариантов море. Может, будут выделять помощь внебюджетными средствами или еще каким-нибудь хитрым способом. Может, будут потом корректировать бюджет в зависимости от ситуации.

Но если все пойдет по оптимистичному сценарию и США оставит Украину без серьезной и планомерной финансовой поддержки – это вселяет очень осторожный, но все же оптимизм.

Вот такие у нас прохладные истории на ночь глядя.

#запискианалитика

Не отдаю, а отрываю от сердца. С этим инструментом у меня связана огромная общая история.

Собственно, история. Когда я только заходил на должность руководителя, нам была поставлена задача организовать мониторинг иностранных СМИ. Причем не хуже, чем в LexisNexis, но что самое страшное – без бюджета.

С этой задачей я прошел все стадии принятия горя: от гнева и отрицания до полного принятия и смирения.

Для реализации задачи у меня были разные идеи: начиная от сбора RSS в каком-нибудь ридере, до формирования полного списка иностранных СМИ в Avalanche. Последнее кстати мы недавно реализовали.

Но все это были попытки с негодными средствами. Дедлайн приближался, количество седых волос на моей голове увеличивалось. И вот, в один прекрасный (буквально прекрасный) момент я нашел его. Самый что ни на есть настоящий клад. Сайт EMM NewsBrief [1].

Это сайт бесплатной (БЕСПЛАТНОЙ) системы мониторинга иностранных СМИ. В ней уже более 12 тысяч источников.

Для сравнения в российской системе, которую нельзя называть, всего чуть более 20 тысяч иностранных источников. И большая часть из них - мусор. За нее просят более 100 тысяч вечнодеревянных в месяц.

Короче говоря, по моим подсчетам, 12 тысяч источников покрывают 90% значимой мировой повестки.

Как им пользоваться? В NewsBrief вшита панель формирования запроса. Стандартный синтаксис поискового запроса с «И», «ИЛИ» и другими операторами. Присутствует фильтр по периоду, региону, языку и источникам. И все это скрывается под уютной плашкой «Особый поиск».

Почему я перестал пользоваться этим источником? Все просто. Он был создан и вертится на серверах Европейской Комиссии. А государственные дела нельзя решать на вражеских недружественных сайтах. Но для личных целей – более чем подойдет. Главное, не забывайте предохраняться. Tor, VPN, все дела.

Пользуйтесь на здоровье. Это одно из тех решений, за которые стоит брать хорошие деньги. Но оно, по недоразумению, висит в открытом доступе.

#инструментарий

С началом спецоперации GEOINT стал как никогда популярным. Меня часто спрашивают, а что я могу порекомендовать из многочисленных сервисов. Вот прямо для серьезной работы.

По хорошему говоря, серьезной работы без бюджета не бывает. Если нужны реальные, детализированные спутниковые снимки, то их нужно заказывать у первоисточника. К примеру, у Maxar дочки Роскомоса [1]. Она тоже с ними сотрудничает. Ну, сотрудничала.

Если же серьезная работа есть, а бюджета нет — приходится работать с тем, что есть. Из всех бесплатных и условно-бесплатных сервисов, которые я пробовал, мне больше всего нравится Sentinel Playground от Sentinel Hub [2].

Что в нем хорошего?

Во-первых, доступ к высокодетализированным снимкам с шести спутников. Конечно, трубу на крыше своей дачи там не рассмотришь, но общие контуры видны и понятны.

Во-вторых — высокая актуальность. Карты обновляются чуть ли не каждый день.

Третье, и самое важное, это история. Вы можете посмотреть, как объект интереса выглядел вчера, две недели назад и в бородатом 2018 году.

Ну и четвертое, на закуску, это фильтры. Тонны фильтров. Фильтры растительности, воды и всего, чего угодно. С их помощью вы сможете наблюдать за вырубкой девственных лесов Амазонии не вставая с удобного дивана.

Если интересны обзоры на различные GEOINT инструменты — ставьте реакции, их у меня еще много.

#инструментарий