Script

OsintRat - OSINT and BigData at minimum prices

Дисклеймер:

Дисклеймер

Все данные, содержащиеся в базе этого бота, являются синтетическими и были сгенерированы автоматически. Любые совпадения имён, контактной информации, идентификаторов или других персональных данных с реальными лицами являются случайными и непреднамеренными. Проект предназначен исключительно для тестирования и демонстрации; не использовать в коммерческих или оперативных целях.

​

История

Сидел я как-то вечером, скучал и думал, что бы замутить для портфолио. И выбор мой пал на Big Data.
«Ничего лучше, чем большой справочник людей, быть не может», — подумал я.

Но где взять столько людей? Правильно — нагенерировать!
Вооружившись кофе, я принялся писать генератор людей. Через пару часов у меня уже был неплохой улов — 100 миллионов строк.
Конечно, не все записи уникальны (100 млн фамилий и имён сложно нагенерировать, согласны?), но ведь это всё только для тестов, правда?


Мой выбор пал на Meilisearch.
Быстренько нашаманив скрипт, я начал заливать эти 100 млн JSON-записей и индексировать их в базе.
Конечно, не обошлось без проблем.

Какое же было моё удивление, когда поиск по точному совпадению номера телефона в базе из 100 млн записей занимал всего несколько секунд!

Разумеется, я решил всё это зашаманить в виде Telegram-бота.
Позже, возможно, я допилю REST API (хотя непонятно, зачем — часть функционала уже реализована в Meilisearch).
Но я — даун, мне можно.

Конечно, я выложил это чудо в паблик и запустил тестового бота, где можно посмотреть функционал и попробовать поиск.
Базу, естественно, я не грузил:
во-первых, она весит около 200 ГБ,
а во-вторых — зачем вам сгенерированные данные?

Искать можно по имени, номеру телефона, почте, Telegram ID или username.
Скорость поиска зависит от загрузки: от нескольких секунд до нескольких часов.
База иногда уходит в оффлайн на перекур, но при этом бот собирает все запросы в очередь —
и как только База возвращается онлайн, все запросы обрабатываются по порядку.


https://github.com/NYXBAM/OsintRat —Вот исходники бота, и бэкенд.

Telegram: Launch @FirstRatHobot

You can contact @FirstRatHobot right away.

t.me

— Собственно сам бот, где вы можете посмотреть функционал и попробовать "найти себя"

Важно: все профили в этой базе — выдуманные. Совпадения с реальными людьми — чистая случайность. База создана только для тестов и экспериментов — не используйте её для реальных решений.

Автор проекта не несёт ответственности за любой возможный ущерб, прямой или косвенный, возникший в результате использования данного сервиса или базы данных. Проект создан исключительно в учебных и тестовых целях.