Лучшие open source проекты: Данные и аналитика

Открытый Rust-набор инструментов для записи, визуализации, запросов и потоковой передачи мультимодальных данных робототехники и датчиков во времени.

Фреймворк для веб-скрейпинга на Python: от одиночных HTTP-запросов и stealth-браузеров до парсинга и параллельного обхода сайтов с экспортом данных.

Библиотека Python для арифметики с плавающей точкой произвольной точности, специальных функций и численных методов.

Промежуточный язык визуализации, который позволяет AI-агентам превращать компактные спецификации графиков в готовые графики для Vega-Lite, ECharts, Chart.js, Plotly и Excel.

Статически типизированный язык программирования и калькулятор для научных вычислений со встроенными физическими размерностями и единицами измерения.

Быстрый вычислитель выражений над массивами NumPy: обрабатывает выражения вроде 3*a+4*b частями, экономит память и использует несколько ядер.

Бесс dependency-free движок на TypeScript и компонент для React или script-тега, который превращает данные проекта в JSON в интерактивную диаграмму Ганта с перетаскиванием задач.

Библиотека для Rust, которая строит графики 29 типов в SVG или PNG/JPEG/WebP/AVIF без браузера.

Библиотека Python для создания оформленных таблиц из DataFrame в pandas или Polars с выводом в HTML или изображение.

Полнофункциональный инструмент для изучения баз данных: проектирование, навигация, документирование и анализ схем, включая ERD-диаграммы для крупных и запутанных баз данных.

Apache Superset — веб-приложение для self-service бизнес-аналитики: исследуйте данные, создавайте графики и дашборды, выполняйте SQL-запросы к разным базам данных.

Распределённое OLAP-хранилище для аналитики с низкой задержкой по потоковым и пакетным данным, поступающим из Kafka и S3.

Локальное озеро данных по китайским акциям A-share в Parquet: 55 наборов данных с ежедневным обновлением, поддержкой point-in-time и read-only MCP-сервером для AI-агентов.

Инструмент на Java для экспорта миров Minecraft и Hytale в сцены USD (Universal Scene Description) для 3D-анимации и рендеринга.

Создаёт интерактивные и удобные для чтения ER-диаграммы по схеме базы данных с настройкой без конфигурации через веб-URL или CLI.

Python-инструмент и CLI для скачивания сообщений чата с трансляций, видео, клипов и прошедших эфиров на YouTube, Twitch и Zoom без авторизации.

Лёгкий Python-пакет для поиска новостей Google News с выдачей результатов в JSON и возможностью извлекать полный текст статей.

Быстрый локальный парсер PDF и документов на Rust: извлекает текст с координатами блоков, поддерживает Tesseract или HTTP OCR и выдаёт Markdown, JSON или обычный текст.

Приложение для компьютера и веба, позволяющее исследовать данные и выполнять SQL-запросы к ClickHouse, с опциональной поддержкой LLM.

Декларативный движок для генерации и отображения SVG-инфографики из текстового синтаксиса, рассчитанный на создание с помощью ИИ и потоковый вывод.