Подборка качественных открытых датасетов по темам: от сельского хозяйства и биологии до климата и компьютерных сетей.
bytewax/awesome-public-real-time-datasets
Подборка публичных и платных источников данных в реальном времени: финансы, транспорт, погода, новости, кибербезопасность и другие сферы.
- Звёзды
- 2,954
- Форки
- 259
- Открытые issues
- 22
- Последний коммит
- 3 месяца назад
Что это?
Подборка в стиле awesome включает источники, которые передают данные в реальном времени через HTTP-опрос, WebSocket или потоковые протоколы. Источники разделены на бесплатные и платные и сгруппированы по тематикам: данные о криптовалютах и фондовом рынке, общественном транспорте и отслеживании автомобилей, погоде и состоянии окружающей среды, новостные API, ленты киберразведки и спортивные результаты.
Для каждого источника приведена ссылка на документацию поставщика и краткое описание содержимого ленты и способов доступа — например, через WebSocket endpoints, REST API или потоки в формате Kafka. В некоторых описаниях также указаны ограничения: например, лимиты запросов или задержки в бесплатных тарифах.
Подборка пригодится разработчикам, которые создают потоковые конвейеры, дашборды или прототипы и ищут реальные данные для тестирования. В ней также есть несколько генераторов синтетических данных, позволяющих обходиться без внешних источников.
Ключевые возможности
- 01Охватывает ленты данных о криптовалютах, акциях, валютном рынке и других рынках, доступные через WebSocket или REST
- 02Включает источники данных для отслеживания общественного транспорта, железнодорожного, авиационного и морского транспорта
- 03Содержит ленты данных о погоде, качестве воздуха, сейсмической активности и показаниях датчиков окружающей среды
- 04Разделяет бесплатные источники и платных коммерческих поставщиков
- 05Включает ленты киберразведки и генераторы синтетических данных для тестирования
Сценарии использования
- Найти ленту рыночных данных в реальном времени для прототипа торгового дашборда
- Подобрать данные о транспорте или погоде в реальном времени для демонстрации потокового конвейера
- Генерировать синтетические потоки событий для тестирования Kafka- или Pulsar-потребителей
Что важно знать
- У многих перечисленных источников в бесплатных тарифах есть ограничения, либо для доступа нужны платный тариф или API-ключи.
- Некоторые варианты находятся в бета-версии или не являются официальными, а для некоторых требуется скрейпинг, поэтому они могут измениться или перестать работать без предупреждения.
Темы
Частые вопросы
- Что такое awesome-public-real-time-datasets?
- Подборка публичных и платных источников данных в реальном времени: финансы, транспорт, погода, новости, кибербезопасность и другие сферы. Подборка в стиле awesome включает источники, которые передают данные в реальном времени через HTTP-опрос, WebSocket или потоковые протоколы. Источники разделены на бесплатные и платные и сгруппированы по тематикам: данные о криптовалютах и фондовом рынке, общественном транспорте и отслеживании автомобилей, погоде и состоянии окружающей среды, новостные API, ленты киберразведки и спортивные результаты.
- awesome-public-real-time-datasets можно использовать бесплатно? Какая у него лицензия?
- awesome-public-real-time-datasets распространяется с открытым исходным кодом под лицензией CC0-1.0. Перед использованием в коммерческих продуктах проверьте условия лицензии.
- awesome-public-real-time-datasets всё ещё поддерживается?
- Обновлялся за последние 6 месяцев. Последний коммит в awesome-public-real-time-datasets — 10 июл. 2026 г..
- Для чего можно использовать awesome-public-real-time-datasets?
- Найти ленту рыночных данных в реальном времени для прототипа торгового дашборда Подобрать данные о транспорте или погоде в реальном времени для демонстрации потокового конвейера Генерировать синтетические потоки событий для тестирования Kafka- или Pulsar-потребителей
- Где скачать awesome-public-real-time-datasets?
- Исходный код и инструкции по установке — на GitHub: https://github.com/bytewax/awesome-public-real-time-datasets
Описание создано ИИ на основе README проекта. Статистика GitHub обновляется ежедневно.
Похожие проекты
Сервер для локального распознавания речи в реальном времени: потоковый ASR, разделение по говорящим, перевод и API, совместимые с OpenAI и Deepgram.
Подборка библиотек, пакетов и ресурсов с открытым исходным кодом для количественных финансов: оценка стоимости, бэктестинг, данные и многое другое.
Открытая экосистема для разработки API: отправка REST-, GraphQL-, WebSocket-, SSE-, Socket.IO- и MQTT-запросов через веб-приложение, десктопные приложения и CLI.
Открытая платформа данных на Python, объединяющая финансовые и другие источники и предоставляющая к ним доступ из Python, Excel, AI-агентов и через REST API.
Открытая база спецификаций, цен и возможностей AI-моделей, которую пополняет сообщество и которая доступна через публичный API.