データ・DB

ShayanAbbas1/dbdelve

Electron不要、Rust製の軽量マルチDBクライアント「DBDelve」 — DBDelveはElectronやJVMを使わず、RustとGPUIで作られた軽量なデータベースクライアントです。起動が速く、数百万行のテーブルも滑らかにスクロールでき、Postgres・MySQL・SQLite・MongoDB・Redisなど多数のDBに対応しています。有料化しない方針を掲げ、重いGUIツールの代替を探す開発者向けの早期段階プロジェクトです。

Fast and lightweight DB Client made in Rust and GPUI.

kividbio/kividb

RedisをRustで置き換える高速KVS「KiviDB」 — KiviDBはRust製のマルチスレッド型Redis/Valkey互換データベースで、RESPプロトコルに対応し既存クライアントをそのまま使えます。全文検索やベクトル検索を標準搭載し、32コアでパイプラインGETをRedis 8の約9倍、Dragonflyの2.3倍という性能を実現しています。ライセンスはAGPL-3.0です。

A fast, multi-threaded Redis® and Valkey alternative written in Rust: drop-in compatible, with full-text and vector search built in

Renhuai123/ziwei-doushu

倪海厦『天紀』体系に基づく紫微斗数オープン排盤エンジン — 中国伝統占術「紫微斗数」の排盤アルゴリズム・四化システム・格局知識ベースを実装したTypeScript製オープンソースです。67.5万命盤×13次元=877万段の解読データセット（圧縮後56.6GB）を無償公開しており、古典原典データと組み合わせた本格的な占術エンジンとして研究・開発用途に活用できます。

紫微斗数开源排盘引擎 — 基于倪海厦《天纪》体系，含完整排盘算法、四化系统、格局知识库、古籍原文数据

malisper/pgrust

PostgresをRustで書き直した新エンジン「pgrust」 — pgrustはPostgresをRustで再実装したプロジェクトで、ワイヤー互換・SQL互換を保ちつつ内部を刷新しています。JITコンパイル型のベクトル化クエリエンジン「Gravity」、スレッドベースの並行処理、クエリスケジューラ、統合メモリ管理などを備え、v0.4-betaとして開発が進行中です。

Postgres rewritten in Rust, now faster than Postgres and Clickhouse

dimthink/PriceAI

AIサブスク＆APIの料金比較レーダー — ChatGPT PlusやClaude Pro、Gemini、Grok、DeepSeek APIなど200以上のAIサブスク代理販売・中転APIサイトの価格を集約し、公式価格を基準に最安値・在庫・倍率・リスクを一覧表示する比較ツールです。Next.js＋Supabase製で、安くAIを使いたい個人や中転API利用者に便利です。

AI 订阅卡网渠道比价工具：聚合100+卡网渠道包含 ChatGPT、Claude、Gemini、Grok 等多渠道报价，展示有货最低价、库存状态和原站购买链接。

ErTasselli/OpenTerminal

月額2000ドルの端末が無料データで自宅に — 本物のトレーディング端末は月2000ドル以上しますが、本リポジトリは無料で公開されている市場データ複数系統をフォールバック構成で束ね、APIキーや課金なしでキーボード操作中心のターミナル風ダッシュボードを実現します。cloneしてnpm installするだけで1分以内に起動でき、個人投資家やトレーダー向けの代替手段として注目されています。

A Terminal-style trading dashboard built entirely on free public market data. No API keys, no subscriptions.

project-minigraf/minigraf

SQLiteのような組み込み型・時間遡行対応グラフDB — MinigrafはDatalogクエリとバイテンポラル（トランザクション時間＋有効時間）の時間遡行機能を持つ、単一ファイルの組み込みグラフDBです。SQLiteのグラフ版という位置づけで、AIエージェントやモバイル、ブラウザ上で動作し、再帰的な多段グラフ探索やLLMが生成しやすい簡潔な文法が特徴です。

Embedded graph memory for AI agents, mobile apps, and the browser.

dbt-labs/dbt-charts

SQLダッシュボードをYAMLで宣言的に定義するdbt-charts — dbt LabsによるdCTは、SQLでデータを定義しつつYAMLで見せ方を宣言する新しいダッシュボード記述方式です。AIエージェントが書きやすく人間が監査しやすい設計で、「バイブコーディング」による乱雑な可視化基盤の問題を解決します。CLIやMCP対応で、AI時代のBIツールとして注目です。

Declarative YAML around SQL for dbt-native dashboards: easy for agents to write, easy for humans to audit.

ModernRelay/omnigraph

ブランチ機能を備えたオブジェクトストレージ上のグラフDB — Omnigraphは、Lance/Arrow/DataFusionを基盤にオブジェクトストレージ上で動くRust製グラフデータベースです。型付きオントロジーによる整合性保証、Git風のブランチ機能、ベクトル・BM25・グラフ検索の統合クエリを備え、複数AIエージェントが共有する永続的な世界モデルを支えます。

Object-storage native graph database with branching and typed ontology

gosom/google-maps-scraper

Googleマップから営業リード情報を自動収集するOSSスクレイパー — 店舗名・住所・電話番号・メール・評価・座標などをGoogleマップから抽出するGo製OSSツールです。CLI・Web UI・REST APIに加え、Claude CodeやCodexなどAIエージェント向けSkillsにも対応し、自然言語で検索条件を伝えるだけでリード収集を自動化できます。分散スクレイピングにも対応し、営業リスト作成や市場調査に活用できます。

scrape data from Google Maps. Extracts data such as the name, address, phone number, website URL, rating, reviews number, latitude and longitude, reviews,email and more for each place

opengeos/GeoLibre

ブラウザで完結する軽量クラウドネイティブGIS — GeoLibreはTauriとMapLibre GL JS、DuckDB-WASMを組み合わせ、ブラウザ・デスクトップ・モバイル・Jupyter上で動く軽量GISです。1,000種類以上の地形・水文・LiDAR解析ツールをWebAssemblyで完全ローカル実行でき、MapLibreやCesiumなど4種のレンダリングエンジンを切り替え可能な点が既存GISツールとの差別化ポイントです。

A lightweight, cloud-native GIS platform for visualizing, exploring, and analyzing geospatial data. It runs in the web browser, on the desktop, on mobile, and inside Jupyter notebooks.

shirok-tech/oracle-ai-ready-data

OracleのAI対応度を診断しSelect AI導入準備を支援 — Oracle DatabaseのメタデータをスキャンしてAI機能のレディネスを評価し、日英対応のMarkdown/HTMLレポートを生成するツールです。v0.4.0ではテーブル/カラムの注釈やドメイン関連性を評価する「AIセマンティクス readiness」機能が追加され、Select AIのNL2SQLやRAG導入前のレビュー可能なセットアップパッケージ作成まで支援します。

bilawalsidhu/gods-eye-view

公開データで作る、ブラウザ上のスパイ衛星視点 — 航空機・船舶・衛星・地震・交通・公開カメラなど実在のオープンデータを、フォトリアルな3D地球儀上でリアルタイム可視化するツールです。声で操作できるAIエージェント連携も特徴で、GitHub Trending 1位やProduct Huntでも話題になりました。OSINTや地理空間分析に興味がある人におすすめです。

A spy satellite simulator in your browser, except the data is real. Live open source spatial intelligence on a photorealistic 3D globe.

gilnett/learned_index_lab

RustでPGM学習インデックスを実装 — B-TreeやLSMに代わる学習型インデックス構造「PGM-index」を、依存ゼロの純粋Rustで実装したプロジェクトです。データ分布のCDFを区分的な線形近似でモデル化し、誤差ε以内を数学的に保証する点が特徴です。既存のC++実装の学術的手法をRustで安全かつ本番利用可能な形に再構築しており、データ構造や高速検索に関心のあるエンジニアに向いています。

High-performance Piecewise Geometric Model (PGM) learned index implementation in pure Rust with strict epsilon error guarantees

nkaz001/hftbacktest

注文キューと遅延まで再現する高頻度取引バックテスター — 板情報(Level-2/3)とティックデータを使い、フィード遅延・注文遅延・注文キュー位置まで考慮した精緻な約定シミュレーションが可能なHFT・マーケットメイキング向けフレームワークです。同じ戦略コードでBinance FuturesやBybitへの実運用botへ移行できる点が特徴で、Rust製で高速、Pythonからも利用できます。

Free, open source, a high frequency trading and market making backtesting and trading bot, which accounts for limit orders, queue positions, and latencies, utilizing full tick data for trades and order books(Level-2 and Level-3), with real-world crypto trading examples for Binance and Bybit

Mathieu2301/TradingView-API

TradingViewの相場・指標データを非公式API経由で取得 — TradingViewから公式APIなしでリアルタイム株価・チャート・インジケーター値を取得できるNode.jsライブラリです。招待限定インジケーターへの対応や高速な複数戦略バックテスト、リプレイモードなど機能が豊富で、トレーディングボットやML指標開発に活用できます。

📈 Get real-time stocks from TradingView

palemoky/chinese-poetry-api

Go製、約40万首を擁する中国古典詩API — Goで書かれた高性能な中国古典詩词APIサービスです。唐詩・宋詞・元曲など約40万首を収録し、REST/GraphQL両対応、簡体・繁体字の切り替え、全文検索、IPレート制限、Dockerマルチアーキ対応などを備え、個人の学習用APIからプロダクト組み込みまで幅広く使えます。

📜 诗泉：高性能中国古诗词 API 服务

apache/iggy

Rust製の高速メッセージストリーミング基盤Iggy — KafkaのようなメッセージストリーミングをRustで再実装し、QUIC/TCP/HTTPに対応した高効率なプロトコルを備えています。Apacheプロジェクトとして開発され、Rust・JS・Python向けクライアントも提供され、軽量かつ高速なストリーミング基盤を求める開発者に適しています。

Apache Iggy: Hyper-Efficient Message Streaming at Laser Speed

cv-cat/DouYin_Spider

抖音API逆解析で私信・直播監視まで自動化するSpider — 抖音（Douyin）のAPIを逆解析し、動画・コメント・ユーザー情報の収集に加え、直播間のリアルタイム弾幕・ギフト監視、WebSocketによる私信の送受信まで対応します。AI Agentを抖音上で動かす際に必要な通信基盤を提供する点が特徴で、単なるデータ収集ツールを超えた自動化インフラとして差別化されています。

抖音逆向，抖音爬虫，抖音全部api、私信、直播间监听

fish2018/pansou

TG・プラグイン横断検索の高速ネットディスク検索API — TGチャンネルやカスタムプラグインを並行検索し、結果を賢くランキング・種別分類する高性能な網盤（ネットディスク）検索APIです。ワーカープール設計と二段階キャッシュで高速化し、非同期プラグインで遅い検索元にも対応。Docker一発起動で前後端まとめて使えます。

PanSou是一款高性能的网盘资源搜索API服务，支持TG频道和插件搜索。系统设计以性能和可扩展性为核心，支持多频道多插件并发搜索、结果智能排序和网盘类型分类。docker集成前后端，一键启动，开箱即用。仅供学习研究，请勿以各种形式用于盈利目的。 https://t.me/s/webhtv

nautechsystems/nautilus_trader

Rust製の高速取引エンジンでバックテストと実運用を同一コードで — Rustでコアを実装し決定論的なイベント駆動アーキテクチャを持つ取引エンジンです。Pythonからも利用でき、株式・FX・先物・暗号資産・スポーツベッティングなど幅広い市場のアルゴ取引に対応します。バックテストと本番運用で同じ戦略コードを使い回せる点が既存フレームワークとの差別化ポイントです。

Production-grade Rust-native trading engine with deterministic event-driven architecture

dbt-labs/jaffle-shop

dbt学習用サンドイッチ店サンプルデータ — 架空のサンドイッチ店「Jaffle Shop」のデータを題材に、dbtの基本機能や最新機能（セマンティックレイヤーYAMLなど）を学べる公式サンドボックスプロジェクトです。dbt Cloudのセットアップ手順を実例を通して学べ、分析エンジニアリング入門に最適です。

🥪🦘 An open source sandbox project exploring dbt workflows via a fictional sandwich shop's data.

deeplethe/utopia

時間とオントロジーを基盤に据えたOSSの企業向け世界モデル — Rust製のUtopiaは、知識グラフやベクトルストアとは異なり、時間認識とオントロジーを基盤層に据えた自己統治型の知識基盤です。データ到着に応じて知識体系が進化し、矛盾検出や推論・意思決定もそのオントロジー上で動作します。オフライン展開でエージェントが信頼できる意思決定コアと監査証跡を自社ハードウェア上に構築できます。

World's first open-source enterprise world model.

t8y2/dbx

90超DBに対応する25MBの軽量クロスプラットフォームDBクライアント — Rust製で25MBという軽さながら、MySQLやPostgreSQL、MongoDB、Redis、DuckDBなど90以上のデータベースに対応するデータベース管理ツールです。デスクトップ・Docker・CLIに加え、AIアシスタントとMCP Serverを標準搭載し、DBeaverなど既存GUIクライアントに代わる軽量選択肢として注目されています。

25 MB lightweight cross-platform database client for 100+ databases, including MySQL, PostgreSQL, SQLite, Redis, MongoDB, DuckDB, SQL Server, and Dameng. Built-in AI, MCP Server, CLI, desktop and Docker. | 轻量级跨平台数据库管理工具，支持 MySQL、PostgreSQL、SQLite、Redis、MongoDB、达梦等 100+ 数据库，提供桌面端、Docker、CLI、内置 AI 助手和 MCP。

shy3130/tick-stock-panel

自宅サーバで動くA株向けAI量化ワークベンチ — 自托管・運用ゼロで動くA株専用の「選定+監視+バックテスト」ツールです。データソースを能力別にルーティングして自由に切替でき、LLMによる戦略カスタマイズや個別株分析もこなします。FastAPI+Reactの構成でDuckDB/Polarsを活用し、スクリプトの寄せ集めでの量化運用から解放されたい個人開発者に刺さります。

TSP自托管、零运维的 A 股「自建策略 + 监控 + 回测」量化工作台 | LLM能力驱使策略定制+个股分析+复盘 | 自由接入第三方数据源与个性化扩展数据 | 个人开源

D4Vinci/Scrapling

適応型Webスクレイピングフレームワーク — Scraplingは単発リクエストから大規模クロールまで対応するPython製スクレイピングフレームワークです。ステルス機能やPlaywright連携、AIによるセレクタ適応などを備え、サイト構造の変化にも強い点が既存ツールとの差別化ポイントです。MCPサーバー対応でAIエージェントからの利用もしやすくなっています。

🕷️ The BEST Web Scraping framework that handles everything from a single request to a full-scale crawl! Don't be shy, join here: https://discord.gg/EMgGbDceNQ and follow here for daily tips and tricks: https://x.com/Scrapling_dev

supabase/supabase

OSS版Firebase、PostgresベースのBaaS — SupabaseはFirebaseの主要機能をエンタープライズ級のオープンソースで再現したPostgres開発プラットフォームです。認証・自動生成API・リアルタイム同期・ストレージに加え、pgvectorによるAI/埋め込み機能まで統合し、Firebaseの制約から離れたい開発者に選ばれています。

The Postgres development platform. Supabase gives you a dedicated Postgres database to build your web, mobile, and AI applications.

tokio-rs/toasty

Tokioチーム製、非同期対応のRust向けORM — Tokioエコシステムが手がける非同期ORMです。SQLite/Turso・PostgreSQL・MySQLに加えDynamoDBまで対応し、DB機能を隠さず活かす設計が特徴。derive macroでモデルを定義するだけの手軽さも魅力で、Rustで型安全にDB操作したい人に刺さります。

An async ORM for Rust

microsoft/data-formulator

AIと対話しながらデータを可視化するツール — Microsoft製のAI搭載データ分析ツールです。複数のデータソースを接続し、自然言語での対話を通じてAIエージェントが探索的にデータを可視化・分析します。チャット履歴が長くなりがちな従来のAIチャットと異なり、視覚的なワークスペースで探索過程を整理できる点が特徴です。

🪄 Data Formulator is an interactive AI-powered data analysis system makes it easy to connect, explore and visualize data.

asciimoo/hister

閲覧履歴とファイルを丸ごと検索できる自分専用サーチエンジン — Histerは訪れたWebページやローカルファイルの全文を索引化し、Web画面・ターミナル・MCP経由のAIアシスタントから検索できる個人用検索エンジンです。ブラウザ拡張で自動収集し、履歴やブックマークのインポートにも対応。Googleなど外部サービスに依存せず、プライバシーを保ったまま自分の閲覧履歴を再発見できる点が特徴です。

Your own search engine