TopGit theo dõi metabase/dataset-generator trên GitHub, đã đạt 765 sao. AI Dataset Generator – Create realistic datasets for demos, learning, and dashboards
Tóm tắt dựng từ metadata GitHub của chính dự án — chưa có bài review TopGit. Trang sẽ tự động cập nhật khi bài review đầy đủ được xuất bản.
VÌ SAO CHƯA CÓ REVIEW
TopGit viết bài đầy đủ cho repo có nhiều sao nhất và được yêu cầu nhiều nhất. Trang này là snapshot trong thời gian chờ — xem README gốc ở tab READ ME.
Generate realistic datasets for demos, learning, and dashboards. Instantly preview data, export as CSV or SQL, and explore with Metabase.
Want to try it without setup? We've hosted this tool at metabase.com/ai-data-generator
Features:
Conversational prompt builder: choose business type, schema, row count, and more
Real-time data preview in the browser
Export as CSV (single file or multi-table ZIP) or as SQL inserts
One-click Metabase launch for data exploration (see Using Metabase for details)
Local vs Web: When running locally, you can spin up Metabase in Docker and use LiteLLM for multi-provider LLM support. On the web, the app defaults to OpenAI and redirects to Metabase Cloud for data exploration.
Usage Flow
Select your business type, schema, and other parameters.
Click "Preview Data" to generate a 10-row sample (incurs a small LLM cost, depending on provider).
Download CSV/SQL for as many rows as you want—no extra cost, always uses the same schema/columns as the preview.
Prerequisites
Node.js (18 or later)
OpenAI API key
Docker (optional, for Metabase and multi-provider LLM support)
Getting Started
Clone the repo:
git clone <your-repo-url>
cd dataset-generator
Create your .env file:
Create a .env file in the project root with your OpenAI API key:
OPENAI_API_KEY=sk-your-openai-key-here
Optionally, you can also set:
# Change the OpenAI model (defaults to gpt-4o)
LLM_MODEL=gpt-4o
Start the Next.js app:
npm install
npm run dev
The app runs at http://localhost:3000
Generate a dataset:
Use the prompt builder to define your dataset.
Click "Preview Data" to see a sample.
Export or Explore:
Download your dataset as CSV or SQL Inserts.
Click "Start Metabase" to spin up Metabase in Docker.
Once Metabase is ready, click "Open Metabase" to explore your data.
In Metabase, use the "Upload Data" feature to analyze your CSV files
Or connect to your own database where you've loaded the data
When done, click "Stop Metabase" to shut down and clean up Docker containers.
Advanced: Multi-Provider LLM Support
By default, the app uses OpenAI directly. If you want to use other LLM providers (Anthropic, Google, etc.), you can optionally run the LiteLLM service:
Add provider keys to your .env file:
# Keep your OpenAI key as fallback
OPENAI_API_KEY=sk-your-openai-key-here
# Add other provider keys
ANTHROPIC_API_KEY=your-anthropic-key-here
GOOGLE_GENAI_API_KEY=your-google-key-here
# LiteLLM configuration
LITELLM_MASTER_KEY=sk-1234
LITELLM_SALT_KEY=sk-1234
# Set model for your preferred provider
LLM_MODEL=claude-3-sonnet-20240229
Start LiteLLM service:
docker compose up litellm db_litellm
When LiteLLM is running, the app automatically detects it and routes requests through the multi-provider gateway instead of directly to OpenAI.
How It Works
The dataset generator uses a two-stage process to create realistic business data. First, it leverages large language models to
generate detailed data specifications based on your business type and parameters. Then, it uses these specifications to create
unlimited amounts of realistic data locally.
When you preview a dataset, the app uses OpenAI (or LiteLLM if running) to generate a detailed data spec (schema, business rules, event logic) for your chosen business type and parameters.
All actual data rows are generated locally using Faker, based on the LLM-generated spec.
Downloading or exporting data never calls an LLM again—it's instant and free.
Cost & Data Generation Summary
Action
Calls LLM?
Cost?
Uses LLM?
Uses Faker?
Row Count
Preview
Yes
~$0.05
Yes
Yes
10
Download CSV
No
$0
No
Yes
100+
Download SQL
No
$0
No
Yes
100+
The above costs and behavior are based on testing with the OpenAI GPT-4o model. Costs and token usage may vary with other providers/models.
You only pay for the preview/spec generation (e.g., ~$0.05 per preview with OpenAI GPT-4o)
All downloads use the same columns/spec, just with more rows, and are free
Caching: After your first preview, the app remembers your data structure. If you preview the same business type and settings again, it reuses that structure (free) instead of generating a new one. This saves money and time. You'll see "Using cached spec" in the terminal when this happens. Check cache stats: curl http://localhost:3000/api/cache/stats or clear: curl -X DELETE http://localhost:3000/api/cache/clear.
Project Structure
/app/page.tsx – Main UI and prompt builder
/app/api/generate/route.ts – Synthetic data generator (OpenAI direct or via LiteLLM)
/app/api/metabase/start|stop|status/route.ts – Docker orchestration for Metabase
/lib/export/ – CSV/SQL export logic
/docker-compose.yml – Used for Metabase and LiteLLM services
public enforceYourBusinessRules(record: DataRecord): void {
// Add validation logic for your business type
// e.g., ensure realistic pricing, date relationships, etc.
}
Update lib/data-factory.ts - Call your new enforcer method:
// In the generate() method, add your enforcer
this.dataEnforcer.enforceYourBusinessRules(record);
Test your changes - Generate a preview to ensure realistic data ranges and proper field validation
Trang TopGit này là một snapshot — tab "Readme" hiển thị nguyên văn README của repo (đã bỏ link, giữ ảnh). Repo GitHub ở github.com/metabase/dataset-generator là nguồn chính thức.
metabase/dataset-generator có bao nhiêu sao?
metabase/dataset-generator có 765 sao GitHub — tải lại trang để xem số mới nhất, hoặc xem trực tiếp github.com/metabase/dataset-generator. TopGit phản chiếu số sao của GitHub nhưng không cam kết đến từng phút.
metabase/dataset-generator có tag gì không?
Bản đồng bộ chưa ghi nhận topic GitHub nào cho metabase/dataset-generator. GitHub topics hiển thị ở thanh bên phải trang repo — đó là nơi đáng kiểm tra nhất.
metabase/dataset-generator có trang demo không?
Dự án có trang chủ ở https://www.metabase.com/ai-data-generator. Tab "Readme" ở trang này thường có ảnh chụp và hướng dẫn bắt đầu nhanh.
metabase/dataset-generator còn đang phát triển không?
Commit gần nhất trên metabase/dataset-generator là 29 ngày trước (theo timestamp GitHub). Repo có 48 fork — một chỉ báo về mức độ quan tâm của cộng đồng.
metabase/dataset-generator dùng license gì?
metabase/dataset-generator phát hành theo license MIT. Nên mở file LICENSE trên GitHub để xác nhận — license metadata đôi khi lệch với thực tế dự án.
metabase/dataset-generator viết bằng ngôn ngữ gì?
metabase/dataset-generator chủ yếu viết bằng TypeScript. Trường "language" của GitHub dựa trên phần lớn byte ở nhánh mặc định.
Đọc đầy đủ README ở tab phía trên.
dataset-generator có đáng để bạn bỏ thời gian?
ChatGPT, Claude và Perplexity đều đọc được trang này. Hỏi thử xem họ nghĩ gì về dataset-generator.