s
stardustai/dataset-viewer
A sleek dataset viewer built entirely by AI Agent. Supports streaming large files from WebDAV, S3, SSH, Local or Hugging Face.
aifile-streaminghuggingfaces3smbsshtauritextvibe-codingviewerwebdav
TypeScript创建于 2025/7/23更新于 昨天
README
由 Gemini 翻译整理
Dataset Viewer
⚡ 秒级打开超大文件 · 🔍 毫秒级搜索 · 📦 直接预览压缩包
这是一个基于 Tauri、React 和 TypeScript 构建的现代化高性能数据集查看器。旨在处理来自多种来源的海量数据集，支持对超大文件（100GB+）进行高效流式传输，并提供闪电般的搜索能力。
🚀 核心功能
- ⚡ 秒开大文件：利用虚拟化渲染处理 100GB+ 的文件
- 🔍 实时搜索：支持海量文件内的毫秒级搜索及高亮显示
- 📦 直接预览存档：无需解压即可直接浏览 ZIP/TAR 文件
- 🌐 多协议支持：支持 WebDAV、SSH/SFTP、SMB/CIFS、S3、本地文件、HuggingFace Hub
- 🗂️ 多格式支持：Parquet、Excel、CSV、JSON 以及带语法高亮的代码文件
- 🎨 现代化界面：支持深色/浅色主题、响应式设计、多语言支持
📚 支持的文件类型
- 📄 文本与代码：JSON、YAML、XML、JavaScript、Python、Java、C/C++、Rust、Go、PHP 等
- 📝 文档：Markdown（预览）、Word (.docx/.rtf)、PowerPoint (.pptx)、PDF（可搜索）
- 📊 数据文件：Parquet（优化版）、Excel、CSV、ODS，支持虚拟滚动
- 📦 压缩包：ZIP、TAR（支持无需解压的流式预览）
- 📱 多媒体：图片、视频、音频文件
📸 截图展示
- 🔗 连接设置：通过多种存储类型进行便捷的连接管理
- 📊 JSON 查看器：带语法高亮和可折叠节点的结构化 JSON 显示
- 💻 代码查看器：支持多语言语法高亮，完美处理大文件
- 📋 数据表格：支持筛选和排序的 CSV/Excel 可视化
- 🌐 点云查看器：交互式 3D 点云数据可视化
- 📦 压缩包浏览器：无需解压直接浏览 ZIP/TAR 压缩包
✨ 技术亮点
- 🤖 100% AI 生成：整个代码库均在 AI 辅助下完成
- 🚀 原生性能：基于 Tauri (Rust) + React 构建的跨平台桌面应用
- 🧠 智能内存管理：采用分块加载，支持数百万行数据的虚拟滚动
- 📊 流式架构：支持大文件分块传输，无需完全解压
🎯 适用场景
- 数据科学家：探索大规模数据集、Parquet 文件及 CSV 数据
- 日志分析：在不受内存限制的情况下搜索海量日志文件
- 压缩包管理：无需解压即可查看压缩文件内容
- 远程访问：连接 WebDAV、SSH/SFTP、SMB、云存储、HuggingFace
- 性能敏感场景：追求即时文件访问和极速搜索体验的用户