Apache Superset 简介与上手指南——开源 BI 可视化平台
项目概述 企业里自建数据可视化平台这件事,曾经是 Tableau 或 PowerBI 的地盘,买授权、部 License Server、等 IT 审批,走一圈下来往往好几个月。Apache Superset 是另一条路:完全开源、Apache 基金会项目、自托管、支持从 PostgreSQL 到 BigQuery 再到 ClickHouse 的 70 多种数据源。 Superset 有两个主要入口。一是无代码的图表构建器:选数据源、选表、拖字段、配聚合方式,几分钟出一张图,不需要写 SQL。二是 SQL Lab,一个功能完整的浏览器内 SQL 编辑器,支持多标签查询、历史记录、结果导出,写完 SQL 直接把结果存成图表。两个入口面向不同背景的用户,但生成的图表都能放进同一个仪表板。 图表类型覆盖面很宽:折线图、柱状图、饼图、散点图、热力图、地理位置地图、日历热图……还有一个图表画廊可以直接浏览所有支持的类型。仪表板支持多图联动过滤,点击一个维度,其他图表联动刷新,这对做数据探索很有用。 权限系统是基于角色的,可以精细控制到"某个用户只能看哪几个仪表板"、“某...
PicLite 简介与上手指南——本地图片压缩 + 自建图床的开源神器
项目概述 写公众号、做 PPT、运营博客、整理素材,几乎所有人都会遇到图片难题:原图体积巨大,上传卡顿;用在线压缩工具,图片要上传第三方服务器,隐私存隐患;压缩完画质糊掉,反复调参数全靠盲猜;想要私有图床,部署又过于复杂。 PicLite 正是为解决这一痛点而生的开源工具。它同时兼顾 本地图片压缩 与 自托管私有图床 两大能力,全平台免费开源,无广告无会员,解决图片处理全链路痛点。 PicLite 的核心亮点在于:图片全部在本机完成运算,默认不上传任何外网服务器,浏览器网页版、桌面客户端均是如此,断网也能正常压缩图片。只有你主动开启图床上传功能,图片才会推送至你自己部署的服务,隐私可控,企业、个人都可以放心使用。 桌面端:强大的本地压缩工作台 连续画质滑动调节,实时预估文件大小 区别普通工具的几档固定画质,PicLite 提供连续画质滑动条(1‑100%),拖动滑块就实时预览压缩后的预估体积,直接拿捏 “画质够用,体积最小” 的平衡点,不用反复导出测试。 丰富格式支持 支持 JPG、PNG、WebP、GIF,支持 GIF 动图压缩,格式互转,清除图片元数据,添加文字水印。 批量...
10 个 GitHub 开源爬虫仓库学习笔记——免费爬取整个互联网
背景与触动 看到这篇文章的第一反应是很意外——很多人做数据抓取,第一反应是找付费 API,一问价格每月几百到几千美元,还得签合同。但 GitHub 上已经有人把工业级的爬虫工具开源了,能抗反爬、能处理百万页面,而且完全免费。 这个认知差很有意思。商业服务之所以能卖高价,核心在于「省事」——但当你知道有这些开源替代品存在后,花钱的理由就变薄了。 下面按照原文的分类框架,重新梳理学习笔记,加上自己的理解和思考。 AI 时代首选:Firecrawl 和 Crawl4AI Firecrawl — 全场 Star 最高的爬虫项目 基础信息: GitHub:156,060 Star 地址:github.com/firecrawl/firecrawl 原仓库在 mendableai 名下,现已迁移到独立组织 firecrawl 核心能力: 指向任意网站,返回 Markdown 或结构化 JSON 自动处理 JS 渲染、反爬绕过、多页爬取 支持自托管或 API 调用 学习笔记: 这个工具的出现其实反映了一个大趋势——以前爬虫的目标是「把数据抓下来」,现在 AI 时...




