Artificial Analysis 的 LLM 性能排行榜登陆 Hugging Face
Artificial Analysis 开发的 LLM 性能排行榜现已上线 Hugging Face,覆盖超过 100 个 serverless LLM API 端点,综合对比质量、价格与速度。
Artificial Analysis 开发的 LLM 性能排行榜现已上线 Hugging Face,覆盖超过 100 个 serverless LLM API 端点,综合对比质量、价格与速度。
Supabase 本周在 Supabase Studio 上线 Security Advisor、Performance Advisor 和 Index Advisor,分别用于检测数据库不安全配置、提示性能优化建议,以及为慢查询推荐索引。
Main Street Data 是一个面向投资者和分析师的金融数据订阅平台,提供 1000+ 公司专属 KPI 数据集,并能在公司发布财报后几分钟内完成数据更新与可视化。该平台基于 Railway 部署,可无缝扩展至数千名日活用户,用户可在 mainstreetdata.com 免费注册账户。
开发者用 Astro 搭建站点并部署到 Vercel,结合 Vercel Edge Functions 与 Neon 自建网站分析,并提供了示例仓库。作者在自家站点 paulie.dev 上采用同一方案,并说明如何用这些数据制作仪表盘可视化。
Hugging Face 对 Llama 2 在 Amazon SageMaker 上的 60 种部署配置做了基准测试,覆盖 7B、13B、70B 三种模型规模、1/5/10/20 并发请求,以及 g5.2xlarge、g5.12xlarge、g5.48xlarge 和 p4d.24xlarge 四种实例。
Replit 为每个 Deployment 推出新版 Analytics,入口在 Repl 的 Deployments 面板下的 Analytics 标签页,可查看 Page Views、Top URLs、Top Referrers、Countries、Browsers、Devices 和 Request durations,并支持自定义日期范围。
Supabase 用 pgvector 对比了 OpenAI text-embedding-ada-002(1536 维)与 all-MiniLM-L6-v2(384 维)的查询性能,在 accuracy@10 固定为 0.99 时后者每秒查询数高出 78%,内存占用从 7.5GB 降到 4GB。
推荐理由:Supabase 用自家 pgvector 实测对比不同维度嵌入模型,给出查询速度与内存占用的具体差距,可据此选型。
Resend 改进了 Metrics 图表,把 Delivered、Opened、Clicked、Bounced、Complained 等邮件事件统计聚合到一处,方便发件人从 Resend 控制台获得整体视图。同一页面还新增域名视图,展示各发件域名的表现明细,面向在同一账号下用多个域名发信的多租户发件人。
Viable 借助 GPT-4 以空前规模和精度分析定性数据。该方案面向大规模定性数据分析场景,强调准确性与处理规模上的突破。
PostHog 推出开源工具包 HouseWatch,用于监控和管理 ClickHouse,免费且兼容现有 ClickHouse 实例,可从 GitHub 克隆并通过 Docker Compose 部署。它提供查询性能分析、表结构统计、查询编辑与基准对比、日志与错误查看,以及可暂停、停止、重试并自动回滚的运维工具,还内置基于 GPT 的自然语言查询编辑器。
Vercel Web Analytics 已正式可用,提供第一方页面浏览、流量分析和自定义事件,支持查看热门页面、来源与用户地域/系统/浏览器等信息。该功能所有套餐可用,自定义事件仅限 Pro 和 Enterprise 用户,且体积比 Google Analytics 小 44 倍。它不依赖 cookie,通过请求生成的哈希识别用户,数据 24 小时后丢弃。
Shopify 在 Shopify Tax 中上线 Tax Insights 功能,帮助商家判断各州销售税纳税义务。该功能涉及修改多个现有数据模型、新建四个数据模型,并用 Spark 作业处理数据,最终写入 Google Cloud Bigtable 供应用查询并展示给商家。
Railway 发布教程,指导用户在 Railway 上部署开源轻量分析工具 Offen。部署时需填入 OFFEN_SECRET(Base64 编码密钥,用于签名 cookie 和校验 URL token),PostgreSQL 数据库会自动配置,OFFEN_DATABASE_DIALECT 默认 postgres,PORT 默认 80。
Google 确认 Google Optimize 和 Optimize 360 将于 2023 年 9 月 30 日后停用,并称正为 Google Analytics 4 添加 A/B 测试功能但未承诺上线日期。
PostHog 发布 1.42.0,新增面积图可视化、URL breakdown 归一化(/home、/home?、/home/# 合并统计)和更便捷的 session recording 分享,并上线公开路线图,可投票、订阅更新并获取 beta 功能。
PostHog 1.41.0 将 person 数据直接写入 events,涉及 persons 与 events 的查询最高提速 400%,该能力自 1.39.0 起经过 beta 后默认开启。
PostHog 盘点了自建开源数据栈的常用工具,包括自家产品分析平台 PostHog(MIT 许可,可自托管或云端部署,替代 Amplitude、Mixpanel)。
Replit 宣布每个 repl 自动获得网站分析功能,无需安装任何第三方 JavaScript 包,在 repl 的 URL 后加 /analytics 即可查看。
PostHog 发布 PostHog Cloud EU,把 PostHog Cloud 托管在 AWS eu-central-1(德国法兰克福),用户数据不再离开欧盟,且不额外收费。
PostHog 官方博客分享了营销团队用 PostHog 自助做分析的 5 个玩法:搭建 AARRR 海盗漏斗、用趋势洞察追踪 UTM 活动、用会话录制观察注册流程、用路径分析还原用户旅程,以及通过邮件或 Slack 订阅仪表盘定期获取报告。这些功能无需 SQL 或 BI 工具,营销团队可自行完成报表与临时分析。
PostHog 官方博客给出 Customer Success 团队使用 PostHog 的 5 条建议:用漏斗洞察定位用户卡在哪一步,用趋势洞察监控用量变化并发现最受欢迎的功能,用生命周期洞察找出即将流失的沉默用户。还可通过 50 多个应用把 PostHog 接入 Hubspot、Salesforce 等工具,并把洞察汇总到仪表盘、按周订阅推送到 Slack 或邮箱。
PostHog 建议所有团队优先追踪 5 个事件:Pageviews、Sign-ups、功能采用、Payments 和邀请或分享。Pageviews 可按 UTM 过滤衡量营销活动效果,对比 Pageviews 与 Sign-ups 可测算整体转化率。追踪 Payments 能计算平均客单价(ABV)和 ARPU,PostHog 每月免费提供前 100 万个事件。
PostHog 官方建议把营销网站和产品放在同一个项目里追踪,这样能打通用户从访问到购买的完整旅程,用漏斗洞察对比 pageviews 与 purchases 计算转化率。
PostHog 营销团队公开了内部用 PostHog 追踪营销网站的做法:2022 年 Q3 目标为每周平均 420 个新组织注册、自然搜索流量达每周 5,000 独立用户、G2 新增 20 条评价。团队用仪表盘监控核心 KPI 与转化率熔断指标,8 月新版定价页使“显示意图”用户从约 25% 跌至约 10%,后经 feature flags 与实验迭代恢复。
PostHog 已从单一的产品分析平台扩展为覆盖分析、会话录制、功能开关、实验与数据仓库的完整工具集,可替代 Amplitude、Hotjar、Flagsmith、Segment、Optimizely 和 Redshift 等多个服务。
Render 为 Stripe App Marketplace 打造的 SQL Insights 应用进入公测,可将 Stripe 数据自动同步到加密的 PostgreSQL 数据库,让团队用标准 SQL 实时查询业务数据。
Shopify 发布面向电商的数据查询语言 ShopifyQL,Shopify Plus 商家可直接查询在线商店数据。该语言用 SHOW 替代 SELECT、BY 替代 GROUP BY,支持一步生成可视化、内置同比分析与 Black Friday 等电商日期区间,无需编写复杂 SQL join。
PostHog 给出两种估算每月事件量的方法:一是把事件数据发到 PostHog Cloud,利用每月 100 万事件的免费额度,按一周数据推算月度用量;二是用 MAU 乘以产品类型系数,多数 PostHog 用户落在每 MAU 每月 50-100 个事件区间。官方数据显示,语音转文字 API 每 MAU 达 583 个事件,活动预订类仅 8 个。
Reciprocal.dev 联合创始人 Colin Wren 把产品分析从 Google Analytics 和 Mixpanel 迁到可自托管的 PostHog,原因是 Mixpanel 免费版只能建 5 个漏斗,付费档太贵,而自托管成本约为 Mixpanel 最低价档的五分之一。
Stripe 宣布上线 Stripe App Marketplace,Render 作为公开测试的一部分推出 Render Stripe App。
PostHog 上线协作功能,支持通过永久链接分享洞察与仪表盘,跨项目分享时收件人会自动切换到有权限的项目,并新增细粒度权限控制仪表盘编辑权。官方数据显示多成员组织的留存比单用户组织高 30%+,并估计改进协作流程可让洞察发现量提升 20%。新项目主页默认展示关键指标、热门洞察和最近 Session Recording,回访录制用户的发现量是其他用户的 3 倍。
PostHog 上线 Experimentation 套件,支持选定目标指标、指定实验人群和时长,并借助 Feature Flags 验证各变体,再用贝叶斯分析给出每个变体成为最佳的概率与统计显著性。
PostHog 在 PostHog Cloud 上线 Data Management,自托管版本于周四跟进。新功能包括用标签整理事件定义、标记 Verified 事件并在筛选中优先展示,以及 30 天数据量和查询量两个可排序的"新鲜度"指标。
PostHog 1.33.0 推出完整开源 A/B 测试套件 Experimentation,可测试多个变体并优化特定指标或漏斗转化率,该功能需 PostHog Scale 或 Enterprise 许可。
Hightouch 发布与 PostHog 的集成,支持把数据仓库中建模后的数据反向 ETL 同步到 PostHog 的 Events 和 Persons 对象。
PostHog 1.31.0 发布,新增 Group Analytics(需 Scale 或 Enterprise 授权),并改进 Correlation Analysis、优化 Insights 体验,共含 350+ 项改进与修复。该版本不再支持仅用 Postgres 的部署,用户须先迁移到 ClickHouse;Sessions insight 也被弃用。
Shopify Data 团队为 Shopify Inbox 构建了一条基于 Apache Beam 的实时买家信号数据管道,向正在与客户聊天的商家推送购物车动作和订单完成两类信号。
PostHog 产品副总裁 Marcus Hyett 分享了挖掘用户真实需求的五种方法:一对一访谈、客户需求规格、问卷调研、指标监控和会话录制。PostHog 自身通过 GitHub issues 收集功能请求、用 Slack 社区做调研,并用自家产品搭建指标看板追踪北极星指标。
PostHog 在官方博客中拆解产品参与度的衡量方法,指出参与度比收入更能预测留存,并可作为北极星指标。常用指标包括 DAU(日活跃用户)、粘性(DAU ÷ MAU)和功能采用率,其中 churn(流失率)至少需 30 天才能确认用户不再回来。PostHog 提供粘性工具和 feature flags 追踪这些指标。
PostHog 1.30.0 发布,带来全新 UI(代号 Lemonade)、自动转化信号相关性分析、可保存洞察和重做的录屏回放体验。相关性分析为付费功能,需 PostHog Scale 或 Enterprise 许可。该版本是最后一个支持纯 Postgres 部署的版本,官方建议迁移到 ClickHouse 安装以继续获得更新。