Skip to content

搞英语 → 看世界

翻译英文优质信息和名人推特

Menu
  • 首页
  • 作者列表
  • 独立博客
  • 专业媒体
  • 名人推特
  • 邮件列表
  • 关于本站
Menu

sqlite-s3vfs

Posted on 2025-02-07

sqlite-s3vfs

英国政府商业和贸易部的 GitHub 组织上的整洁开源项目:“用于 SQLite 读取和写入 S3 的 Python 虚拟文件系统”。

我通过在具有所有依赖项的 Python REPL 中运行它来尝试他们的使用示例

uv run --python 3.13 --with apsw --with sqlite-s3vfs --with boto3 python

它的作用正如广告中所宣传的那样。当我列出我的 S3 存储桶时,我发现它创建了两个文件 – 一个名为demo.sqlite/0000000000 ,另一个名为demo.sqlite/0000000001 ,这两个文件都是 4096 字节,因为每个文件都代表一个 SQLite 页面。

该实现只有200 行 Python 代码,在apsw.VFS之上实现了一个新的 SQLite 虚拟文件系统。

自述文件包含此警告:

不执行锁定,因此客户端代码必须确保写入不会与其他写入或读取重叠。如果同时发生多个写入,数据库可能会损坏并且数据丢失。

我想知道 11 月份添加到 S3的条件写入功能是否可以用来防止这种情况发生。很棘手,因为涉及多个文件,但也许它(或像这样的技巧)可以用来在多个进程之间实现某种排他锁?

通过黑客新闻评论

标签: apsw 、 sqlite 、 python 、 uv 、 s3

原文: https://simonwillison.net/2025/Feb/7/sqlite-s3vfs/#atom-everything

本站文章系自动翻译,站长会周期检查,如果有不当内容,请点此留言,非常感谢。
  • Abhinav
  • Abigail Pain
  • Adam Fortuna
  • Alberto Gallego
  • Alex Wlchan
  • Answer.AI
  • Arne Bahlo
  • Ben Carlson
  • Ben Kuhn
  • Bert Hubert
  • Bits about Money
  • Brian Krebs
  • ByteByteGo
  • Chip Huyen
  • Chips and Cheese
  • Christopher Butler
  • Colin Percival
  • Cool Infographics
  • Dan Sinker
  • David Walsh
  • Dmitry Dolzhenko
  • Dustin Curtis
  • eighty twenty
  • Elad Gil
  • Ellie Huxtable
  • Ethan Dalool
  • Ethan Marcotte
  • Exponential View
  • FAIL Blog
  • Founder Weekly
  • Geoffrey Huntley
  • Geoffrey Litt
  • Greg Mankiw
  • Henrique Dias
  • Hypercritical
  • IEEE Spectrum
  • Investment Talk
  • Jaz
  • Jeff Geerling
  • Jonas Hietala
  • Josh Comeau
  • Lenny Rachitsky
  • Liz Danzico
  • Lou Plummer
  • Luke Wroblewski
  • Matt Baer
  • Matt Stoller
  • Matthias Endler
  • Mert Bulan
  • Mostly metrics
  • News Letter
  • NextDraft
  • Non_Interactive
  • Not Boring
  • One Useful Thing
  • Phil Eaton
  • Product Market Fit
  • Readwise
  • ReedyBear
  • Robert Heaton
  • Rohit Patel
  • Ruben Schade
  • Sage Economics
  • Sam Altman
  • Sam Rose
  • selfh.st
  • Shtetl-Optimized
  • Simon schreibt
  • Slashdot
  • Small Good Things
  • Steve Blank
  • Taylor Troesh
  • Telegram Blog
  • The Macro Compass
  • The Pomp Letter
  • thesephist
  • Thinking Deep & Wide
  • Tim Kellogg
  • Understanding AI
  • Wes Kao
  • 英文媒体
  • 英文推特
  • 英文独立博客
©2025 搞英语 → 看世界 | Design: Newspaperly WordPress Theme