#人工智能
#开源项目
我基于前几年写的一篇阅读代码方法论的文章《如何阅读一份源代码?》,整理成了一个how-to-read-code skill,在这里有一个阅读redis处理客户端请求流程生成报告的例子。
#开源项目
我基于前几年写的一篇阅读代码方法论的文章《如何阅读一份源代码?》,整理成了一个how-to-read-code skill,在这里有一个阅读redis处理客户端请求流程生成报告的例子。
👍16🎉3❤2🔥1
#数据库
#存储引擎
#开源项目
btreelite
早几年还在做数据库的时候,一直想知道理论的btree算法,最终如何落地为一个生产上的实现,例如要如何解决以下的问题(这些问题都在“sqlite3.36版本 btree实现(零)- 起步及概述”):
围绕这些问题,一直想找一个小而精的btree实现,后来完整阅读了sqlite3.36版本的btree实现,整理成了系列博客:sqlite3.36版本 btree实现。
在这以后,一度想把sqlite的这部分内容单独抽出来成为一个独立的btree实现的KV库,但是碍于精力和复杂度一直没有成行。
中秋国庆假期,突发奇想:既然现在有了AI工具,可以借助它们的辅助来实现这个项目,就是现在看到的btreelite项目。这里面最大的改动是:sqlite的btree其实有两个,字符串key首先映射到一个整数类型的rowid,然后再以row id映射到真正的数据,而btreelite只有一个btree,就是直接使用字符串key映射到真实的数据。
目前项目的代码量有五万多行,我后面再看看是否还能够继续裁剪掉不必要的功能精简代码量。
我不知道这样的项目今天是否还有意义,不管怎么说还是做了出来。
#存储引擎
#开源项目
btreelite
早几年还在做数据库的时候,一直想知道理论的btree算法,最终如何落地为一个生产上的实现,例如要如何解决以下的问题(这些问题都在“sqlite3.36版本 btree实现(零)- 起步及概述”):
如何处理不同大小的数据的存储?
删除一个数据之后,如何复用其留下的空间?
错误、崩溃恢复怎么做?
跟磁盘文件是如何交互的?
页面缓存模块如何实现?
围绕这些问题,一直想找一个小而精的btree实现,后来完整阅读了sqlite3.36版本的btree实现,整理成了系列博客:sqlite3.36版本 btree实现。
在这以后,一度想把sqlite的这部分内容单独抽出来成为一个独立的btree实现的KV库,但是碍于精力和复杂度一直没有成行。
中秋国庆假期,突发奇想:既然现在有了AI工具,可以借助它们的辅助来实现这个项目,就是现在看到的btreelite项目。这里面最大的改动是:sqlite的btree其实有两个,字符串key首先映射到一个整数类型的rowid,然后再以row id映射到真正的数据,而btreelite只有一个btree,就是直接使用字符串key映射到真实的数据。
目前项目的代码量有五万多行,我后面再看看是否还能够继续裁剪掉不必要的功能精简代码量。
我不知道这样的项目今天是否还有意义,不管怎么说还是做了出来。
👍12❤8
#分布式
最近有一则不大不小的新闻:沿用了半个世纪的闰秒被取消了,见《再见了,闰秒》。
《图解分布式系统原理》的第三章《分布式系统中的时间和顺序》中,详细解释了:
* 计算机的物理时间是怎么来的
* 什么是闰秒问题
* 物理时间漂移问题,以及给线上系统造成的故障等等。
只有理解了这些,才能理解为什么分布式系统不能用物理时间来衡量两个事件的先后顺序。
最近有一则不大不小的新闻:沿用了半个世纪的闰秒被取消了,见《再见了,闰秒》。
《图解分布式系统原理》的第三章《分布式系统中的时间和顺序》中,详细解释了:
* 计算机的物理时间是怎么来的
* 什么是闰秒问题
* 物理时间漂移问题,以及给线上系统造成的故障等等。
只有理解了这些,才能理解为什么分布式系统不能用物理时间来衡量两个事件的先后顺序。
www.news.cn
再见了,闰秒!
沿用半个多世纪、用来弥合原子钟计时与地球自转计时差异的“时间补丁”——闰秒,被取消了。根据国际计量大会15日表决通过的决议,自2027年5月20日起,不再人为增减闰秒,启用连续协调世界时。
🔥6
#人工智能
我一直没用O家和A家的大模型,因为知道他们封号,以及折腾起来很麻烦。
我也认为A家封号在已经说明禁止中国人使用的情况下是合乎规则的,但是没想到还可以封号但是不退钱的,以及竟然可以占收入这么大的比例。
我一直没用O家和A家的大模型,因为知道他们封号,以及折腾起来很麻烦。
我也认为A家封号在已经说明禁止中国人使用的情况下是合乎规则的,但是没想到还可以封号但是不退钱的,以及竟然可以占收入这么大的比例。
🤡11🤔6🌚2👍1
#读书
#人工智能
Andrej Karpathy做了一个 HackerTube,只放 Hacker News 上被推荐过的视频。
对应的,有人做了一个网站只放Hacker News 上被推荐过的书:hackerbooks。
由于Hacker News上用户画像主力是工程师、极客、程序员,可以想见这两个网站的内容是符合这类人群胃口的。
#人工智能
Andrej Karpathy做了一个 HackerTube,只放 Hacker News 上被推荐过的视频。
对应的,有人做了一个网站只放Hacker News 上被推荐过的书:hackerbooks。
由于Hacker News上用户画像主力是工程师、极客、程序员,可以想见这两个网站的内容是符合这类人群胃口的。
👍14
#杂
《Tubi中国:十年谢幕》
《Tubi中国:十年谢幕》
只可惜,在庞杂的跨国上市传媒集团架构下,技术上的精巧隔离终究没能抵消宏观地缘政治与合规审计层面的零风险诉求。当合规成本、外部审查压力与日俱增,集团管理层最终做出了那个艰难的商业决定:在 2027 年正式终止中国公司的运营。
👍6
#读书
平时喜欢读书的朋友,可以投入50元人民币来参加微信读书的年度挑战任务:
* 365天中保证至少有360天在阅读
* 总共阅读时间不少于300小时
算下来,平均每天阅读时间大概50分钟。
如果挑战成功,将获得:微信读书一年的会员(这个会员费用每年大概100多人民币),还会送500读书币,书币可用于微信读书上买书。
在我看来,这个挑战:既让我养成每天阅读的习惯,还能以较低成本拿下微信读书的会员+书币。
平时喜欢读书的朋友,可以投入50元人民币来参加微信读书的年度挑战任务:
* 365天中保证至少有360天在阅读
* 总共阅读时间不少于300小时
算下来,平均每天阅读时间大概50分钟。
如果挑战成功,将获得:微信读书一年的会员(这个会员费用每年大概100多人民币),还会送500读书币,书币可用于微信读书上买书。
在我看来,这个挑战:既让我养成每天阅读的习惯,还能以较低成本拿下微信读书的会员+书币。
❤7👍3
#杂
科学家饶毅最近在公众号上因为黄仁勋事件大谈美帝的种族歧视,一连几天都在发文,例如:《黄仁勋事件证明每一位海外华人都经受种族歧视》。
我好奇为什么一个科学界的人对这次发生在工业界的事情反应这么大,后来才知道,他的前妻吴瑛也是种族歧视的受害者,2024年自杀,见《饶毅前妻、美国西北大学讲座教授吴瑛离世》。
科学家饶毅最近在公众号上因为黄仁勋事件大谈美帝的种族歧视,一连几天都在发文,例如:《黄仁勋事件证明每一位海外华人都经受种族歧视》。
我好奇为什么一个科学界的人对这次发生在工业界的事情反应这么大,后来才知道,他的前妻吴瑛也是种族歧视的受害者,2024年自杀,见《饶毅前妻、美国西北大学讲座教授吴瑛离世》。
😢18🔥1🤔1
#分布式
转发:给 OpenRaft 实现了@XoR 大佬提的读优化策略:Relaxed Read
Openraft 0.10.1 加入 Relexed read 模式。在标准 Raft 中,Linearizable 的读要等 StateMachine 把 log apply 到 CommitIndex。Relaxed read 只等一个下界:Leader 当选时写入的 Noop log。这条 log 几乎总是已经 apply 了,所以 relaxed read 几乎不用等待,并且仍然是 Linearizable 的。
在我们的 benchmark 中,每批 apply 增加 500 µs 延迟时,标准读的 p50 延迟是 1,212–2,008 µs,relaxed read 是 925–956 µs(两轮测试)。延迟加到 2 ms 时,apply 跟不上写入:标准读的 p50 是 2.3 s,relaxed read 是 1,213 µs。作为参照,没有 apply 延迟时,两者的 p50 都在 1,100–1,300 µs 左右。
限制:只对 Leader 上的读有效。Follower 上的读会退回标准读;开启 relaxed read 后,Follower 上的标准读还可能变慢。
这个方案由 neog24 提出:https://github.com/neog24
PR:https://github.com/databendlabs/openraft/pull/2317
设计和证明:https://github.com/drmingdrmer/consensus-essence/blob/main/src/list/raft-read-index-relaxed-order/raft-read-index-relaxed-order-cn.md
TLA+ 模型:https://github.com/drmingdrmer/consensus-essence/blob/main/src/list/raft-read-index-relaxed-order/tla/RelaxedReadApplied.tla
转发:给 OpenRaft 实现了@XoR 大佬提的读优化策略:Relaxed Read
Openraft 0.10.1 加入 Relexed read 模式。在标准 Raft 中,Linearizable 的读要等 StateMachine 把 log apply 到 CommitIndex。Relaxed read 只等一个下界:Leader 当选时写入的 Noop log。这条 log 几乎总是已经 apply 了,所以 relaxed read 几乎不用等待,并且仍然是 Linearizable 的。
在我们的 benchmark 中,每批 apply 增加 500 µs 延迟时,标准读的 p50 延迟是 1,212–2,008 µs,relaxed read 是 925–956 µs(两轮测试)。延迟加到 2 ms 时,apply 跟不上写入:标准读的 p50 是 2.3 s,relaxed read 是 1,213 µs。作为参照,没有 apply 延迟时,两者的 p50 都在 1,100–1,300 µs 左右。
限制:只对 Leader 上的读有效。Follower 上的读会退回标准读;开启 relaxed read 后,Follower 上的标准读还可能变慢。
这个方案由 neog24 提出:https://github.com/neog24
PR:https://github.com/databendlabs/openraft/pull/2317
设计和证明:https://github.com/drmingdrmer/consensus-essence/blob/main/src/list/raft-read-index-relaxed-order/raft-read-index-relaxed-order-cn.md
TLA+ 模型:https://github.com/drmingdrmer/consensus-essence/blob/main/src/list/raft-read-index-relaxed-order/tla/RelaxedReadApplied.tla
GitHub
neog24 - Overview
neog24 has 13 repositories available. Follow their code on GitHub.
❤5
#人工智能
Windows 11 正在收集你使用的编码代理和开发工具的数据:《Windows 11 Is Collecting Data on Which Coding Agents and Developer Tools You Use》
Windows 11 正在收集你使用的编码代理和开发工具的数据:《Windows 11 Is Collecting Data on Which Coding Agents and Developer Tools You Use》
Xusheng Li
Windows 11 Is Collecting Data on Which Coding Agents and Developer Tools You Use
Reverse engineering Windows 11's MissionControlAggregator reveals coding-agent and developer-tool usage bits in a diagnostic ETW report.
😁3