强化学习从零到一 03｜算法地图：基于模型 vs 不基于模型
知道环境的规则和不知道规则，找最好策略的办法大不一样。用四组漫画和五道手算例题，画一张强化学习的算法地图：策略迭代、价值迭代、向前看几步、蒙特卡洛树搜索怎样用环境模型，没有模型又怎样边走边学。
中文掘金
最新资讯
言栖资讯收录 210842 篇 AI、开发与建站文章，按发布时间排序，支持搜索与按语言筛选。
I fact-checked a blockchain's docs. 4 claims fail, 54 can't be checked, and one won't sit still.
I ran one command against the public endpoints of a blockchain called FLOP. In under a minute it had checked 239 claims taken from the project's own documentati…
Englishdev.to
Can an AI Shopping Agent Actually Understand Your Product Page?
A shopper asks an AI assistant: Find me a waterproof black trail shoe under $100, size 10, in stock, with returns allowed. Your store sells the perfect shoe. Th…
Englishdev.to
Commissioning a 25 A MQTT contactor: from unboxing to Home Assistant to long-term maintenance
Commissioning a 25 A MQTT contactor: from unboxing to Home Assistant to long-term maintenance A 10 A smart plug is easy to reason about. This article is about t…
Englishdev.to
Quand l'IA qui teste comme un humain rencontre la rééducation qui s'entraîne comme un humain
Quand l'IA qui teste comme un humain rencontre la rééducation qui s'entraîne comme un humain Momentic (YC W24) vient de lancer des agents qui « utilisent » votr…
Englishdev.to
Move the human checks to CI, but only for accidents: a week of agent PRs (karasu weekly)
karasu is a text modeling language for system architecture, inspired by the C4 model. You describe your system in .krs files and karasu draws the views: system,…
Englishdev.to
Rewrite or refactor? How I decide
Rewrites are tempting because old code is annoying. You open a file, wince, and a quiet voice says "I'd do this so much better from scratch." Sometimes that voi…
Englishdev.to
Why Telling an LLM to Be Careful Doesn't Work: Penalty Prompts Had a 0% Abstention Rate
Ten reproducible experiments on Gemma 2, 3 and 4 with Ollama. Code included. Every developer working with Large Language Models has tried some variation of this…
Englishdev.to
Inode Exhaustion: The Disk Full Error That Makes No Sense
You run df -h and the root partition shows 85% used. Plenty of space left, right? Then you try to create a new file and get: No space left on device . You check…
Englishdev.to
Turning a video clip into a game sprite sheet in the browser
I make 2D characters by generating a short animation video and cutting it into a sprite sheet. For a while that meant ffmpeg, a Python script and a lot of fiddl…
Englishdev.to
System design for physical AI: a patch cycle that learns from every confirmed call
By Muhammad Umar. This is the engineering summary of an open reference architecture. The paper, its object model as JSON and the model register are free to reus…
Englishdev.to
How to Learn Kafka (Without Mixing Up Topics, Partitions, and Consumer Groups)
You watch a twenty-minute Kafka explainer over lunch. Topics, partitions, consumer groups, offsets. It all clicks. Two weeks later a teammate asks why your cons…
Englishdev.to
最顽固的偏见，往往披着“正义”的外衣
为什么有些争论，明明双方都有理由，却越说越僵？ 我们总以为，只要道理讲得足够清楚，对方就会改变看法。但美国社会心理学家乔纳森·海特在《正义之心》中提出了一个观点：很多时候，人是先有了判断，再用道理为自己的立场辩护。更有意思的是，这种道德直觉既可能让我们彼此对立，也能让素不相识的人团结起来，为共同的信念付出。 为什么同一…
中文罗辑思维
压力大真的会掉头发吗？《自然》揭开斑秃背后的新机制
今天， 得到App 《健康参考》 主理人尹烨老师来讲讲 斑秃。 老百姓给了斑秃起一个更瘆人的名字——鬼剃头。意思是睡着睡着，早上起来枕头上、脑袋上，齐刷刷少了一块头发，圆的，光溜的，边界清楚得像拿圆规画出来的。你问它什么时候来的？不知道。你问它为什么来？过去医生只能摊摊手，说可能跟免疫有关，跟压力有关，注意休息，放宽心…
中文罗辑思维
古代的苦水水质口感相当于现在的自来水吗？
知谦， 以富润屋，不如以德润身。 查看知乎原文 朋友，如果你穿越到古代大城市，估计尝一口咸苦井水的勇气都没有。 因为你已经喝惯了自来水。 自来水应该是现代公共卫生领域最重要的成就之一了。 因为它用物理、化学和生物等工艺，把你能想到和想不到的水质污染指标都搞到了很低的程度，这就解决了很多人持续、稳定且相对低成本获取健康生…
中文知乎日报
《离骚》的作者明明名正则字灵均，为何会被安在屈原名下认为是他的作品？ 司马迁是不是搞错了？
载酒 查看知乎原文 很多人根本就没把《离骚》读全过，以至于这部作品到底讲了个什么东西，全凭着各类故事、影视剧或者道听途说来脑补，以至于越误解越深。 但这种事儿不能全怪现在的读者，我认为起码有两部分客观的原因。 一是《离骚》真的很难读，也很难完全读懂。 “楚语”、“楚物”、“楚声”汉代就已失传，以至于西汉朱买臣会读《楚辞…
中文知乎日报
彩虹为什么是弧形，而不是完整的圆形，阳光经过水滴折射反射，为什么会形成固定的七彩色彩顺序？
黄河边儿， 勤学善思，理性科普，热爱生活，向阳而行。 查看知乎原文 彩虹本来就是一个圆。 只要位置合适，看到的就会像这样： 圆形彩虹，图来自：https://enewstree.com/discuz/forum.php?mod=viewthread&tid=133467 https://x.com/mark_tarel…
中文知乎日报
伯克希尔哈撒韦：第三季度营业利润为127.1亿美元，公司第三季度回购了96亿美元股票
伯克希尔哈撒韦公司第三季度营收为1056.47亿美元，去年同期为949.72亿美元；第三季度营业利润为127.1亿美元，同比下降5.8%；第三季度归属于股东的净利润为221.12亿美元，上年同期为307.96亿美元；第三季度每股A类等效普通股净收益为15,502美元；第三季度净投资收益为94.07亿美元，去年同期为17…
中文36氪
第九届进博会上海交易团国资分团达成意向采购金额28.62亿美元
11月7日，第九届中国国际进口博览会上海交易团国资分团集中签约仪式暨上海国资国企科技创新和开放合作交流会在国家会展中心（上海）举行。上海市国资委党委书记、主任周小全介绍了第九届进博会上海交易团国资分团总体情况及工作成果。组展参展方面，积极邀约境外企业参展，展区总面积1.14万平方米，累计完成835家企业、2.21万名专…
中文36氪
欧洲多国爆发抗议，要求暂停数据中心建设
针对数据中心建设的抗议浪潮正在欧洲多地蔓延。当地时间周六，多个国家的民众走上街头，表达对数据中心快速扩张可能带来的能源消耗、环境破坏及社会影响的担忧。据悉，来自欧洲15个国家的100多个民间组织和权益团体参与了此次联合行动，抗议能源消耗巨大的数据中心快速扩张，呼吁在建立更加明确的监管制度之前，暂停所有新的大型数据中心项…
中文36氪