
模型会照着问答格式说话了,这是指令微调教的;LoRA 又把那次微调压到了 4.35% 的参数。这两篇里没有任何一步告诉过模型「哪个答案更好」,它学的全是「照着这个样子写」。要让它知道好坏,得先有一个能说清好坏的数。 标注…

中午在楼下看到这个官方的七夕活动文宣,感觉挺有喜感的,又看到了官方催生的节奏。胡乱联想到一些问题。前几天看到的一则热门新闻,说的是某银行内设置了婚姻登记处。当一个大的政策方向被细化为基层kpi时,各种抽象的事情都不奇怪,…
昨天上市的某准,今天上市的某树,都遭到了爆炒。我们来看看财富是怎样转移的。 以某树为例,无限售流通股3000万股,上午成交均价920元,截止到目前(上午11:00)换手率是60%,3000万股*920元*60%=165亿…

指令微调那篇用六条问答把一个只会续写的模型改造成了会应答的模型。那一次微调动了它全部 636032 个数。六条句子换六十三万个数,看着就不划算。 六条句子,动了六十三万个数 先把那次指令微调原样重做一遍,顺带记下每个矩阵…
前言 又有一个同学倒下了 在2026年的4月24日,我向他发了一个信息,像往常一样,以hello开始对话 但这次没有任何回答,我的发言石沉大海。接下来多急促的发言也没有了,我最终确认他的手机,被没收了 这是我身边第四个这…

7月时,我和小吴可谓是寄快递上瘾,小吴寄了好几小包的擦镜布、书、一封信,而我不知道寄些啥所以有啥就寄(嘻嘻)。 小吴 寄予的书与信 至于信里的内容,这边就不多说了~

预训练模型只会接着往下写。你问它一个问题,它不回答,它把这句问话当成一段没写完的文本,顺着续下去。「不会答」跟「不知道」听上去像一回事,其实能分开来量。 它知道,但它不答 我先训一个底模,再拿两种问法去问它。 impor…
《欢迎来龙餐厅》是2026年上映的反战主题电影,由文牧野导演,沈腾主演。故事围绕徐福展开:他为还债前往中东经营龙餐馆,历经战乱与恐怖袭击后,和伙伴救助战火中无家可归的孤儿,过程中遭遇监狱、逃亡等险境,与伙伴、孩子们彼此守…
晴风云阴雨昨天出了一个征文题目: 参考电影:抓娃娃,楚门的世界。假如有一天你发现一切都是假的。你是什么想法?你会怎么想怎么做? 正好我博客最近处于低产期,就水一篇(大概谈谈)吧。 拿楚门的世界来说,因为这个离我可能更近一…
浮现的是哪一句呢? 我先来: “少年不识愁滋味, 不知人间有别离。” 
前言 ESP32 与 ESP8266 是当前物联网开发领域普及率最高的两款芯片:ESP32 搭载双核处理器,支 […]