论文称自改进系统安全性无法算法验证
热点事件持续更新
论文称自改进系统安全性无法算法验证
1 篇报道1 个报道来源5 小时前更新
先了解这件事
AI 综述
Jose Pascual Gumbau Mezquita 发布论文《固定与递归自改进系统安全性的算法不可验证性》第4版,主张对能改写自身代码、递归自我改进的系统,其安全性无法在自我改写后仍被提前算法证明。 论文把一步自我修改建模为代码的可计算变换:若该变换只依赖行为,安全性保持可归结为 Rice 定理;若变换会读取代码,则判定难度至少等同于停机问题;而沿整条改进轨迹的安全性持续,难度可能再高出一个算术层级。 v4 版压缩并重组了内容,把静态限制收敛到一节,新增关于会变化的性质以及正向、负向扰动的说明,并扩展了相关工作,重述了监督方面的结果。
AI 根据报道生成 · 2 小时前更新
最新进展10月15日 12:00
固定与递归自改进系统的安全性的算法不可验证性报道时间线
沿着报道,了解事件的不同侧面。
10月15日
- arXiv:cs.CL固定与递归自改进系统的安全性的算法不可验证性
一项理论研究探讨了自修改系统(能重写自身代码、递归自我改进的智能体)的安全性是否可被提前证明在自我改写后依然成立。论文将一步自我修改建模为代码的可计算变换:若变换仅依赖行为,安全性保持可归结为 Rice 定理;若读取代码,则其难度至少等同于停机问题;沿整条轨迹的持续性还可能高出一个算术层级。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。