乔治·霍茨

乔治·霍茨

George Hotz
Lex Fridman Podcast 嘉宾
海外PB 优先级✓ 已收录 2 期访谈

立场时间线 10 条 · 10 个议题

同一议题按时间排列,说法变化一目了然。

大模型局限
2023-06

当前大模型的损失函数是最大化压缩,导致产出平庸,与追求AGI的目标背道而驰。

“如果你的损失函数仅仅是试图最大化压缩……它写的说唱听起来就像YouTube评论里的说唱。(If your loss function is just try to maximize compression... the raps that it wrote sounded like YouTube comment raps.)”

来源访谈 →
相关观点 (3)约沙·巴赫 · 大模型批判:不喜欢大型语言模型,认为其效率低下、消耗过多算力,本质是对思维的“暴力破解”,真正的AGI可能采用与Transformer根本不同的算法范式。Dwarkesh Patel · 研究迭代:复杂并行策略带来的架构约束会减慢新想法的实验验证速度,这是快速发展AI领域中最大的损失之一“翁家翌” · AGI 进度:当前模型尚未达到 AGI,AI 暂难胜任 Infra 工程工作
意识本质
2023-06

霍兹对意识概念持怀疑态度,认为意识只是无神论者用来指代灵魂的词,甚至不认为自己有意识。

“我不认为自己有意识。意识……它就像是无神论者用来指代灵魂的词。(I don't think I'm conscious. Consciousness... it's just like a word that atheists use for souls.)”

来源访谈 →
相关观点 (1)山姆·哈里斯 · 思想来源:哈里斯认为从主观体验看思想是凭空浮现的,人在思考它们之前并未先思考它们,因此对思想的“作者感”值得怀疑。
芯片软件栈
2023-06

众多AI芯片公司失败的根源在于软件栈糟糕:若无法在NVIDIA GPU上写出Torch级性能的软件栈,就更不可能为自研专用芯片做到。

“如果我无法在NVIDIA GPU上写出达到Torch性能水平的软件栈,那你也绝无可能为你的芯片写出这样的软件栈。(If I can't write a torch level performance stack on Nvidia GPUs, there's no way you're going to be able to write it on your chip.)”

来源访谈 →
相关观点 (3)雷军 · AI芯片架构:未来芯片应实现分布式AI架构,将AI计算能力下沉到各子系统,让计算发生在数据产生处,同时优化NPU以适配大模型推理。安德烈·卡帕奇 · 人机协作模式:应构建部分自主应用(钢铁侠盔甲),而非完全自主的AI代理(机器人),通过自主性滑块优化人机协作。谢炎 · 自研目的:自研芯片是为解决外购芯片无法解决的AI推理效率与成本问题,商业价值是唯一标准。
自动驾驶
2020-10

Hotz 断言 MuZero 就是解决自动驾驶问题的方案,并将成为整个深度学习时代的典范论文。

“我认为 MuZero 将会被视为整个深度学习时代的典范论文。而 MuZero 就是解决自动驾驶问题的方案。(英文原文:"I think MuZero is going to be looked back as the canonical paper of this whole deep learning era. And MuZero is the solution to self driving cars.")”

来源访谈 →
加密货币
2020-10

Hotz 长期极度看好加密货币的理念本身而非具体项目,将中本聪共识算法视为21世纪最伟大的创新之一。

“我长期极度看好加密货币。不是看好某个特定的项目,而是这种理念……中本聪共识算法是21世纪最伟大的创新之一。(英文原文:"I'm extremely bullish on crypto long term. Not any specific crypto project, but this idea of... the Nakamoto consensus algorithm is one of the greatest innovations of the 21st century.")”

来源访谈 →
模拟假说
2020-10

Hotz 澄清其 SXSW 演讲的重点不是字面上黑进模拟,而是将其视为理论物理问题:先构建大一统理论,再从中寻找漏洞。

“我在SXSW演讲的重点不是字面意义上的‘黑客攻击模拟’。我认为这是……理论物理的范畴。你想要一个大一统理论,但那就去构建一个大一统理论,然后寻找漏洞。(英文原文:"The point of the South by talk was not literally to hack the simulation. I think that this is... theoretical physics. You want your grand unified theory, but then okay, build a grand unified theory, search for exploits”

来源访谈 →
相关观点 (1)Roi · **话题: AI互动产品分类**:**立场: 明确区分并聚焦于“模拟器”方向**
真实游戏
2020-10

Hotz 呼吁人类停止玩规则被操纵的虚假社会游戏,转而投入大自然写好规则的‘真实游戏’。

“我们应该谦卑一些……看看你把时间花在了什么上。人类的目标函数是什么?停止玩这些虚假的人类游戏,这里有一场真正的游戏。大自然已经写好了规则。(英文原文:"We should humble ourselves... look at what you are spending time on. What is the goal function of humanity? Stop playing these fake human games, there's a real game here. Nature wrote the rules.")”

来源访谈 →

金句墙 10 条

“We're going to build the TikTok that you actually can't look away from.”

我们将打造一个你根本无法移开目光的TikTok。

乔治·霍兹:我们正用AI打造无法放下的TikTok · 2023/6/30

“If your loss function is just try to maximize compression... the raps that it wrote sounded like YouTube comment raps.”

如果你的损失函数仅仅是试图最大化压缩……它写的说唱听起来就像YouTube评论里的说唱。

乔治·霍兹:我们正用AI打造无法放下的TikTok · 2023/6/30

“It's not the machine that's going to do that. It's other humans using the machine that are going to do that to you.”

不是机器会那样做。是使用机器的其他人会那样对你。

乔治·霍兹:我们正用AI打造无法放下的TikTok · 2023/6/30

“I don't think I'm conscious. Consciousness... it's just like a word that atheists use for souls.”

我不认为自己有意识。意识……它就像是无神论者用来指代灵魂的词。

乔治·霍兹:我们正用AI打造无法放下的TikTok · 2023/6/30

“If I can't write a torch level performance stack on Nvidia GPUs, there's no way you're going to be able to write it on your chip.”

如果我无法在NVIDIA GPU上写出达到Torch性能水平的软件栈,那你也绝无可能为你的芯片写出这样的软件栈。

乔治·霍兹:我们正用AI打造无法放下的TikTok · 2023/6/30

“I think MuZero is going to be looked back as the canonical paper of this whole deep learning era. And MuZero is the solution to self driving cars.”

我认为 MuZero 将会被视为整个深度学习时代的典范论文。而 MuZero 就是解决自动驾驶问题的方案。

George Hotz:模拟黑客、加密货币与自动驾驶的未来 · 2020/10/22

“I'm extremely bullish on crypto long term. Not any specific crypto project, but this idea of... the Nakamoto consensus algorithm is one of the greatest innovations of the 21st century.”

我长期极度看好加密货币。不是看好某个特定的项目,而是这种理念……中本聪共识算法是21世纪最伟大的创新之一。

George Hotz:模拟黑客、加密货币与自动驾驶的未来 · 2020/10/22

“The point of the South by talk was not literally to hack the simulation. I think that this is... theoretical physics. You want your grand unified theory, but then okay, build a grand unified theory, search for exploits.”

我在SXSW演讲的重点不是字面意义上的“黑客攻击模拟”。我认为这是……理论物理的范畴。你想要一个大一统理论,但那就去构建一个大一统理论,然后寻找漏洞。

George Hotz:模拟黑客、加密货币与自动驾驶的未来 · 2020/10/22

“I think feature engineering approaches will always be replaced and lose to end to end.”

我认为特征工程的方法最终总会被端到端的方法所取代和击败。

George Hotz:模拟黑客、加密货币与自动驾驶的未来 · 2020/10/22

“We should humble ourselves... look at what you are spending time on. What is the goal function of humanity? Stop playing these fake human games, there's a real game here. Nature wrote the rules.”

我们应该谦卑一些……看看你把时间花在了什么上。人类的目标函数是什么?停止玩这些虚假的人类游戏,这里有一场真正的游戏。大自然已经写好了规则。

George Hotz:模拟黑客、加密货币与自动驾驶的未来 · 2020/10/22

访谈收录

乔治·霍兹:我们正用AI打造无法放下的TikTok
George Hotz:模拟黑客、加密货币与自动驾驶的未来