以 GPT3 为例，什么是 Transformer 和 Attention？

GPT3 中的1750 亿个权重，被组织在大约 28.000 个不同的矩阵中。矩阵被分为 8 个不同类别。，接下来就通过介绍着 8 个类别的矩阵，让你了解什么是GPT。

这一系列的文章只有一个目的，让人看完之后对于 GPT 的实现原理，以及作为这波 AI 浪潮基石的Transformer架构，有一个全面、清晰的认知。以此在读者（&作者）的脑海里，建立起对于大语言模型的认知的基准线，今后可以发散开来，...

一篇 8 年前的文章，《科技如何劫持人们的心智：来自一位魔术师和谷歌的设计伦理学家》 总结一下文章内，十种科技劫持心智的方式，包括： 掌控选单：通过设计选项来操纵用户的选择。 在人们的口袋里放置老虎机：利用随机奖励机制让用户上瘾。 对于错...

简单记录下今天看完的这篇文章：Childhoods of exceptional people 1. 非凡的环境 Exceptional people grow up in exceptional milieus 非凡的人在非凡的环境中成长...

零、概览 大语言模型要解决的问题，如总结、问答、分类、扮演、编程和推理。 提示工程的一些高级技巧，如少样本提示、思维链提示、零样本提示和程序辅助语言模型。 模型安全的一些挑战和方法，如提示词注入、提示信息泄露和越狱。 人类反馈强化学习的...

0 AI 能做什么？ 去年 11 月 chatGPT 横空出世到现在，我充分体验了 chatGPT/New Bing ，完成了不少事情： 我用 chatGPT 根据我的情况草拟了一封给任课老师的学术申诉邮件。 我用 chatGPT 虚构一...

今天面试时被问到：你认为产品经理是什么？ 我对自己当场的回答还挺满意的，想把自己的想法做一下记录，并且把这个话题再深入想一下，最后不知道为什么写着写着加了一堆梗进去，于是有了这篇文章。 小朋友们，让我们从批判产品经理的“官方”定义开始吧！ ...

摘要 最近，流动性引导池（Liquidity Bootstraping Pool） 频繁出现（下文简称 LBP），如 XY Finance，PathDAO，GuidlFi 等，均在 copperlaunch 采用 LBP 进行了 IDO。本...

补习一下 ERC-1155 的两个重要的特点 FT 与 NFT 并存 ERC-721：仅限同质化代币 ERC-1155 ：同一个合约，可以同时发行同质化代币（FT）和非同质化代币（NFT）。一个具体场景：在 gamefi 中，同一个合约下，...

Proof of Humanity 概述 Proof of Humanity 是一个结合了信任网、反向图灵测试和争端解决的系统，旨在创建一个防骗的（sybil-proof ）人类名单。 Proof of Humanity 通过审核用户的个人...