tf2
V2EX  ›  OpenAI

gpt-3 通过区区 30w 篇文章就掌握了汉语。。。。

  •  
  •   tf2 · Feb 20, 2023 · 4627 views
    This topic created in 1355 days ago, the information mentioned may be changed or developed.

    https://github.com/openai/gpt-3/tree/master/dataset_statistics

    类别 语言 数量 比例
    文章数量 en 235987420 93.68882%
    文章数量 zh 292976 0.11631%
    字数 en 1051665177484 92.09864%
    字数 zh 1828425488 0.16012%
    词数 en 181014683608 92.64708%
    词数 zh 193517396 0.09905%
    4 replies  •  2023-02-20 23:50:24 +08:00
    vektor
    vektor
    Feb 20, 2023❤️4
    1
    https://raw.githubusercontent.com/openai/gpt-3/master/175b_samples.jsonl
    搜样本中的中文有惊喜,简中互联网的含金量
    yuhuan66666
    yuhuan66666
    Feb 20, 2023
    2
    @vektor #1 你说的是 搜了个 “美”字 第三个 嗯 低俗广告 😂
    tf2
    tf2
    OP
    Feb 20, 2023
    3
    @yuhuan66666 蚌埠住了。23333
    tf2
    tf2
    OP
    Feb 20, 2023
    4
    https://twitter.com/janleike/status/1625207251630960640

    openai 的人也不明白为啥英语学会了,其他语言就一通百通。。。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2054 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 02:10 · PVG 10:10 · LAX 18:10 · JFK 21:10
    ♥ Do have faith in what you're doing.