V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
weishao666

大模型底下的踩和赞是如何进一步影响到大模型的

  •  1
     
  •   weishao666 · May 7, 2024 · 1376 views
    This topic created in 723 days ago, the information mentioned may be changed or developed.

    大模型了解的比较模糊,主流的大模型平台对话框底下的踩和赞应该就是 RLHF 的前置步骤,即数据的收集,收集了之后一般是怎么影响到模型的呢,是不是还要隔一段时间将数据处理成指令数据集的格式,进行一轮微调?

    2 replies    2024-05-08 10:19:12 +08:00
    laimailai
        1
    laimailai  
       May 8, 2024
    隔一段时间将数据处理成指令数据集的格式,进行一轮微调。
    ------
    正解!还需要进行一轮数据清洗过滤。
    weishao666
        2
    weishao666  
    OP
       May 8, 2024
    @laimailai 谢谢!
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2646 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 13:07 · PVG 21:07 · LAX 06:07 · JFK 09:07
    ♥ Do have faith in what you're doing.