- 博客(88)
- 收藏
- 关注
RSS订阅原创 Text-to-SQL小白入门（十一）DAIL-SQL教你刷Spider榜单第一
Text-to-SQL Empowered by Large Language Models: A Benchmark Evaluation
2024-01-04 21:19:33
1308
1
原创 Text-to-SQL小白入门（十）RLHF在Text2SQL领域的探索实践
本文主要介绍了Text2SQL的基本概念，以及RLHF的概念和框架，最后结合DB-GPT-Hub项目，将RLHF方法应用于Text2SQL任务进行实践探索。
2023-12-26 20:13:24
1605
原创 Text-to-SQL小白入门（九）InstructGPT论文：教你如何训练ChatGPT
InstructGPT和ChatGPT 的训练流程基本一致 ，ChatGPT是改进后的InstructGPT，比如InstructGPT是基于GPT-3训练，而ChatGPT是基于GPT-3.5训练。
2023-11-28 20:26:52
1024
原创 Text-to-SQL小白入门（八）RLAIF论文：AI代替人类反馈的强化学习
基于人类反馈的强化学习(RLHF)在将大型语言模型(llm)与人类偏好对齐方面是有效的，但收集高质量的人类偏好标签是一个关键瓶颈。作者提出了RLAIF（利用AI反馈代替人类反馈），并且和RLHF进行对比，结果如下：在摘要生成任务（summarization task）中，在约70%的情况下，人类评估者更喜欢来自RLAIF和RLHF的结果，而不是SFT模型。此外，当被要求对RLAIF和RLHF摘要进行评分时，人类对两者的偏好率相同。这些结果表明，RLAIF可以产生人类水平的性能
2023-10-12 21:00:08
749
原创 Text-to-SQL小白入门（七）PanGu-Coder2论文——RRTF
代码大模型Code LLM正在蓬勃发展, 之前已经有各种方法提高代码生成的性能监督学习SFT(supervised fine-tuning)指令微调（instruction tuning）强化学习（reinforcement learning）本文提出了新的框架基于这个框架，提出了盘古代码大模型RRTF。
2023-09-26 17:38:14
742
原创 Text-to-SQL小白入门（六）Awesome-Text2SQL项目介绍
https://github.com/eosphoros-ai/Awesome-Text2SQL这个项目主要收集了针对大型语言模型和Text2SQL等的精选教程和资源，希望能够共同学习、共同推动Text2SQL领域进步！
2023-09-18 14:22:26
1206
原创 Text-to-SQL小白入门（五）开源最强代码大模型Code Llama
本文介绍了Code Llama大模型的基本概括，包含了论文的摘要、结果、结论以及核心方法，对于了解和实践Code Llama有一定帮助。
2023-09-15 16:41:00
1964
原创 Text-to-SQL小白入门（四）指令进化大模型WizardLM
本文主要对大模型WizardLM的基本信息进行了简单介绍，展示了WizardLM取得的优秀性能，分析了论文的核心——指令进化方法。
2023-09-04 11:42:51
1093
原创 Text-to-SQL小白入门（三）IRNet：引入中间表示SemQL
本文主要介绍了IRNet论文的基本信息，比如标题、摘要、数据集、结果&结论，以及论文中提出的不匹配问题和词汇问题以及对应的解决方案，重点学习了中间表示SemQL。
2023-08-25 14:18:25
794
原创 Text-to-SQL小白入门（二）——Transformer学习
本文主要针对NLP任务中经典的Transformer模型的来源、用途、网络结构进行了详细描述，对后续NLP研究、注意力机制理解、大模型研究有一定帮助。
2023-08-16 17:13:44
1056
原创 Text-to-SQL小白入门（一）综述学习
本文主要介绍了Text-to-SQL研究的定义、意义、研究方法以及未来展望，主要是对Text-to-SQL领域进行一个初步的认识和了解，适合初学者入门了解。
2023-08-01 20:24:45
1572
原创 【Python】解决CNN中训练权重参数不匹配size mismatch for fc.weight，size mismatch for fc.bias
【Python】解决CNN中训练权重参数不匹配size mismatch for fc.weight，size mismatch for fc.bias
2022-12-02 16:04:10
24050
4
原创 记忆化搜索中，不要使用数组int[]作为Map的key,可以用List作为Map的key——Java
记忆化搜索中不要使用数组int[]作为Map的key,可以用List作为Map的key——Java
2022-05-17 15:52:01
1208
1
原创 Spring Boot 打包后，target目录下resources目录的文件消失——修改pom.xml
Spring Boot 打包解决target目录下没有resource目录相关文件
2022-04-04 22:04:59
3591
1998-2015年国赛赛题及知识点整理.pdf
2023-10-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人