创建时间
Mar 28, 2023 07:24 PM
标签
计算机顶会顶刊论文写作技巧 微信公众号整理 / 总结 / 推送 a. 计算机学科顶会 (刊) 论文写作技巧; b. 计算机顶会 (刊) 重要时间节点、投稿注意事项、录用率; c. 计算机学科顶会 (刊) 论文 Response & Rebuttal 技巧; d. 人工智能领域热点、前沿技术。
最近 chatgpt 的应用呈现涌现的状态,chatgpt 与对话、文档办公、翻译等场景的结合越来越多,也有社区朋友说来看看这方面的问题。
幸运的是,知乎文章《卧特,搭载 ChatGPT 的 AI 助手,第一个现象级应用》(https://zhuanlan.zhihu.com/p/612651871),对搭载 ChatGPT 的 AI 助手,这一个现象级应用点进行了信息串烧的据介绍,很有趣。
notion image
该文章从 B 站快被偷家了(Bilibili x OpenAI x Notion x Python、BibiGPT)、AI 助手在路上 (YouTube 视频内容一键总结、微信读文章小助手、群聊机器人,ChatGPT Bot、AI 生词本 - AI、 Vocabulary Builder)、伸手党福音:读 PDF 即时读写、解答问题(ChatPDF、ResearchGPT、DocsGPT、Paul Graham GPT)、语音助手的升级(xiaogpt - 小米的小爱音响、ChatGPT Siri、飞书 ×GPT-3.5+DALL·E+Whisper)以及万物可译(ChatGPT for Translation|ChatGPT 用于翻译、翻译 chrome 插件:OpenAI Translator Bob Plugin)等 5 个应用方面进行了介绍,十分有趣。
此外,在之前的文章中,我们介绍到了 prompt 的重要性,而现在推出的 PromptPerfect 应用也十分及时,本文也将作为最后一个部分进行介绍,供大家参考。‍

一、B 站快被偷家了!

1、Bilibili x OpenAI x Notion x Python
段小草:Bilibili x OpenAI x Notion x Python:分享我的长视频自动化摘要笔记完整工作流(万字长文,代码分享,点赞收藏)
偷家第一篇,完整的自动化工作流案例,输入一个 B 站视频的 BV 号后,自动抓取其基本信息和 CC 字幕,并通过 OpenAI API 的 GPT-3.5 接口将视频的主要内容进行摘要,并将视频信息和摘要内容保存到相应的 Notion 页面中。
notion image
2、BibiGPT
【BiliGPT】AI 自动总结 B 站 视频内容,GPT-3 智能提取并总结字幕_哔哩哔哩_bilibil
更大的大招,输入链接,输出大纲:
notion image
输出示例:
notion image

二、AI 助手在路上

1、YouTube 视频内容一键总结
还是 biliGPT 的开发者在做 youtubu 的总结【BibiGPT】AI 自动总结 YouTub 视频
2、微信读文章小助手
Frank Lin:ChatGPT API 应用场景之长文和视频总结
私人的 AI 助理,可以总结微信转发的各类文章、引用大段文字进行总结、续写和翻译。
notion image
3、群聊机器人,ChatGPT Bot
notion image
使用 Cloudflare Workers,单文件,直接复制粘贴一把梭,无需任何依赖,无需配置本地开发环境,不用域名,免服务器。 可以自定义系统初始化信息,让你调试好的性格永远不消失。
功能覆盖:群聊模式,新建多个群聊,每个群内只有自己个机器人,每个群的机器人由不同的翻译专家,文案专家,代码专家。
notion image
4、AI 生词本 - AI Vocabulary Builder
一个使用了 AI 技术的智能生词本工具,特色功能:自动添加生词、读故事助记单词。
notion image
AI 生词本(“AI Vocabulary Builder” 简称 aivoc)是一个利用了 AI 技术的智能生词本工具,它能帮你快速构建起自己的生词库,学习起来事半功倍。
核心功能:提供高质量的整句翻译能力、由 AI 自动提取生词及释义、独创的故事模式助记生词、支持 CSV 等格式导出生词本

三、伸手党福音:读 PDF 即时读写、解答问题

1、ChatPDF
ChatPDF 也来了!一键上传文件即可解读,复制粘贴都省了 | 量子位:http://www.qbitai.com/2023/03/42594.html
notion image
几秒钟解读专业论文 ChatPDF 的操作很简单,把自己的 PDF 上传到页面上,它就会开始加载分析,然后切换到提问界面。
notion image
2、ResearchGPT
要使用 ResearchGPT,首先得拥有一个 OpenAI API 的密钥。输入密钥之后,就可以直接上传你要看的论文 PDF 或者链接了,在左侧,它会显示论文原文,右侧可以直接问它问题。‍
notion image
那给出的答案到底怎么样?直接上演示:
notion image
3、DocsGPT
DocsGPT 是一个前沿的开源解决方案,它简化了在项目文档中查找信息的过程。通过集成强大的 GPT 模型,开发人员可以轻松地提出关于项目的问题并得到准确的答案。
notion image
4、Paul Graham GPT
搜索和提问 Paul Graham 的所有文章。这个项目很好地展示了如何通过 OpenAI Embeddings 技术将大规模文本压缩成 ChatGPT API token 限制范围内(4096 个)的 prompt。

四、语音助手的升级

1、xiaogpt - 小米的小爱音响
notion image
唤起小爱同学后,以「帮我」开头询问的问题会自动以文本形式发送一份给 ChatGPT,同时会屏蔽小爱同学原本的回答,替换成「正在问 GPT,请耐心等待」,而 ChatGPT 生成的文本则会被小爱同学通过 TTS(语音合成技术)进行语音回答。
一些过程:
ChatGPT 的回复截包,读出来。
遇到最大的困难是小爱怎么破解,搜了一圈发现,小爱是有办法通过串口来 hook 再刷固件的。
但串口是啥?我学习了串口通信,用自己树莓派做实验,去淘宝买 usb2ttl 学会了。但是需要焊接,我又去 B 站刷视频学习,问同事硬件大神如何焊接,学会了焊接。但,他妈的,新的小爱同学把串口通信给封了。
翻到了一个国外破解小爱同学的,能用拆机后的 USB 来烧固件,但我没有 windows,-> 学习老的 macbookpro 2015 刷双系统,尝试给小爱刷机 -> 小米把这个也封了
有趣的是每天用发现确实还挺好用的,让他放歌,给我儿子放小猪佩奇。于是又给丈母娘买了一个,给她配置好,可以放歌。
第一个方式不太行,尝试去用路由 openwrt 截包再发送,依然失败,我折腾了一下发现 https 获取 payload 还是有些困难的 转向了 Siri 那么我能不能用 Siri 实现呢?是能的,可以用 Siri -> 捷径 -> 获取你说的话 -> 发送 ChatGPT -> 小爱 or 直接 Siri 自己来
网友象牙山刘能有一天发他儿子小爱同学的聊天记录,突然灵感来了,我可以用最蠢的轮询,来不断获取最新的聊天记录,如果有新的符合要求我就发送给 ChatGPT –> 再用 tts 让小爱同学朗读,但因为朗读需要时间,所以轮询也没那么笨了。
从开发者的演示显示,整个过程足够流畅,实际回答也远超小爱同学原本的「智力」。(具备条件可搜索 GitHub 项目「xiaogpt」)
2、ChatGPT Siri
Siri 接入 ChatGPT 指南。目前仅限 iPhone 端及其他支持快捷指令的 Apple 产品,后续会更新 Android 版本。
3、飞书 ×(GPT-3.5 + DALL·E + Whisper)
notion image
1)机器人功能
语音交流:直接与机器人畅所欲言; 多话题对话:支持私人和群聊多话题讨论,高效连贯; 文本成图:支持文本成图和以图搜图; 角色扮演:支持场景模式,增添讨论乐趣和创意; 上下文保留:回复对话框即可继续同一话题讨论; ⏰ 自动结束:超时自动结束对话,支持清除讨论历史; 富文本卡片:支持富文本卡片回复,信息更丰富多彩; 交互式反馈:即时获取机器人处理结果; 场景预设:内置丰富场景预设,方便用户管理场景; 历史回档:轻松回档历史对话,继续话题讨论; 管理员模式:内置管理员模式,使用更安全可靠;
2)项目特点
基于 OpenAI-gpt-3.5-turbo 接口; 通过 lark,将 ChatGPT 接入飞书; 支持 Serverless 云函数、本地环境、Docker、二进制安装包多种渠道部署; 基于 goCache 内存键值对缓存;

五、万物可译

1、卷到了,直接文件翻译:ChatGPT for Translation | ChatGPT 用于翻译
让你将任何语言翻译成你喜欢的语言。
使用 ChatGPT 将文本以忠于原文的方式翻译成指定的目标语言。该工具接受一个文本文件(.txt,.md,html 或. rtf)或者一个包含文本的文件夹,并生成一个直接翻译后的文本或一个双语的 (并列显示原始文本和翻译文本) 文本。
这个工具默认自动设置了多线程 (加速你的翻译过程)、自动考虑了 ChatGPT 给用户设置的频率限制、可以设置是否翻译人名 (默认为翻译)。
2、翻译 chrome 插件:OpenAI Translator Bob Plugin
notion image
性能:
1)支持三种翻译模式:翻译、润色、总结; 2)支持 55 种语言的相互翻译、润色和总结功能; 3)支持实时翻译、润色和总结,以最快的速度响应用户,让翻译、润色和总结的过程达到前所未有的流畅和顺滑; 4)支持自定义翻译文本; 5)支持一键复制; 6)支持 TTS; 7)有桌面端应用,全平台(Windows + macOS + Linux)支持!

六、PromptPerfect 提示优化器

看到 jina 发布了 PromptPerfect,专为大型语言模型 (LLM)、大型模型 (LM) 和 LMOps 设计的提示优化器。
notion image
1、PromptPerfect 是啥
尖端工具简化了提示工程,自动优化您对 ChatGPT、GPT-3.5、DALLE 和 StableDiffusion 模型的提示。无论您是提示工程师、内容创建者还是 AI 开发人员,PromptPerfect 都能让提示优化变得简单易行。凭借其直观的界面和强大的功能,PromptPerfect 释放了 LLM 和 LM 的全部潜力,每次都能提供高质量的结果。告别 AI 生成的低质量内容,并使用 PromptPerfect 来提示完美!
2、一个具体的例子
1)自己写的提示词
帮助写一篇介绍 promptperfect 的知乎文章,PromptPerfect 可以优化任何使用语言模型进行文本生成和分析的模型的提示;生成的内容需要中文。
2)PromptPerfect 改之后的提示词
`Your task is to write a Chinese language article introducing PromptPerfect. Your response should provide an overview of the capabilities of PromptPerfect, focusing on its ability to optimize prompts for any text generation and analysis model using language models. The article should be written in clear and concise Chinese, with attention to detail and accuracy.
Please note that your article should explain how PromptPerfect can help improve the quality of generated content by optimizing prompts for language models. It should also discuss the various features and benefits of using PromptPerfect, such as increased flexibility and creativity in generated content. Additionally, you should focus on providing examples that illustrate how PromptPerfect can be used effectively in different scenarios.`
直观感受:提示词描述更加具体和写实,甚至提示本身就是在构成接下来文章的大纲。‍
输出是一个卡片:【那么优化了什么?】
这个模块,实现了【原句子】-> 【优化句子】,到底差别在哪 ,讲得还头头是道,感觉比优化器 PromptPerfect 本身更让我觉得有意思。
notion image

总结

本文对搭载 ChatGPT 的 AI 助手,这一个现象级应用点进行了信息串烧,并对 PromptPerfect 进行了介绍,其中有些文章链接,大家可以进一步查看,以增进自己的理解。

参考文献

关于我们

老刘,刘焕勇,NLP 开源爱好者与践行者,主页:https://liuhuanyong.github.io
就职于 360 人工智能研究院、曾就职于中国科学院软件研究所。
老刘说 NLP,将定期发布语言资源、工程实践、技术总结等内容,欢迎关注。
对于想加入更优质的知识图谱、事件图谱实践、相关分享的,可关注公众号,在后台菜单栏中点击会员社区 -> 会员入群加入。
​ > 本文由简悦 SimpRead 转码