1.4.0
🌟 1.4.0 版本主要有以下更新 (2023.11.10)
1.模型:
- 新增文本模型 gpt-4-turbo,价格相比gpt-4下降50%
- 升级 gpt-3.5-turbo,上下文提升至16k
- 新增语音识别模型 whisper-1
- 新增语音合成模型 tts-1
- 新增图片生成模型 dall-e-3
- 新增图片理解模型 gpt-4-vision
2.插件: 新增网页链接总结的插件
3.体验: 新增官网和文档中心,用户端添加了部分功能
一、文本
1. 新增 LinkAI-4-turbo
新增文本模型 LinkAI-4-turbo (gpt-4-turbo),价格相比 LinkAI-4 下降50%
网页端配置:
系统已经自动使用 LinkAI-4-turbo 替换了当前的 LinkAI-4模型,价格为每 10token消耗1积分,相比 LinkAI-4 下降50%。
API调用或wechat项目中:
model参数设置为 gpt-4-turbo
、 gpt-4-1106-preview
中的一个即可进行调用。
2. LinkAI-3.5 模型升级
3.5-turbo模型升级后,上下文提升至16k,且速度有大幅提升,原3.5-16k模型已下线,API或开源集成中的模型参数无需修改,会自动使用新的模型。
二、语音
1. 新增语音识别 whisper-1
新增语音识别模型,可将用户的语音输入转化为文字。
cow项目中,只需在config.json
中设置以下参数即可开启语音识别:
"use_linkai": true,
"linkai_api_key": "YOU_API_KEY",
"speech_recognition": true
大部分参数在配置模板文件中都有默认选项,只需修改一下配置即可。当前只支持openai
的 whisper-1
模型,后续将增加 baidu、azure、elevenlabs
等。
2. 新增语音生成 tts
同样在config.json
中进行以下配置即可回复语音:
"use_linkai": true,
"linkai_api_key": "YOU_API_KEY",
"tts_voice_id": "alloy",
"text_to_voice_model": "tts-1",
"voice_reply_voice": true,
配置说明:
voice_reply_voice
配置表示在收到用户语音时才进行语音回复,如果想使用语音回复任何问题,可以设置always_reply_voice
配置为truetts_voice_id
是语音生成的音色,可选的有 alloy, echo, fable, onyx, nova, shimmertext_to_voice_model
是tts使用的模型,可选的有 tts-1, tts-hd-1,后者质量更高,但价格是前者的两倍- 如果想在群聊使用语音回复,首先要设置
group_speech_recognition
配置为true, 同时由于群聊中默认需要@进行触发,一种方法是设置group_chat_prefix
配置为 [""],但这样任何问题都会触发语音回复; 还有一种是设置一个方便用语音触发的前缀,比如group_chat_prefix
: ["你好"],这样你的语音包含这个前缀就可以触发回复了
注意:目前cow项目中 wx 通道受框架限制,只能回复mp3,方案待调研。效果如下图:
三、图像
1. 新增图片生成 dall-e-3
新增 dall-e-2 / dall-e-3 的图片生成模型,在cow项目 中设置以下参数可以使用dall-e画图:
"use_linkai": true,
"linkai_api_key": "YOU_API_KEY",
"text_to_image": "dall-e-3"
效果如下:
- 以
image_create_prefix
配置开头的问题会触发画图,默认触发词为 "画" - 如果你在海外服务器运行,添加上
"image_proxy": false
表示无需代理,可以加速图片的获取。 - 注意如果想让dalle和midjourney模型共用,可以将
plugins/linkai/config.json
中的use_image_create_prefix
配置设置为false,使用$mj
触发midjourney 作图
2. 新增图片理解 LinkAI-4-vision
目前作用于cow项目 中 linkai插件 的总结功能中,更新代码即可使用:
如果想关闭对图片的识别,可以将 plugins/linkai/config.json
中的 summary 部分设置为以下内容,其中type字段表示只总结文件和分享链接:
"summary": {
"enabled": true,
"group_enabled": true,
"max_file_size": 5000,
"type": ["FILE", "SHARING"]
}
注:以上模型在后续版本均会通过api开放,价格见 计费规则
二、插件
新增 "网页速读" 插件,在应用配置中添加插件即可使用,当问题中包含网页链接时,可以访问网页内容并回答问题:
注:直接发送链接不携带问题也能直接总结。开启插件后,API 和 微信端可以直接使用。
三、用户体验
首页 增加 "热门" 和 "最新" 应用的排序,同时可以找到"收藏"的应用
手机号登录窗口增加 "忘记密码" 选项,同时 "我的账号" 页面 "修改" 个人信息处同样可以重置密码
四、官网及文档
新增平台官网页面 https://link-ai.tech,原有子域名
chat.link-ai.tech
会自动跳转到新域名文档中心迁移至 https://docs.link-ai.tech