Skip to main content

1.4.0

🌟 1.4.0 版本主要有以下更新 (2023.11.10)

1.模型:

  • 新增文本模型 gpt-4-turbo,价格相比gpt-4下降50%
  • 升级 gpt-3.5-turbo,上下文提升至16k
  • 新增语音识别模型 whisper-1
  • 新增语音合成模型 tts-1
  • 新增图片生成模型 dall-e-3
  • 新增图片理解模型 gpt-4-vision

2.插件: 新增网页链接总结的插件

3.体验: 新增官网和文档中心,用户端添加了部分功能

一、文本

1. 新增 LinkAI-4-turbo

新增文本模型 LinkAI-4-turbo (gpt-4-turbo),价格相比 LinkAI-4 下降50%

网页端配置:


系统已经自动使用 LinkAI-4-turbo 替换了当前的 LinkAI-4模型,价格为每 10token消耗1积分,相比 LinkAI-4 下降50%。

API调用或wechat项目中:

model参数设置为 gpt-4-turbogpt-4-1106-preview 中的一个即可进行调用。

2. LinkAI-3.5 模型升级

3.5-turbo模型升级后,上下文提升至16k,且速度有大幅提升,原3.5-16k模型已下线,API或开源集成中的模型参数无需修改,会自动使用新的模型。

二、语音

1. 新增语音识别 whisper-1

新增语音识别模型,可将用户的语音输入转化为文字。

cow项目中,只需在config.json中设置以下参数即可开启语音识别:

"use_linkai": true,
"linkai_api_key": "YOU_API_KEY",
"speech_recognition": true

大部分参数在配置模板文件中都有默认选项,只需修改一下配置即可。当前只支持openaiwhisper-1模型,后续将增加 baidu、azure、elevenlabs 等。

2. 新增语音生成 tts

同样在config.json中进行以下配置即可回复语音:

"use_linkai": true,
"linkai_api_key": "YOU_API_KEY",
"tts_voice_id": "alloy",
"text_to_voice_model": "tts-1",
"voice_reply_voice": true,

配置说明:

提示
  1. voice_reply_voice 配置表示在收到用户语音时才进行语音回复,如果想使用语音回复任何问题,可以设置 always_reply_voice配置为true
  2. tts_voice_id 是语音生成的音色,可选的有 alloy, echo, fable, onyx, nova, shimmer
  3. text_to_voice_model 是tts使用的模型,可选的有 tts-1, tts-hd-1,后者质量更高,但价格是前者的两倍
  4. 如果想在群聊使用语音回复,首先要设置 group_speech_recognition配置为true, 同时由于群聊中默认需要@进行触发,一种方法是设置 group_chat_prefix 配置为 [""],但这样任何问题都会触发语音回复; 还有一种是设置一个方便用语音触发的前缀,比如 group_chat_prefix: ["你好"],这样你的语音包含这个前缀就可以触发回复了

注意:目前cow项目中 wx 通道受框架限制,只能回复mp3,方案待调研。效果如下图:

三、图像

1. 新增图片生成 dall-e-3

新增 dall-e-2 / dall-e-3 的图片生成模型,在cow项目 中设置以下参数可以使用dall-e画图:

"use_linkai": true,
"linkai_api_key": "YOU_API_KEY",
"text_to_image": "dall-e-3"

效果如下:


提示
  1. image_create_prefix 配置开头的问题会触发画图,默认触发词为 "画"
  2. 如果你在海外服务器运行,添加上 "image_proxy": false 表示无需代理,可以加速图片的获取。
  3. 注意如果想让dalle和midjourney模型共用,可以将 plugins/linkai/config.json 中的 use_image_create_prefix 配置设置为false,使用 $mj 触发midjourney 作图

2. 新增图片理解 LinkAI-4-vision

目前作用于cow项目linkai插件 的总结功能中,更新代码即可使用:


如果想关闭对图片的识别,可以将 plugins/linkai/config.json 中的 summary 部分设置为以下内容,其中type字段表示只总结文件和分享链接:

"summary": {
"enabled": true,
"group_enabled": true,
"max_file_size": 5000,
"type": ["FILE", "SHARING"]
}

注:以上模型在后续版本均会通过api开放,价格见 计费规则

二、插件

新增 "网页速读" 插件,在应用配置中添加插件即可使用,当问题中包含网页链接时,可以访问网页内容并回答问题:

注:直接发送链接不携带问题也能直接总结。开启插件后,API 和 微信端可以直接使用。

三、用户体验

  1. 首页 增加 "热门" 和 "最新" 应用的排序,同时可以找到"收藏"的应用

  2. 绑定手机号将赠送500积分,推荐进行绑定,增加账号安全性。详情查看完整收益规则, 点击链接去绑定。

  3. 手机号登录窗口增加 "忘记密码" 选项,同时 "我的账号" 页面 "修改" 个人信息处同样可以重置密码

四、官网及文档

  1. 新增平台官网页面 https://link-ai.tech,原有子域名 chat.link-ai.tech 会自动跳转到新域名

  2. 文档中心迁移至 https://docs.link-ai.tech