NEWS

新闻

了解openKylin最新资讯,关注社区和产品动态。

NEWS

Learn about the latest news.

解锁AI,openKylin智能交互新体验!

2023-09-04 14:05:25

近年来,人工智能技术取得显著进展,不断涌现出更成熟、更强大的AI产品,并且这些产品正逐渐应用到各行各业的创新发展中来。尤其在桌面操作系统领域,AI技术的深度融合将有机会重新定义人机交互方式。因此,openKylin社区积极拥抱创新,从智能输入、智能输出两方面入手,尝试探索桌面操作系统未来智能交互的发展方向。


PART 1语音助手

openKylin语音助手是一款支持语音指令的智能语音软件,用户可通过语音下达指令,无须键盘输入,即可触发应用功能。

openKylin语音助手服务端采用开源模型库paddlespeech作为语音识别服务,将客户端上传的流式语音进行识别并且返回给客户端;客户端采用Qt的Multimedia模块进行语音识别,然后进行格式封装上传到服务端,根据识别结果处理对应操作。

目前,在openKylin 1.0版本上已实现的主要功能有:

  • 识别用户的语音输入;
  • 支持快速打开应用。
openKylin(开放麒麟)


后续我们会进一步开发,让语音助手能够拥有上下文,并计划扩展更多使用场景,包括:

  • 语音搜索:通过语音输入方式快速帮助用户使用全局搜索;
  • 天气查询:通过语音输入方式快速帮助用户查看天气状况;
  • 语音翻译:通过语音识别和机器翻译技术,将一种语言翻译成另外一种语言;
  • 系统设置:通过语音识别对系统亮度、音量等基础设置进行调整。

项目地址:

https://gitee.com/openkylin/kylin-asrassistant

AIFramework SIG地址:

https://gitee.com/openkylin/community/tree/master/sig/AIFramework


PART 2桌面AI大模型插件

openKylin开始尝试对AI大模型产品的生态兼容和系统级融合,探索操作系统的AI智能化发展新路径。目前,已在openKylin软件商店上架推出桌面AI大模型插件,安装后将会在开始菜单里增加AI助手模块,支持使用用户自己申请的AI大模型API Key和Secret Key,调用AI大模型接口,实现在openKylin系统上体验基于大语言模型的聊天机器人功能!

使用说明

1.打开软件商店下载安装桌面AI大模型插件后,重启系统

openKylin(开放麒麟)


2.打开开始菜单,进入AI助手模块,如下图所示

openKylin(开放麒麟)


备注:前往(
https://cloud.baidu.com/survey/qianfan.html
)申请测试Key。

3.输入API Key和Secret Key登录后,即可开始在openKylin系统上体验基于大语言模型的聊天机器人功能!

openKylin(开放麒麟)


项目地址:

https://gitee.com/openkylin/ukui-menu

UKUI SIG地址:

https://gitee.com/openkylin/community/tree/master/sig/UKUI


通过不断完善智能输入和智能输出,将使得openKylin操作系统更加智能化,能够更好地适应用户的需求和使用习惯,大幅提升用户体验。后续,随着这些技术的不断发展,也将为未来桌面操作系统的创新和发展提供更多的可能性和机会。欢迎志同道合的伙伴加入我们,携手共建!