我之前实现了简单UI来跟OriginBot交互可以参考这里古月居

ROS机器人知识分享社区

但是由于我不是专业的前端开发写UI还是比较耗时的所以最近想修改一下这部分。

还有一个原因是自己开发前端如果想实现远程交互不在同一wifi下就一定需要一个云服务器来中转一下这个是比较麻烦的。

我期望的交互效果是可以双向发送文字、图片和语音找了一圈发现钉钉的「单聊机器人」可以满足所有要求所以这篇博客记录一下如何为OriginBot接入钉钉单聊机器人。

创建钉钉单聊机器人

唯一需要注意的是消息接收模式要选择Stream模式不要选择http模式即可。

如何实现收发消息

在钉钉开放平台上创建好单聊机器人后还需要有一个服务来收发消息。

在OriginBot上创建一个文件dingtalk_runtime.py,

内容如下

DingtalkMsgHandler(dingtalk_stream.ChatbotHandler):def

__init__(self):super(dingtalk_stream.ChatbotHandler,

def

dingtalk_stream.CallbackMessage):incoming_message

dingtalk_stream.ChatbotMessage.from_dict(callback.data)message_type

incoming_message.message_typeif

message_type

(text):self.reply_text(您发送的消息类型不合法目前只支持文本。

,

OKif

incoming_message.text.content.strip()self.reply_text(text,

OKdef

dingtalk_stream.Credential(os.getenv(DINGTALK_CLIENTID),os.getenv(DINGTALK_CLIENTSECRET),)client

dingtalk_stream.DingTalkStreamClient(credential)client.register_callback_handler(dingtalk_stream.chatbot.ChatbotMessage.TOPIC,

DingtalkMsgHandler())client.start_forever()if

__name__

__main__:main()运行这个脚本后在钉钉中给“originbot_home_assistant”这个机器人发送消息后它会给你回复一样的内容。

大家在代码中可以看到我目前限定了只能接收文本格式的消息其他类型暂时都不允许这主要是为了降低一开始的开发难度不用考虑所有可能。

但实际上钉钉的单聊机器人支持很丰富的消息类型可以看下面的说明企业机器人发送单聊消息

钉钉开放平台

上面给出的通过钉钉单聊机器人跟智能小车交互的代码是非常简单的它只能把你发给小车的消息原样返回但实际使用过程中肯定不会这样使用。

我在这里是希望通过在交互过程中集成GPT4o来让其更加智能化。

import

encode_image_to_base64(image_pathNone,

image_bytesNone):if

base64.b64encode(image_file.read()).decode(utf-8)if

base64.b64encode(image_bytes).decode(utf-8)return

encoded_stringdef

os.environ.get(GPT4O_ENDPOINT)try:response

requests.post(url,

response.json()[choices][0][message][content]else:logger.info(fLLM

调用失败状态码{response.status_code}错误信息{response.text})except

e:logger.error(f请求发生错误{e})except

Exception

e:logger.error(f发生未知错误{e})点击轻松实现远程智能交互OriginBot与钉钉和GPT4o的集成指南——古月居可查看全文