第十一届Sky Hackathon大赛圆满落幕：多模态RAG技术创新成果丰硕

第十一届Sky Hackathon大赛圆满落幕：多模态RAG技术创新成果丰硕

NVIDIA第十一届Sky Hackathon大赛近日圆满落幕。本届大赛以"构建具有多模态检索增强生成（RAG）功能的AI聊天机器人"为主题，吸引了众多优秀团队参与。经过激烈角逐，最终评选出了一批优秀作品，展现了参赛选手在人工智能领域的创新能力和技术实力。

大赛背景

Sky Hackathon是由NVIDIA发起并主办的创新竞赛，旨在帮助在校参赛队伍、人工智能开发者在NVIDIA Jetson边缘高性能计算产品上部署和优化人工智能应用。本届大赛由NVIDIA企业级开发者社区主办，亚马逊云科技提供了云平台与计算资源支持供参赛者实验。

本次大赛主题聚焦于"构建具有多模态检索增强生成（RAG）功能的AI聊天机器人"，参赛者需要利用NVIDIA NIM平台搭建与部署对话机器人，优化对话界面并添加创新功能。通过这一过程，参赛者不仅能够掌握RAG技术和大模型的应用，还能在实践中锻炼动手能力和创新思维。

参赛者需要利用NVIDIA和亚马逊云科技提供的工具和平台，包括NVIDIA NIM平台、Amazon SageMaker AI平台服务等，来构建具有多模态检索增强生成功能的AI聊天机器人。

比赛结果总览

经过激烈角逐，大赛评选出了前十名优秀团队。以下是获奖队伍的排名及得分情况：

排名	队名
1	MVP
2	Bolt
3	ByteBuddies
4	清水湾的水
4	中老年人自习室
6	4K
7	芝士雪豹
7	tysTech
9	燧石领航
10	黄金赛罗秧BOT

前十名队伍项目详细介绍

1. MVP

项目名称：硬件开发的iPhone时刻：AI一键生成电路

项目简介：

该项目旨在通过AI技术革新硬件开发流程，实现一键生成电路设计。团队开发的PCBTool利用NVIDIA NIM平台和多模态RAG技术，能够根据用户需求自动生成电路图和PCB布局，大幅降低了硬件开发门槛，提高了开发效率。

2. Bolt

项目名称：基于NIM构建的语音转3D虚拟人（A2F-3D）的边缘智能体系统

项目简介：

该系统能够实时将用户语音转换为3D虚拟人的面部表情和口型动作，实现高度逼真的人机交互体验。项目结合了NVIDIA的音频处理和3D渲染技术，通过多模态RAG增强了虚拟人的知识库和对话能力。

---

3. ByteBuddies

项目名称：Ecopilot - 专业财报解读引擎

项目简介：

该引擎利用多模态RAG技术，能够自动分析企业财务报表，提取关键财务指标，并生成专业的解读报告。系统不仅能处理文本数据，还能分析财报中的图表和表格，提供全面的财务分析。

---

4. 清水湾的水

项目名称：AI美食助手

团队成员：赵志远、王举伟、田彪、王真、sun

项目简介：

AI美食助手是一款结合多模态RAG技术的智能烹饪指导应用。该应用能够识别食材图片，推荐适合的菜谱，并提供详细的烹饪步骤指导。用户可以通过上传食材照片或描述冰箱中的食材，系统会智能匹配最适合的菜谱。

4. 中老年人自习室

项目名称：一个有情感的AI收藏网页信息的智能RAG小助手

项目简介：

该助手能够智能识别用户浏览的网页内容，自动提取关键信息并进行分类存储。与传统书签管理不同，这款助手具有情感识别能力，能够理解用户对内容的情感反应，并据此调整存储和推荐策略。

6. 4K

项目名称：展览馆导览解说系统

项目简介：

该系统能够识别展览品图像，提供详细的展品信息和历史背景，为参观者带来沉浸式的展览体验。系统支持多语言实时翻译，能够根据参观者的兴趣偏好和知识水平，调整解说内容的深度和广度。

7. 芝士雪豹

项目名称：三维学习系统

项目简介：

该团队构建了一个创新的三维学习系统，整合了阅读精析(RAG)、听力强化(TTS)和写作训练(视觉大模型)三大功能模块。系统利用多模态RAG技术，能够深度理解学习材料，提供精准的知识点解析和拓展阅读。

7. tysTech

项目名称：TysPet-LABZLLM——多模态宠物智能管家

项目简介：

该平台利用多模态RAG技术，为宠物主人提供全方位的宠物护理和健康管理服务。系统能够通过图像识别技术识别宠物品种、健康状况，并提供个性化的饲养建议和健康预警。

9. 燧石领航

项目名称：AI知识聊天机器人

项目简介：

本项目基于RAG AI Agent技术，开发了一款专门针对AI基础设施、深度学习框架及硬件应用的智能聊天机器人。这款聊天机器人不仅能够提供广泛的技术支持和知识分享，还集成了多种交互方式，包括文本聊天、图片上传、代码片段分析以及语音交流等，旨在为用户提供全面的学习体验和技术解决方案

10. 黄金赛罗秧BOT

项目名称：智慧农林生态普查保护管理平台；

项目简介：

该平台利用多模态RAG技术，结合图像识别和自然语言处理，实现了对农林生态资源的智能普查和管理。系统能够通过图像识别技术自动识别植物种类、生长状态和病虫害情况，并提供相应的保护建议。

10. 啊对对队

项目名称：中医知识问答助手；

项目简介：

这款中医知识问答助手系统具备智能问答、知识检索和多模态交互等功能，用户可以通过自然语言提问，系统能够快速检索中医知识库并生成准确、易懂的回答。

总结

第十一届Sky Hackathon大赛通过"构建具有多模态检索增强生成（RAG）功能的AI聊天机器人"这一主题，成功推动了参赛者对RAG技术和大模型应用的深入探索。参赛队伍展示了丰富多样的创新成果，从硬件开发辅助到专业财报解读，从宠物智能管家到展览馆导览系统，充分体现了人工智能技术在各领域的广泛应用潜力。

本次大赛不仅是一场技术的盛宴，更是思维的碰撞与灵感的汇聚。通过参赛者的努力，Sky Hackathon成为推动生成式AI技术发展的重要力量。参赛队伍通过实践，深入了解并应用了RAG技术，结合大模型，自主搭建并优化了对话机器人，展现了AI技术在实际应用中的巨大潜力。

NVIDIA将继续致力于拓展技术边界，为开发者提供强大的工具与平台，共同探索AI的无限可能。期待在未来的比赛中，看到更多优秀的创新项目涌现。

我们也将于五月举办第十二届Sky Hackathon，欢迎开发者朋友们踊跃参加。