侵权投诉

完善资料让更多小伙伴认识你,还能领取20积分哦, 立即完善>

3天内不再提示

小米铁蛋都有哪些秘密功能

xiaomigongsi0406 ? 来源:小米公司 ? 作者:小米公司 ? 2021-12-07 09:41 ? 次阅读

“铁蛋铁蛋,握个手”

“铁蛋铁蛋,作个揖”

“铁蛋铁蛋,跳支舞”

作为小米科技园里的新晋团宠,铁蛋都有哪些秘密功能?如果拥有一只铁蛋,你将会获得怎么样的新奇体验?

这次,我们邀请了几位初入职场的小米同学,一起来体验拥有铁蛋的一天。每个同学都可以认领一只属于自己的铁蛋,他们将携铁蛋一起,通过闯关的方式,去解锁铁蛋的技术盲盒。当智能的铁蛋和热爱技术的同学强强联手,他们会带来哪些精彩的技术故事呢?

小米铁蛋这些神秘超能力的背后都有哪些秘密?来看看工程师们的介绍!

Q:铁蛋的相机技术应用在哪些方面?能实现哪些功能?

A:基于小米自研的人体检测、人体重识别、人脸检测识别、室内建图导航等算法的应用,铁蛋可以实现人脸识别、智能跟随、自主避障,以及拍照、录像等功能。

在跟随时,结合人体ReID算法,可以对主人进行实时跟随;当目标人体脱离铁蛋可视范围(如拐角),再次出现时,铁蛋依旧能够准确的识别和跟随;当有其他人出现在主人和铁蛋中间时,也不会误跟踪到路人身上。

此外,铁蛋可实现自动规划到下一目标点的前进路线,并在导航运动过程中自主规避遇到的障碍物。

Q:为什么铁蛋能够做到快速、准确的识别主人?

A:铁蛋头部配备了一颗1300万像素的广角相机,根据铁蛋和人体的相对高度,我们设计了一个合适的仰角,使机器狗可以最大化的捕捉到前方的人脸和人体信息。用户在拿到铁蛋的第一时间,可以通过APP录入主人的人脸特征信息,因此铁蛋就可以通过视觉算法对画面中出现的每一个人进行比对识别,这样铁蛋就可以通过人脸来识别主人了。

小米自研的人脸识别算法是基于最新深度学习算法,可实现实时对输入画面进行人脸检测,当检测到人脸后对人脸上关键点,进行识别和分析最终对每一个人进行ID识别。目前人脸关键点最高可支持216个,拥有百万级的训练数据,速度极快,只需要2毫秒。

Q:当主人在人群复杂场景移动时,为什么铁蛋能够实时准确的跟随主人?同时能够自主避障?

A:铁蛋配备的AI交互相机和2个150°的超广角鱼眼相机,搭配深度摄像模组,使得铁蛋具有超强的视觉空间感知能力,为铁蛋的智能跟随功能奠定了硬件基础。铁蛋的自主跟随功能是多个算法模块协作完成的,涉及的软件算法模块包括:人脸识别、人形检测、人体ReID、人体位置计算、SLAM建图、路径规划、导航避障等算法模块。

铁蛋在开启主人跟随模式后,首先通过人脸识别将主人和人体对应起来,在跟随的过程中实时进行人体ReID保证铁蛋不会被陌生人领走;在跟随前行过程中,我们会实时计算主人与铁蛋的相对位置关系,计算主人的前行速度并预测主人的行径路,根据这些信息铁蛋会实时的调整自己的速度和方向以实现智能的等距跟随,特别是当主人前进过快,或者拐弯铁蛋会通过语音提示主人。在跟随前行过程中,铁蛋会实时的进行SLAM导航避障,跟随过程中铁蛋检测到前方有障碍物时,会根据地图进行局部的路径规划和导航,自主的绕开障碍物,找到一条最优的路径跟上主人的步伐。

Q:铁蛋是怎么做到认识路的?

A:铁蛋具有自主定位导航的功能。在铁蛋头部装有AI交互相机、双目超广角相机、Intel Realsense D450深度摄像头等传感器。利用这些传感器通过SLAM技术实现铁蛋的定位和环境感知,建立导航地图。通过APP,用户可查看地图,选择目的地。目的地确认后,铁蛋通过导航规划技术可自动规划到目标点的前进路线,并自主规避运动过程中遇到的障碍物。简单讲就是,SLAM技术告诉铁蛋你在哪儿,你周围环境是什么样。导航告诉铁蛋你去哪儿,以及怎么去。

Q:在复杂环境里中准确寻找到物品,铁蛋是如何做到的?

A:铁蛋有探索未知环境和目标检测功能,实现边走边找的功能。利用头部视觉模组实时感知局部环境,发现环境中边界和可通行区域,同时,在行走过程中不断通过目标检测算法来对场景中的物体进行实时的定位及分类,检测到场景中有特定物品时,把此位置作为导航目标,规划出一条可行路径并走过去。

Q:开发过程中最大的挑战是什么?

A:第一点:从0到1,历时10个月完成了小米第一代四足机器人视觉功能的技术预研与量产交付;

第二点:基于NVIDIA平台而非我们熟悉或者有一定积累的高通平台,在此过程中我们一边扩大团队,一边学、探索和开发,大部分的算法都是自己开发的,过程非常艰辛;

第三点:铁蛋是第一个直播发布的仿生机器人平台,量产并发售给普通用户的机器人平台,在安全性和可靠性方面,我们做了充足的工作。

Q:铁蛋未来还会有可能开发出哪些功能?

A:铁蛋汇集了小米的核心技术积累,包括但不限于机器学习、生物识别、计算机视觉等。在高端硬件模组和多种软件算法的应用下,铁蛋可以实现更真实的生物反应以及环境观察和辨识能力。未来,在视觉交互层面,我们将会创造更有趣的玩法,开辟更多新功能,让铁蛋的交互场景也更加丰富;并会不断的开发和优化适合铁蛋平台的SLAM和导航的算法框架,使其有更优异的性能,在复杂的环境下依旧具备精准的建图定位能力和导航避障能力。此外,机器视觉、导航避障、人机交互、Al语音算法等技术可以反哺手机、智能家居等产品。

刘慈欣表示:“科技与科幻都是人类想象力的延伸,和人类未来的生活息息相关。科技在很多方面将科幻变成现实。”

铁蛋融合了仿生机器人的特性,在动物属性上增加了高科技的智能算法,赋予它人类最期待的智能功能,包括但不限于机器学习、生物识别、计算机视觉等,支持超感视觉探知系统,是科技和现实载体的结合。基于小米自研的人脸识别、人体检测、室内建图导航等算法的应用,内置高性能超感视觉探知系统和AI语音交互系统,搭配深度摄像模组,使得铁蛋具有科技感的同时,兼具真实的生物反应。

我是Cyberdog铁蛋,未来我会不断学习更多的技能,融入更多的前沿新兴科技,变成一个“全能铁蛋”,让全球每个人都能享受科技带来的美好生活,请大家敬请期待吧!

原文标题:听说,有人向铁蛋发起了挑战

文章出处:【微信公众号:小米公司】欢迎添加关注!文章转载请注明出处。
责任编辑:pj

原文标题:听说,有人向铁蛋发起了挑战

文章出处:【微信号:xiaomigongsi0406,微信公众号:小米公司】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    瑞为技术斩获“2021年度最佳人工智能公司TOP30”

    近日,备受业内瞩目的机器之心「AI中国」2021年度评选榜单正式揭晓。瑞为技术凭借深耕多年的图像感知....
    的头像 瑞为技术Reconova 发表于 01-21 14:14 ? 292次 阅读

    如何在回声点上更改钟面相关资料分享

    Amazon’sEcho Spot makes for a fantastic bedside alarm clock, and there are a handful of clock faces to choose from. ...
    发表于 01-21 10:35 ? 0次 阅读

    NVIDIA在线研讨会亮点前瞻

    DeepStream SDK 作为 IVA 智能视频分析工具集,为利用 AI 和机器视觉方法处理和分....
    的头像 NVIDIA英伟达企业解决方案 发表于 01-21 09:55 ? 173次 阅读

    NVIDIA出席第十五届深圳国际金融科技博览会

    第十五届深圳国际金融科技博览会(“简称金博会”)在深圳会展中心1号馆举行。 众所周知,在金融行业,现....
    的头像 NVIDIA英伟达企业解决方案 发表于 01-21 09:31 ? 535次 阅读

    智慧校园安装人脸识别门禁的好处都有哪些

    校园这个场所的人员流动性较大,主要涉及对象为学生和学校教职工。而大部分学校是以视频监控的方式来预防保....
    发表于 01-20 17:36 ? 11次 阅读

    易华录亮相第十六届中国智能交通年会

    第十六届中国智能交通年会(ITSAC 2021)暨2021中国智能交通大会在湖南长沙举行。本次活动由....
    的头像 易华录 发表于 01-20 16:35 ? 284次 阅读

    隔空科技完成新一轮过亿元融资,隔空雷达芯片全面进入照明、安防、智能家居市场!

    近日,隔空科技宣布完成新一轮C轮融资,融资金额超1亿元。本轮融资由TCL创投、国投创业、复星锐正联合....
    发表于 01-20 15:18 ? 453次 阅读
    隔空科技完成新一轮过亿元融资,隔空雷达芯片全面进入照明、安防、智能家居市场!

    小区电梯智能识别阻车系统的简单介绍

    电动车禁入电梯,电梯智能识别阻车系统 如何科学有效地防止电动车进电梯?答案就是,通过基于人工智能技术....
    发表于 01-20 14:00 ? 42次 阅读

    一清创新荣获“最佳自动驾驶园区商用奖”

    「雷锋网2021最佳AI数智化年度榜」评选活动成功举办,一清创新荣获“最佳自动驾驶园区商用奖”,一清....
    的头像 一清创新UDI 发表于 01-20 12:02 ? 800次 阅读

    小米集团与全国多家高校共建小米工作室

    最近,小米集团与全国多家高校共建的「 小米工作室 」陆续揭牌启用啦!小米集团2021年与高校的人才合....
    的头像 小米公司 发表于 01-20 11:35 ? 288次 阅读

    工业大数据加速融合AI向数据智能发展

    近期,由中国科学院《互联网周刊》、德本咨询、eNet研究院联合发布了“2021数字经济创新企业100....
    的头像 机智云物联网 发表于 01-20 10:58 ? 410次 阅读

    如何建立真正的数据目录

    作者简介:王积杰目前担任IBM数据与AI产品线大中华区信息架构产品总监,对AI和信息架构有深刻的理解....
    的头像 IBM中国 发表于 01-20 10:22 ? 191次 阅读

    2022年半导体行业十大发展趋势

    导语:随着光、温度、压力、磁场、电场等环境因素的变化,导电性会发生相当大的变化,这是半导体主要特性之....
    的头像 华秋商城 发表于 01-20 09:50 ? 443次 阅读

    怎样去设计一种基于esp32cam和esp8266单片机的人脸识别开门门锁呢

    怎样去设计一种基于esp32cam和esp8266单片机的人脸识别开门门锁呢?有哪些设计步骤呢? ...
    发表于 01-20 06:54 ? 101次 阅读

    对话艾拉物联全球终端形象设计官 探寻划时代智慧空间2.0秘境

    Ayla Home,作为Ayla艾拉物联在实现“云边端”一体化基础上创建的智能家居品牌,旨在成为全球....
    发表于 01-19 17:26 ? 17次 阅读
    对话艾拉物联全球终端形象设计官 探寻划时代智慧空间2.0秘境

    日产汽车将开展使用AI技术为电动汽车充电的实验

    电子发烧友网报道(文/李弯弯)据外媒报道,日产汽车1月12日宣布,公司将开展使用AI技术为电动汽车充....
    的头像 电子发烧友网 发表于 01-19 17:05 ? 325次 阅读

    我国集成电路进出口逆差进一步扩大

    电子发烧友网报道(文/吴子鹏)前不久,工信部发布了《2021年1-11月份电子信息制造业运行情况》,....
    的头像 电子发烧友网 发表于 01-19 17:01 ? 329次 阅读

    人脸识别门禁系统应用有哪四大领域

    随着人工智能系统智能化水平的提高,各种智能系统已广泛应用于人们的生活之中,人脸识别系统作为人工智能系....
    发表于 01-19 15:56 ? 20次 阅读

    AI+安防市场规模将超900亿,各细分场景迎新机

    当下,随着行业智能化发展加快,安防边界愈发模糊,AI场景化需求持续落地。AI+安防作为人工智能技术的....
    发表于 01-19 14:55 ? 217次 阅读

    所托瑞安亮相2021第二届全球保险科技大会

    日前,由金融界、天津港保税区联合举办的2021第二届全球保险科技大会暨“燕梳奖”年度评选活动隆重召开....
    的头像 智能防撞所托瑞安 发表于 01-19 13:32 ? 290次 阅读

    长电科技SCK荣获澜起科技 “2021年最佳供应商”奖

    2022年1月19日,中国上海 ---近日,全球领先的集成电路制造和技术服务提供商长电科技子公司星科....
    发表于 01-19 12:09 ? 53次 阅读
    长电科技SCK荣获澜起科技 “2021年最佳供应商”奖

    小马智行与一汽(南京)达成战略合作

    在自动驾驶技术应用落地的关键领域,小马智行再迎重量级合作伙伴。小马智行宣布与战略投资方中国一汽的全资....
    的头像 Pony.ai小马智行 发表于 01-19 12:05 ? 348次 阅读

    阿尔法蛋AI词典笔X10助力解决家长辅导难题

    “双减”政策推出,个性化教育时代来临,孩子如何培养?家长们也是绞尽脑汁,希望能为孩子在学习的道路上提....
    发表于 01-19 10:43 ? 13次 阅读

    来也科技RPA+AI加速智能化

    在数字化、自动化、智能化等技术浪潮的推进下,众多企业纷纷开始考虑转型、升级。在此趋势下,中交第二航务....
    的头像 话说科技 发表于 01-19 09:22 ? 390次 阅读

    巧思人工智能宫颈细胞学辅助筛查系统助力精准医疗

    在刚刚结束的广东省病理年会医学会病理学学术年会上,深思考作为深耕于“AI+医疗”领域的高新技术企业,....
    的头像 旷视MEGVII 发表于 01-19 08:47 ? 626次 阅读

    耐能亮相第十八届中国国际社会公共安全博览会

    第十八届中国(深圳)国际社会公共安全博览会(以下简称“深圳安博会”)在深圳福田会展中心如火如荼的举行....
    的头像 Kneron耐能 发表于 01-18 17:46 ? 382次 阅读

    英特尔启动AI百佳创新激励计划

    作为未来最重要的赋能技术,人工智能正在加速与各行各业融合,不断释放数字经济的实力。为了推动人工智能行....
    的头像 英特尔中国 发表于 01-18 15:27 ? 482次 阅读

    在PC端上搭建一款具有指纹识别与人脸识别功能的门禁兼考勤系统

    一、设计目标:旨在PC端上搭建一款具有指纹识别与人脸识别功能的门禁兼考勤系统。该系统同时具备普通用户模式、管理员模式与超级...
    发表于 01-18 09:37 ? 0次 阅读

    日产开展AI技术研究,或让汽车充电跟加油一样快!

    电子发烧友网报道(文/李弯弯)据外媒报道,日产汽车1月12日宣布,公司将开展使用AI技术为电动汽车充....
    的头像 Carol Li 发表于 01-18 09:29 ? 1514次 阅读
    日产开展AI技术研究,或让汽车充电跟加油一样快!

    2021的科技卦象·坎·全球缺芯洪水,中国造桥寻路

    过去一年里,全球缺芯焦虑,从汽车、电子消费等重点行业,演变成为一场覆盖上下游产业链、波及全球消费者的....
    的头像 脑极体 发表于 01-18 09:04 ? 1988次 阅读

    怎样为Esp32 Cam去配置一种Arduino开发环境呢

    怎样为Esp32 Cam去配置一种Arduino开发环境呢?有哪些配置步骤呢? ...
    发表于 01-18 07:20 ? 0次 阅读

    在企业微信2022年新品发布会上,艾博世刷脸支付消费机扮演什么角色?

    近日,企业微信2022新品发布会盛大举行。此次发布会,发布企业微信4.0版本,全面升级了「连接」能力....
    的头像 深圳市盛思达 发表于 01-17 17:58 ? 30次 阅读
    在企业微信2022年新品发布会上,艾博世刷脸支付消费机扮演什么角色?

    维智科技亮相WIM2021世界创新者年会

    由亿欧主办的「数字重塑世界」WIM2021 世界创新者年会在上海圆满落幕,并揭晓了年度重磅World....
    的头像 WAYZ维智 发表于 01-17 17:21 ? 433次 阅读

    维智科技荣获“年度人工智能创新产品”大奖

    2021中国数字化年会启幕,维智“Phy-gital飞吉特时空智能平台” 凭借顶尖时空AI技术的落地....
    的头像 WAYZ维智 发表于 01-17 17:18 ? 432次 阅读

    摩尔线程与同方计算机携手共同打造数智化算力底座

    近日,摩尔线程智能科技(北京)有限责任公司(简称:摩尔线程)与同方计算机有限公司(简称:同方计算机)....
    发表于 01-17 16:58 ? 31次 阅读

    小区人脸识别门禁系统主要应用的简介

    小区人口数量集中化,工作人员进出状况繁杂,不仅有亲戚朋友、快递公司外卖送餐,也是有不出名的路人。因为....
    发表于 01-17 15:52 ? 8次 阅读

    AI芯片行业需求全面爆发 爱芯元智再获A++轮8亿元融资加速产业布局

     近日,AI视觉芯片研发及基础算力平台公司爱芯元智——宣布完成A++轮融资,该轮总金额为8亿元人民币....
    发表于 01-17 14:27 ? 145次 阅读
    AI芯片行业需求全面爆发 爱芯元智再获A++轮8亿元融资加速产业布局

    基于ToF传感器的3D手势识别解决方案

    ????????手势识别是计算机科学和语言技术领域的一个研究课题,其目的是通过数学算法解析人类手势。....
    的头像 意法半导体中国 发表于 01-17 14:17 ? 358次 阅读

    MAXIPILOT1.0智能巡航系统底层自研端到端解决方案

    全球出行产业变革蕴藏的巨大市场空间,归因于全人类对于交通出行的共性价值追求。
    的头像 智驾科技MAXIEYE 发表于 01-17 13:33 ? 1362次 阅读

    智驾科技MAXIEYE加速推进自动驾驶逐级落地

    由铅笔道主办的2021?真榜——中国最具价值创新企业颁奖盛典在北京召开,会议宣布2021真榜获奖企业....
    的头像 智驾科技MAXIEYE 发表于 01-17 12:49 ? 1445次 阅读

    云天励飞的隐私保护和信息安全能力已达到国际标准

    近日,云天励飞再次顺利通过国际权威认证机构BSI(British Standards Institu....
    的头像 云天励飞 发表于 01-17 12:25 ? 273次 阅读

    云天励飞首次公布“开箱即用”SDC标准化产品

    第十八届安博会将于深圳会展中心(福田)隆重召开。云天励飞依然在1号馆1B11亮相,届时欢迎各位莅临现....
    的头像 云天励飞 发表于 01-17 12:21 ? 287次 阅读

    云天励飞亮相全球(深圳)人工智能生态峰会

    全国人工智能创新应用大赛颁奖典礼暨全球(深圳)人工智能生态峰会在深举行。云天励飞董事长兼CEO陈宁博....
    的头像 云天励飞 发表于 01-17 12:15 ? 491次 阅读

    云天励飞“1+1+N”自进化城市智能体战略

    第十八届中国国际社会公共安全博览会(简称“安博会”)在深圳会展中心顺利盛大举行。
    的头像 云天励飞 发表于 01-17 12:10 ? 312次 阅读

    云天励飞构建自进化城市智能体

    由中国通信学会主办的2021(第四届)公共安全信息通信论坛在安博会期间举办,云天励飞董事长兼CEO陈....
    的头像 云天励飞 发表于 01-17 11:59 ? 467次 阅读

    【虹科】什么是AI?关于人工智能的基础知识

    关于虹科智能感知虹科智能感知事业部专注于智能感知与机器视觉领域,已经和IDS,Blickfeld和G....
    的头像 林燕芬 发表于 01-17 11:45 ? 21次 阅读
    【虹科】什么是AI?关于人工智能的基础知识

    奥拓电子:构建智慧城市,打造智慧社区

    第十八届中国国际社会公共安全博览会在深圳福田会展中心隆重举行。奥拓电子围绕“构建智慧城市,打造智慧社....
    的头像 AOTO奥拓 发表于 01-17 11:33 ? 596次 阅读

    乐视3D人脸识别智能门锁1349元大促,某米都做不到的价格

    家里装修进入到收尾阶段,然而选购智能门锁却把我“难”住了。 老婆看上了凯迪仕3D人脸识别门锁K11,....
    的头像 火花 发表于 01-17 10:44 ? 198次 阅读
    乐视3D人脸识别智能门锁1349元大促,某米都做不到的价格

    三星再获2022 CES关注 C-Lab项目成为新主角

    日前,国际消费类电子产品展览会(CES)在美国拉斯维加斯落下帷幕。作为全球领先的科技企业,三星将“携....
    的头像 焦点讯 发表于 01-17 10:06 ? 171次 阅读

    AI视频智能分析在明橱亮灶/冷库智慧监管的应用

    根据国家市场监管总局政策文件,各地冷链进口集中监管仓,入仓查验区、核酸采样、消毒、装卸货等关键点安装....
    发表于 01-17 09:49 ? 1672次 阅读
    AI视频智能分析在明橱亮灶/冷库智慧监管的应用

    AI遇上强迫症,大脑与情绪的羁绊有解了

    年关将近,很多人已经走在了各种规划和整理的路上。无论是年货物品的置办,还是家里的深度打扫,都已经提上....
    的头像 脑极体 发表于 01-17 08:53 ? 678次 阅读

    人脸识别系统在智慧城市发展中的应用

    从2016年人工智能兴起以来,AI人脸识别技术的应用逐渐增多,并广泛应用于金融、交通、银行、教育等场....
    发表于 01-15 14:18 ? 20次 阅读

    如何利用树莓派+STM32实现人脸识别门禁系统的设计

        这个项目的最后一篇博客也是拖了很久了,从开始复习那会儿拖到了期末考完回了家,今天就赶紧把它了结了,让这个项...
    发表于 01-14 07:04 ? 0次 阅读

    树莓派+STM32人脸识别门禁系统的设计资料分享

        近期完成了一个人脸识别门禁系统的项目,这个项目是今年学校科技立项的题目,到期末了应该结题了,所以上两周就赶...
    发表于 01-10 07:27 ? 0次 阅读

    在嵌入式开发板上如何用opencv调用caffe模型进行人脸识别并截图呢

    在嵌入式开发板上如何用opencv调用caffe模型进行人脸识别并截图呢?其代码该如何去实现呢?...
    发表于 12-27 06:56 ? 0次 阅读

    怎样去实现一种嵌入式linux上的人脸识别程序

    一、前言大概几年前搞过一套嵌入式linux上的人脸识别程序,当然人脸识别的核心算法并不是自己开发的,关于人脸识别算法这一块,虽...
    发表于 12-23 06:38 ? 0次 阅读

    一套小米4C刷openwrt配置简析

    0. 前言对于我们这些搞机器人的工程师来说,当前嵌入式开发板需要安装一些外网才能安装的软件包时,总需要我们从电脑下载相应的软...
    发表于 12-20 06:20 ? 101次 阅读

    人脸识别模块mini版【ESP32+百度云在线识别】UART串口输出方便连接使用

    [media=x,500,375]https://www.bilibili.com/video/BV1eU4y1N7U8/[/media] 参数信息: 供电电压:3.3V 供电电流...
    发表于 12-19 16:03 ? 101次 阅读
    她的小梨涡完整版免费阅读