RK3588-Camera:MIPI-CSI调试之通路解析 环球实时
一、简介
专栏总目录
(相关资料图)
本文介绍RK3588平台的Camera:MIPI-CSI调试之通路解析
MIPI联盟,即移动产业处理器接口(Mobile Industry Processor Interface 简称MIPI)联盟。MIPI(移动产业处理器接口)是MIPI联盟发起的为移动应用处理器制定的开放标准和一个规范。
目的是把手机内部的接口如摄像头、显示屏接口、射频/基带接口等标准化,从而减少手机设计的复杂程度和增加设计灵活性。
CSI & DSI
• CSI ( Camera Serial Interface ):摄像头接口
• DSI ( Display Serial Interface ):显示接口
二、 名词解释:
ISP ( Image Signal Processor ): 即图像信号处理模块, 主要作用是对前端图像传感器输出的信号做后期处理,依赖于 ISP 才能在不同的光学条件下都能较好的还原现场细节。VICAP( Video capture ):视频捕获单元三、RK3588 的camera通路:
多sensor支持:
单路硬件isp最多支持4路复用,isp复用情况支持分辨率如下:2路复用:最大分辨率3840x2160,dts对应配置2路rkisp_vir设备。3路或4路复用:最大分辨率2560x1536,dts对应配置3或4路rkisp_vir设备。硬件支持最多采集7路sensor:6mipi + 1dvp,多sensor软件通路如下:下图是RK3588 camera连接链路示意图,可以支持7路camera。
四、 链路解析:
图中:mipi camera2---> csi2_dphy1 ---> mipi2_csi2 ---> rkcif_mipi_lvds2--->rkcif_mipi_lvds2_sditf --->rkisp0_vir2
对应节点:imx415 ---> csi2_dphy0 ---> mipi2_csi2 ---> rkcif_mipi_lvds2--->rkcif_mipi_lvds2_sditf --->rkisp0_vir2
链接关系:sensor---> csi2 dphy---->mipi csi host--->vicap
实线链路解析: Camera sensor ---> dphy ---> 通过mipi_csi2模块解析mipi协议---> vicap ( rkcif节点代表vicap )
虚线链路解析:vicap ---> rkcif_mipi_lvds2_sditf ---> isp
每个vicap节点与isp的链接关系,通过对应虚拟出的XXX_sditf来指明链接关系。
五、RK3588硬件通路框图
rk3588支持2个isp硬件,每个isp设备可虚拟出多个虚拟节点,软件上通过回读的方式,依次从ddr读取每一路的图像数据进isp处理。对于多摄方案,建议将数据流平均分配到两个isp上。回读:指数据经过vicap采集到ddr,应用获取到数据后,将buffer地址推送给isp,isp再从ddr获取图像数据。六、详细解析:
imx415 : Camera sensorcsi2_dphy0 : rk3588支持2个dphy硬件,这里我们称之为dphy0_hw/dphy1_hw ,,两个dphy硬件都可以工作在full mode 和split mode两种模式下。当使用dphy0_hw:
full mode:节点名称使用csi2_dphy0,最多支持4 lane。当dphy0_hw使用full mode时,链路需要按照csi2_dphy1这条链路来配置,但是节点名称csi2_dphy1需要修改为csi2_dphy0,软件上是通过phy的序号来区分phy使用的模式。split mode:拆分成2个phy使用,分别为csi2_dphy1(使用0/1 lane)、csi2_dphy2(使用2/3 lane),每个phy最多支持2 lane。当使用dphy1_hw:
full mode:节点名称使用csi2_dphy3,最多支持4 lane。当dphy1_hw使用full mode时,链路需要按照csi2_dphy4这条链路来配置,但是节点名称csi2_dphy4需要修改为csi2_dphy3,软件上是通过phy的序号来区分phy使用的模式。split mode:拆分成2个phy使用,分别为csi2_dphy4(使用0/1 lane)、csi2_dphy5(使用2/3 lane),每个phy最多支持2 lane。dcphy:rk3588支持两个dcphy,节点名称分别为csi2_dcphy0/csi2_dcphy1。每个dcphy硬件支持RX/TX同时使用,对于camera输入使用的是RX。支持DPHY/CPHY协议复用;需要注意的是同一个dcphy的TX/RX只能同时使用DPHY或同时使用CPHY。其他dcphy参数请查阅rk3588数据手册。
使用上述mipi phy节点,需要把对应的物理节点配置上。(csi2_dcphy0_hw/csi2_dcphy1_hw/csi2_dphy0_hw/csi2_dphy1_hw)
每个mipi phy都需要一个csi2模块来解析mipi协议,节点名称分别为mipi0_csi2~mipi5_csi2。
rk3588所有camera数据都需要通过vicap,再链接到isp。rk3588仅支持一个vicap硬件,这个vicap支持同时输入6路mipi phy,及一路dvp数据,所以我们将vicap分化成rkcif_mipi_lvds~rkcif_mipi_lvds5、rkcif_dvp等7个节点,各个节点的绑定关系需要严格按照框图的节点序号配置。
每个vicap节点与isp的链接关系,通过对应虚拟出的XXX_sditf来指明链接关系。
rk3588支持2个isp硬件,每个isp设备可虚拟出多个虚拟节点,软件上通过回读的方式,依次从ddr读取每一路的图像数据进isp处理。对于多摄方案,建议将数据流平均分配到两个isp上。
直通与回读模式:•直通:指数据经过vicap采集,直接发送给isp处理,不存储到ddr。需要注意的是hdr直通时,只有短帧是真正的直通,长帧需要存在ddr,isp再从ddr读取。
•回读:指数据经过vicap采集到ddr,应用获取到数据后,将buffer地址推送给isp,isp再从ddr获取图像数据。
•在dts配置时,一个isp硬件,如果只配置一个虚拟节点,默认使用直通模式,如果配置了多个虚拟节点默认使用回读模式。
七、单路Camera的dts配置说明:( 以imx415摄像头为例 )
案例场景:这里使用的是csi2_dphy0的单路camera配置:链路配置: imx415 —> csi2_dphy0 —> mipi2_csi2 —> rkcif_mipi_lvds2—>rkcif_mipi_lvds2_sditf —>rkisp0_vir2&i2c3 {status = "okay";imx415: imx415@1a {status = "okay";compatible = "sony,imx415";reg = < 0x1a >;clocks = < &cru CLK_MIPI_CAMARAOUT_M3 >;clock-names = "xvclk";pinctrl-names = "default";pinctrl-0 = < &mipim0_camera3_clk >;power-domains = < &power RK3588_PD_VI >;pwdn-gpios = < &gpio1 RK_PB0 GPIO_ACTIVE_HIGH >;reset-gpios = < &gpio4 RK_PA0 GPIO_ACTIVE_LOW >;rockchip,camera-module-index = < 0 >;rockchip,camera-module-facing = "back";rockchip,camera-module-name = "CMK-OT2022-PX1";rockchip,camera-module-lens-name = "IR0147-50IRC-8M-F20";port {imx415_out0: endpoint {remote-endpoint = < &mipidphy0_in_ucam0 >;data-lanes = < 1 2 3 4 >;};};};camera_imx219: camera-imx219@10 {status = "disabled";compatible = "sony,imx219";reg = < 0x10 >;clocks = < &clk_cam_24m >;clock-names = "xvclk";rockchip,camera-module-index = < 0 >;rockchip,camera-module-facing = "back";rockchip,camera-module-name = "rpi-camera-v2";rockchip,camera-module-lens-name = "default";port {imx219_out0: endpoint {remote-endpoint = < &mipidphy0_in_ucam1 >;data-lanes = < 1 2 >;};};};};&csi2_dphy0_hw {status = "okay";};&csi2_dphy0 {status = "okay";ports {#address-cells = < 1 >;#size-cells = < 0 >;port@0 {reg = < 0 >;#address-cells = < 1 >;#size-cells = < 0 >;mipidphy0_in_ucam0: endpoint@1 {reg = < 1 >;remote-endpoint = < &imx415_out0 >;data-lanes = < 1 2 3 4 >;};mipidphy0_in_ucam1: endpoint@2 {reg = < 2 >;remote-endpoint = < &imx219_out0 >;data-lanes = < 1 2 >;};};port@1 {reg = < 1 >;#address-cells = < 1 >;#size-cells = < 0 >;csidphy0_out: endpoint@0 {reg = < 0 >;remote-endpoint = < &mipi2_csi2_input >;};};};};&mipi2_csi2 {status = "okay";ports {#address-cells = < 1 >;#size-cells = < 0 >;port@0 {reg = < 0 >;#address-cells = < 1 >;#size-cells = < 0 >;mipi2_csi2_input: endpoint@1 {reg = < 1 >;remote-endpoint = < &csidphy0_out >;};};port@1 {reg = < 1 >;#address-cells = < 1 >;#size-cells = < 0 >;mipi2_csi2_output: endpoint@0 {reg = < 0 >;remote-endpoint = < &cif_mipi2_in0 >;};};};};&rkcif {status = "okay";};&rkcif_mipi_lvds2 {status = "okay";port {cif_mipi2_in0: endpoint {remote-endpoint = < &mipi2_csi2_output >;};};};&rkcif_mipi_lvds2_sditf {status = "okay";port {mipi_lvds2_sditf: endpoint {remote-endpoint = < &isp0_vir0 >;};};};&rkcif_mmu {status = "okay";};&rkisp0 {status = "okay";};&isp0_mmu {status = "okay";};&rkisp0_vir0 {status = "okay";port {#address-cells = < 1 >;#size-cells = < 0 >;isp0_vir0: endpoint@0 {reg = < 0 >;remote-endpoint = < &mipi_lvds2_sditf >;};};};&pinctrl {camera {cam_pwdn_gpio: cam-pwdn-gpio {rockchip,pins = < 1 RK_PB0 RK_FUNC_GPIO &pcfg_pull_up >;};};};
八、 调试技巧
8.1 i2c设备的通用调试命令:查看设备是否挂载到i2c总线下:
i2cdetect -y 3
8.2 摄像命令
Linux系统摄像命令:gst-launch-1.0 v4l2src device=/dev/video11 ! video/x-raw,format=NV12,width=3840,height=2160, framerate=30/1 ! xvimagesink
Android系统:
Android系统自带相机APP。点击APP,看摄像画面是否正常显示。
8.3 imx415 相关的log信息
dmesg | grep imx415
8.4 查看拓扑结构
media-ctl -d /dev/media0 -p
审核编辑:汤梓红
标签:
上一篇:美国亚裔高考近满分被六大名校拒绝 为何常青藤“不认”亚裔做题家?
下一篇:最后一页
- RK3588-Camera:MIPI-CSI调试之通路解析 环球实时
- 美国亚裔高考近满分被六大名校拒绝 为何常青藤“不认”亚裔做题家?
- 加热暖水袋里面是什么_暖水袋里面是什么
- 焦点简讯:我在平安普惠贷款现在不想贷了,他们说要赔50%违约金,
- 普元信息与浪潮科技启动战略合作 携手耕耘市场 天天观热点
- 世界热点评!恭喜梅西!迈阿密新阵容曝光,球王新位置出人意料,冲第八座金球
- 关于铁路计次票、定期票 如何购买使用|世界观天下
- 西安艺术高级中学网站(西安艺术高级中学)-全球快资讯
- 全自动马桶水箱盖怎么打开(马桶水箱盖怎么打开) 今日要闻
- 暗黑4高效率获得移动类威能方法介绍|天天热门
- 手机动态:三星Galaxy S10 Lite支持页面暗示即将推出
- 环球即时看!北京德云社地址门票(北京德云社地址)
- 报考这所学院,让你“玩转”智慧城市
- 重温《蓝色生死恋》才懂,死去,才是恩熙无望人生的救赎和圆满 天天新消息
- 天天短讯!汇聚爱心 传递温暖
- 中经评论:以“村BA”点燃乡村活力
- 明明很漂亮,却让人不想追剧,从李沁到鞠婧祎,问题出在哪?
- 【当前热闻】我市开展工会爱心托管工作交流活动
- 快资讯丨“高考劣质笔”事件内情
- 福克斯足球晒美国运动员年薪排行榜:布克第一,梅西第五
- 山东航空退市成定局!上市23年市值跌去九成,国航伸援手 当前速讯
- 全球百事通!空姐超重10%立即停飞引热议 是“新规”还是“业内规定”?违法吗?
- 中越边境都龙口岸全面恢复客运通关 环球微动态
- 足字旁那个字怎么写(足字旁怎么打)_世界即时看
- 06月10日新房成交229套;涨价房源553套
- 显示器销量TOP10公布:AOC第一 小米第二 天天亮点
- 中东部天气延续“夹心”模式,长江中下游高温加码,本周末天气速览
- 全市医疗费用手工零星报销实现“网上办”“掌上办”
- 创作童谣爱国童谣怎么写? 爱国童谣自编
- 奥拉星亚比印记有什么用(奥拉星亚比印记怎么弄)_每日快讯
- cad转pdf看不清怎么办(cad转换成pdf看不清楚)
- 天天日报丨拟定的意思是什么_拟定的意思
- 61岁亚视一哥享受单身,自夸年年18岁!前任曾华倩批其大男子主义|环球快看
- 焦点短讯!南京江宁:“智慧防线”成功上线 助力汛期监管
- 在铁路12306买卧铺票也可以在线选铺位了!手把手教你怎么操作 每日头条
- 写意牡丹画法王宝钦_写意牡丹画法
- 中国5月狭义乘用车零售预计达173.0万辆 新能源车销量达58.0万辆
- 跨越山海的“寻亲路” 男子走散26年后与家人团聚
- 指南针炒股软件官网下载电脑版_zn 当前要闻
- 动漫IP“雅皮兔” 携朋友亮相文博会
- 每日观点:非遗融入生活 文化自信自强
- 啧啧什么意思_啧啧
- 报道:全球连线|洪都拉斯外长雷纳:期待洪中两国共促高水平双边合作、共拓发展机遇
- 隐形牙套品牌(隐形牙) 当前看点
- 今头条!剩菜盲盒悄然兴起 “临期食品”你会买吗?
- 出其不意的下一句怎么接_出其不意的下一句
- 李芊墨二次牵手完整版视频(李芊墨)|热议
- 内膜厚度多少正常受孕_内膜厚度多少正常 焦点速读
- 我是大运火炬手丨王颜青:“泳”往直前的四川大学游泳队队长
- 观焦点:红酒和杏仁能同食吗?
-
世界视讯!《底特律》发行商公布独立品牌:三款游戏待发售
《底特律:变人》的发行商QuanticDream公布了旗下的独立发行品牌Quanti
-
微头条丨OpenAI首席执行官同韩总统会面:建议韩国增加系统芯片产能 放宽规制营造AI生态系统
韩联社9日消息,韩国总统尹锡悦9日下午在龙山总统府接见OpenAI首席执行
-
英国监管机构阻止微软收购动视暴雪 后者获准参与上诉程序
IT之家今日(6月10日),软件巨头微软计划以690亿美元收购游戏开发商动
-
C视频丨“新”动宜宾 走进2023世界动力电池大会 探索“黑科技”
6月9日,2023世界动力电池大会在宜宾开幕。本次参会参展的企业和机构有
-
市政府与上海建工集团签署战略合作协议 天天关注
市政府与上海建工集团签署战略合作协议赵建军与徐征叶卫东等工作会谈并
-
俄乌局势最新变化:已酿成美国建国200多年最大战略败笔
这几天乌克兰的反攻又闹得沸沸扬扬,但具体的细节已经不重要了。利用乌
-
天天微资讯!纵使疾风起 人生不言弃 纵使疾风起人生不言弃是什么意思
1、纵使疾风起人生不言弃的意思是人生中即使面对严峻的困难挫折也不要
-
【独家】莫扎特的一句话(关于莫扎特的话例如说他天真)
来为大家解答以上的问题。莫扎特的一句话,扎特的话例如说他天真这个很
-
geya手表怎么调日期视频教程(geya手表)
1、您好!谢谢您对格雅表业的关注与支持。2、格雅G06130市场零售价为78
-
环球热资讯!验电器的工作原理是异种电荷相互吸引(验电器的工作原理)
来为大家解答以上的问题。验电器的工作原理是异种电荷相互吸引,验电器
-
全球滚动:网红水果之王,闻一下都觉得贵
作者|晓洋编辑|陆一鸣题图|图虫创意泰国榴莲、越南榴莲、海南榴莲……
-
“华为不造车的意思是不单独造车”,余承东最新发声:未来头部车企年产不到500万辆很难立足!
新京报贝壳财经报道,余承东称,2030年新车销量中新能源车销售占比将接
-
吉愿罐、定胜糕、考神咖……快消企业“高考”营销寻增量-新要闻
6月7日,一年一度的高考正式开考。考场之外,快消企业们也拉开了一场热
-
信息:义乌京东代运营服务商_提供优质的电商代运营服务
为什么要选择义乌京东代运营服务商?选择义乌京东代运营服务商有以下几
-
淘宝店新店怎么引流(淘宝新店如何引流量)_当前滚动
1、坚持每天到论坛发表一篇帖子,不管能不能申精,总能给店铺带来流量
-
上海发布冰雹黄色预警,目前冰雹+大风+雷电“三黄”预警高挂
“上海发布”微信公众号消息,上海中心气象台2023年06月10日17时55分发
-
世界球精选!AI前哨 | OpenAI联合创始人Sam Altman:安全性很重要 不会很快有GPT-5
凤凰网科技讯《AI前哨》6月10日消息,在2023北京智源大会上,智源研究
-
南通非遗购物节开市
畅享非遗购,探访非遗味。在6月10日“文化和自然遗产日”到来之际,南
-
即将举行!成都大运会火炬传递启动仪式来啦|全球头条
第31届世界大学生夏季运动会将于7月28日至8月8日在成都举行,这是我国
-
经济日报金观平:中国吸引跨国公司的不单是大市场
众多全球跨国公司高管近日接连开启访华行程,引发密切关注,这反映出跨
-
让“沉睡”的档案“复活”,走近黄石公安“兰台人”
让“沉睡”的档案“复活”,走近黄石公安“兰台人”---6月9日是“国际
-
延安市人民医院顺利完成2023年医师资格实践技能陕北片区考试任务 每日速递
点击上方蓝字关注我们延安市人民医院官方微信公众号关注延安市人民医院
-
hd什么意思手机上怎样去除(hd什么意思) 天天资讯
来为大家解答以上问题,hd什么意思手机上怎样去除,hd什么意思很多人还
-
首台套50万千瓦冲击式水电机组项目开工
今天(9日),大唐西藏扎拉水电站主体工程正式开工建设,项目配备首台
-
每日热门:这就是信心|优化营商环境 各地硬招、实招频出
优化营商环境是推动经济进一步企稳回升、提振经营主体发展信心的重要抓
-
收藏|最全卧床病人翻身技巧|观热点
导读不管是在医院还是居家,照护卧床病人过程中,定时翻身使患者保持
-
全球热文:媒体:霍尊前女友陈某涉嫌敲诈勒索案已进入审查起诉阶段
6月9日,翟欣欣时隔六年涉嫌敲诈勒索被逮捕引发热议,另一舆论关注的男
-
全球观天下!恭喜!香港知名女星晒照宣布产子,宝宝头发浓密像爸爸也像妈妈
未经授权严禁转载,发现抄袭者将进行全网投诉恭喜,恭喜!据港媒最新报
-
普元信息与浪潮科技启动战略合作 携手耕耘市场
6月9日,浪潮科技与普元信息(688118)举行战略合作签约仪式,双方将围绕
-
微头条丨如何促进新型研发机构高质量发展?广州这样做
大洋网讯为打造世界一流新型研发机构,推动广州从科研资源大市迈向科技
-
云集美股涨14.51%
云集美股涨14 51%---中国经济网北京6月10日讯云集美股周五收报0 22美元
-
穿越岁月的热情与温暖|当前热讯
豆瓣网图第一次听宫崎骏的名字,是在《千与千寻》得了奥斯卡之后,当时
-
环球快报:欧阳靖维护欧阳娜娜:跟她合作绝对是我的荣幸
欧阳娜娜与欧阳靖在《中国说唱巅峰对决》上进行合作表演,有网友评论道
-
微速讯:板面的做法家常做法(板面做法和配料)
1、特点:板面正宗制关键在于抻面和卤肉汤的制作。2、正宗板面制作要选
-
每日关注!已有11家全国百强所率先入驻 前海打造涉税服务业发展新高地
前海全景。(前海管理局供图)深圳新闻网2023年6月10日讯(深圳商报记
-
国家二级保护动物上门“求助” 消防救援人员开启“奶爸”模式
昨天(6月9日)上午7点,南通市崇川区学田专职消防救援站内突然“有人
-
世界快看:之放在主谓之间取消句子独立性是什么意思_取消句子独立性是什么意思
1、“取消句子独立性”:当主谓短语在句中作为主语、宾语或一个分句时
-
人民银行:一季度末金融业机构总资产达439.33万亿元
原标题:人民银行:一季度末金融业机构总资产达439 33万亿元人民网北京
-
当前讯息:券商自营业务引“争议” | 资本市场
券商自营业务引“争议”|资本市场,期货,股票,自营业务,资本市场
-
论国漫丝袜的重要性,女神必不可少,事实证明,她们的颜值高低 环球观热点
如果观众评价一般,或者是一般靠下,那这部动漫可以说几乎就凉凉了。因
-
全球快看:股票行情快报:佛山照明(000541)6月9日主力资金净卖出41.35万元
截至2023年6月9日收盘,佛山照明(000541)报收于5 25元,下跌0 94%,换
-
多地公布高考查分时间,最早6月24日
随着全国部分地区2023年高考结束,北京、安徽、海南等多个省份的查分时
-
美媒:美国前总统特朗普将面临7项联邦刑事指控_世界微速讯
据美国广播公司当地时间6月8日报道,知情者称,美国前总统特朗普因不当
-
健康食品将成新蓝海,业内专家:中式面点面临再创新
交易会期间举办的第一届“路易·乐斯福杯”中式发酵面点技能大赛现场,
-
30%分位数是什么意思_分位数是什么意思-每日短讯
1、分位数又称百分位点。2、若概率03、是指满足条件p(X>Za)=α的实数。
-
广外南国空港经济协同创新研究中心第二届学术委员会成立_环球看点
南都讯记者孙小鹏通讯员刘阳6月9日,广东外语外贸大学南国商学院空港经
-
向阳花木易为春暗示什么感情(向阳花木易为春下一句)-世界关注
阳花木易为春暗示什么感情,向阳花木易为春下一句这个问题很多朋友还不
-
帝蒂卡图腾(帝蒂卡)
今天小编岚岚来为大家解答以上的问题。帝蒂卡图腾,帝蒂卡相信很多小伙
-
CBOT豆油上涨,基准期约收高逾4%金十期货6月9日讯,据外媒报道,CBOT豆油期货收盘大幅上涨,其中基准期约收高4.02%,这可能与政府计划取消电动汽车行业纳入生物燃料掺混项目有关
CBOT豆油上涨,基准期约收高逾4%金十期货6月9日讯,据外媒报道,CBOT豆
-
影之哀伤任务流程单刷_影之哀伤任务流程
1、第二步:装备的影锋杀1000天灾,最简单,但是时间长一点。如果你很
X 关闭
X 关闭