免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2699 | 回复: 5

[文件系统] page_cache_async_readahead如何实现异步读取的 [复制链接]

论坛徽章:
1
2015年迎新春徽章
日期:2015-03-04 09:58:11
发表于 2015-01-20 22:34 |显示全部楼层
本帖最后由 arm-linux-gcc 于 2015-01-21 09:55 编辑

并没有看到在什么地方开启了别的线程或workqueue
我看到走到read_pages里面,会在blk_finish_plug处对提交的那些request调用__blk_run_queue,而__blk_run_queue中是直接调用的块设备驱动注册下去的request_fn回调了
请问page_cache_async_readahead的”后台读“体现在那里?
难道是要依靠块设备驱动的request_fn回调自己主动去wake_up另外一个线程来做真正的读取物理介质?比如mmc_request_fn wake_up了mmc_queue_thread

论坛徽章:
1
2015年迎新春徽章
日期:2015-03-04 09:58:11
发表于 2015-01-20 22:56 |显示全部楼层
本帖最后由 arm-linux-gcc 于 2015-01-20 22:57 编辑

@blake326

论坛徽章:
16
2015亚冠之吉达阿赫利
日期:2015-08-17 11:21:462015年迎新春徽章
日期:2015-03-04 09:58:11酉鸡
日期:2014-12-07 09:06:19水瓶座
日期:2014-11-04 14:23:29天秤座
日期:2014-03-02 08:57:52双鱼座
日期:2014-02-22 13:07:56午马
日期:2014-02-14 11:08:18双鱼座
日期:2014-02-13 11:09:37卯兔
日期:2014-02-06 15:10:34子鼠
日期:2014-01-20 14:48:19戌狗
日期:2013-12-19 09:37:46射手座
日期:2013-12-19 09:33:47
发表于 2015-01-21 06:52 |显示全部楼层
本帖最后由 embeddedlwp 于 2015-01-21 06:53 编辑

sync readahead on page cache cache miss
async readahead on reach threshold for readahead pipelining

论坛徽章:
1
2015年迎新春徽章
日期:2015-03-04 09:58:11
发表于 2015-01-21 09:49 |显示全部楼层
本帖最后由 arm-linux-gcc 于 2015-01-21 09:53 编辑

回复 3# embeddedlwp


    你没看明白我问的问题,我知道page_cache_sync_readahead读的是未命中的page(也就是app想要的那些数据),page_cache_async_readahead读的是设置了readahead后面的那些page(此时app想要的数据已经在page cache里了,这次只是为了下一轮的app read准备数据)

但是我没看明白page_cache_async_readahead的后台操作是怎么实现的,整个流程看一下一直到块设备的request_fn,都在同一个线程上,
如果块设备的request_fn里直接就做了真正的读介质操作(而不是启动另外一个线程来做),那么request_fn没读完数据前page_cache_async_readahead是不能返回的,那么这次do_generic_file_read就无法实现“直接从page cache里取数据,并且后台预读将来的数据”了,于是看到的就将会是“这次想要的数据在page cache里,但是仍然要等到预读将来的数据完成之后,read系统调用才能返回”,
这显然不合理,看上去后台读取能否实现就完全取决于request_fn怎么写了。
不知道我的理解对不对。








论坛徽章:
15
射手座
日期:2014-02-26 13:45:082015年迎新春徽章
日期:2015-03-04 09:54:452015年辞旧岁徽章
日期:2015-03-03 16:54:15羊年新春福章
日期:2015-02-26 08:47:552015年亚洲杯之卡塔尔
日期:2015-02-03 08:33:45射手座
日期:2014-12-31 08:36:51水瓶座
日期:2014-06-04 08:33:52天蝎座
日期:2014-05-14 14:30:41天秤座
日期:2014-04-21 08:37:08处女座
日期:2014-04-18 16:57:05戌狗
日期:2014-04-04 12:21:33技术图书徽章
日期:2014-03-25 09:00:29
发表于 2015-01-21 16:12 |显示全部楼层
arm-linux-gcc 发表于 2015-01-21 09:49
回复 3# embeddedlwp

个人理解:
IO(包括读)操作本身就是异步的,这里的sync实际并非真正意义上的同步,page_cache_async_readahead和page_cache_sync_readahead实际都是异步读,异步体现在read_pages之后,最终实际是将IO request提交到相应的请求队列后,就直接返回了,并没有阻塞等待IO完成,最终IO request的提交还依赖于kblockd之类的机制对请求队列进行unplug,然后将请求提交到底层,底层完成IO请求后通过中断和endio来通知上层,IO request的执行实际是异步完成的。

page_cache_sync_readahead的“同步”,体现在do_generic_file_read中调用page_cache_sync_readahead后,会通过lock_page_killable(page)同步等待“需要读取的”page的读操作完成,而此时该page的读请求是和其它预读的pages通过page_cache_sync_readahead一起下发的。

论坛徽章:
6
金牛座
日期:2013-10-08 10:19:10技术图书徽章
日期:2013-10-14 16:24:09CU十二周年纪念徽章
日期:2013-10-24 15:41:34狮子座
日期:2013-11-24 19:26:19未羊
日期:2014-01-23 15:50:002015年亚洲杯之阿联酋
日期:2015-05-09 14:36:15
发表于 2015-01-21 16:45 |显示全部楼层
回复 5# humjb_1983
楼上正解

   
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

SACC2019中国系统架构师大会

【数字转型 架构演进】SACC2019中国系统架构师大会
2019年10月31日~11月2日第11届中国系统架构师大会(SACC2019)将在北京隆重召开。四大主线并行的演讲模式,1个主会场、20个技术专场、超千人参与的会议规模,100+来自互联网、金融、制造业、电商等领域的嘉宾阵容,将为广大参会者提供一场最具价值的技术交流盛会。




----------------------------------------

大会官网>>
  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:huangweiwei@it168.com
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP