从JVM到Dalivk再到ART(class,dex,odex,vdex,ELF)

现在市面上的 Android 手机大部分都是运行的是ART虚拟机了。还记得自己一部 Android手机(HuaweiG520),Android4.1 系统。那时候还是没有 ART虚拟机 的。作为Android开发者,我们应该对 Android 的发展历史有些了解为什么 Android 会经历这么多的变化。Android 是先有 JVM 然后是 Dalvik ,接着是现在的 ART虚拟机 。那么他们之间有什么关系呢?

Dalvik和ART

JVM就不用讲述了大家都有了解,不了解的参见JVM百度百科

DalvikGoogle 公司自己设计用于 Android 平台的虚拟机,是 Google 等厂商合作开发的 Android 移动设备平台的核心组成部分之一。它可以支持已转换为 .dex 格式的 Java 应用程序的运行,.dex 格式是专为Dalvik 设计的一种压缩格式,适合内存和处理器速度有限的系统。

Dalvik和JVM的主要区别

首先通过介绍 Dalvik 的时候我们就知道 Dalvik 运行的是 dex 文件,而JVM 运行的是 class 文件。

Dalvik VM 是基于寄存器的架构,而 JVM 是栈机。所以 Dalvik VM 的好处是可以做到更好的提前优化(ahead-of-time optimization)。 另外基于寄存器架构的VM执行起来更快,但是代价是更大的代码长度。

基于寄存器架构的虚拟机有这么多的好处,为什么之前设计JAVA的程序员没有采用呢,而是采用现在基于栈的架构开发的呢?

因为基于栈的虚拟机也有它的优点,它不对 host 平台的 寄存器数量 做假设,有利于移植到不懂的平台,这也符合的Java跨平台的特点。而Dalvik 虚拟机则不关心这些,因为它本来就是为 ARM 这样的多寄存器平台设计的,另外 Dalvik 被移植到 x86 机器上,即使 x86 这种寄存器少的平台,寄存器架构的虚拟机也可以运行。

一般来说,基于堆栈的机器必须使用指令才能从堆栈上的加载和操作数据,因此,相对基于寄存器的机器,它们需要更多的指令才能实现相同的性能。但是基于寄存器机器上的指令必须经过编码,因此,它们的指令往往更大。

public class Demo {
    public static void foo() {
        int a = 1;
        int b = 2;
        int c = (a + b) * 5;
     } 
}

我们可以查看Demo.java在JVM中的class和Dalvik的dex字节码文件:
详见:使用dx将class转dex总结

bytecode

想要了解更多:基于栈的虚拟机 VS 基于寄存器的虚拟机

Dalvik在JVM上的优化

  • 在编译时提前优化代码而不是等到运行时
  • 虚拟机很小,使用的空间也小;被设计来满足可高效运行多种虚拟机实例。
  • 常量池已被修改为只使用32位的索引,以简化解释器
  • 标准Java字节码实行8位堆栈指令,Dalvik使用16位指令集直接作用于局部变量。局部变量通常来自4位的“虚拟寄存器”区。这样减少了Dalvik的指令计数,提高了翻译速度。

Dalivk进化之ART

2014年6月25日,Android L 正式亮相于召开的谷歌I/O大会,Android L 改动幅度较大,谷歌将直接删除 Dalvik ,代替它的是传闻已久的 ART。在在Android系统4.4 提出,在 Android5.0之后完全弃用 dalvik 全部采用 art为执行环境。

ART( Android Runtime

ART 的机制与 Dalvik 不同。在 Dalvik 下,应用每次运行的时候,字节码都需要通过即时编译器(just in time ,JIT)转换为机器码,这会拖慢应用的运行效率,而在ART 环境中,应用在第一次安装的时候,字节码就会预先编译成机器码,使其成为真正的本地应用。这个过程叫做预编译(AOT,Ahead-Of-Time)。这样的话,应用的启动(首次)和执行都会变得更加快速。

ART的优缺点

优点:

  • 系统性能的显著提升。
  • 应用启动更快、运行更快、体验更流畅、触感反馈更及时。
  • 更长的电池续航能力。
  • 支持更低的硬件。

缺点:

  • 机器码占用的存储空间更大,字节码变为机器码之后,可能会增加10%-20(不过在应用包中,可执行的代码常常只是一部分。比如最新的 Google+ APK 是 28.3 MB,但是代码只有 6.9 MB。)
  • 应用的安装时间会变长。

class、dex、odex、ELF相爱相杀

从执行文件上面进行分析的话,JVM 对应 class 文件,Dalivk 对应 odex 文件,而 ART 对应 oat 文件。

工具:javac, dx
.java——>.class——->.dex
.java 文件经过 javac 编译器生成 .class 字节码 再经过。dx 工具生成 .dex

为了在 JVM 优化出一个 Dalivk 虚拟机,所以把 JVM 运行的 class 文件进行打包优化为 dex 文件,但其本质还是和 class 文件一样属于字节码文件。但是为了每次启动时都去掉从字节码到机器码的编译过程,Google 又从 Dalivk 中优化出了 ART,在其安装应用的时候将 dex 文件进行预处理生成可执行的 oat 文件。

JIT的引入

据说 Android 2.2 的虚拟机 dalvik 使用了 JIT 技术,使其运行速度快了5倍。

dalvik 解释并执行程序,JIT 技术主要是对多次运行的代码进行编译,当再次调用时使用编译之后的机器码,而不是每次都解释,以节约时间。5倍是测试程序测出的值,并不是说程序运行速度也能达到5倍,这是因为测试程序有很多的重复调用和循环,而一般程序主要是顺序执行的,而且它是一边运行,一边编译,一开始的时候提速不多,所以真正运行程序速度提高不是特别明显。

每启动一个应用程序,都会相应地启动一个 dalvik 虚拟机,启动时会建立JIT 线程,一直在后台运行。当某段代码被调用时,虚拟机会判断它是否需要编译成机器码,如果需要,就做一个标记,JIT 线程不断判断此标记,如果发现被设定就把它编译成机器码,并将其机器码地址及相关信息放入 entry table 中,下次执行到此就跳到机器码段执行,而不再解释执行,从而提高速度。

odex(optimized dex)

因为 apk 实际为 zip 压缩包,虚拟机每次加载都需要从 apk 中读取classes.dex 文件,这样会耗费很多的时间,而如果采用了 odex 方式优化的 dex 文件,他包含了加载 dex 必须的依赖库文件列表,只需要直接加载而不需要再去解析。

Android N 之前,对于在 dalvik 环境中 使用 dexopt 来对 dex 字节码进行优化生成 odex 文件最终存在手机的 data/dalvik-cache 目录下,最后把 apk 文件中的 dex 文件删除。

Android O 之后,odex 是从 vdex 这个文件中 提取了部分模块生成的一个新的可执行二进制码文件 , odexvdex 中提取后,vdex 的大小就减少了。

  • 第一次开机就会生成在 /system/app/<packagename>/oat/
  • 在系统运行过程中,虚拟机将其 从 /system/appcopy/data/davilk-cache/ 下;
  • odex + vdex = apk 的全部源码 (vdex 并不是独立于 odex 的文件 odex + vdex 才代表一个 apk );

AOT(Ahead-of-time)

ART 推出了预先 (AOT) 编译,可提高应用的性能。ART 还具有比 Dalvik 更严格的安装时验证。在安装时,ART 使用设备自带的 dex2oat 工具来编译应用。该实用工具接受 DEX 文件作为输入,并针对目标设备生成已编译应用的可执行文件。之后打开 App 的时候,不需要额外的翻译工作,直接使用本地机器码运行,因此运行速度提高。

AOTart 的核心,oat 文件包含 oatdataoatexec。前者包含 dex 文件内容,后者包含生成的本地机器指令,从这里看出 oat 文件回会比 dex 文件占用更大的存储空间。

因为 oat 文件包含生成的本地机器指令进而可以直接运行,它同样保存在手机的 data/dalvik-cache 目录下 PMS(PackgetManagerService)—>installd(守护进程)——>dex2oat(/system/bin/dex2oat) 。注意存放在 data/dalvik-cache 目录下的后缀名都仍为 .dex 前者其实表示一个优化过的 .dex 文件 后者为 .art 文件。

push 一个新的 apk 文件覆盖之前 /system/appapk 文件,会触发 PKMS 扫描时下发 force_dex flag ,强行生成新的 vdex文件 ,覆盖之前的vdex 文件,由于某种机制,这个新 vdex 文件会 copy/data/dalvik-cache/ 下,于是 art 文件也变化了。

混合运行时

Android N 开发者预览版包含了一个混合模式的运行时。应用在安装时不做编译,而是解释字节码,所以可以快速启动。ART中有一种新的、更快的解释器,通过一种新的 JIT 完成,但是这种 JIT 的信息不是持久化的。取而代之的是,代码在执行期间被分析,分析结果保存起来。然后,当设备空转和充电的时候,ART 会执行针对“热代码”进行的基于分析的编译,其他代码不做编译。为了得到更优的代码,ART 采用了几种技巧包括深度内联。

对同一个应用可以编译数次,或者找到变“热”的代码路径或者对已经编译的代码进行新的优化,这取决于分析器在随后的执行中的分析数据。这个步骤仍被简称为 AOT,可以理解为“全时段的编译”(All-Of-the-Time compilation)。

这种混合使用 AOT、解释、JIT 的策略的全部优点如下。

  • 即使是大应用,安装时间也能缩短到几秒;
  • 系统升级能更快地安装,因为不再需要优化这一步;
  • 应用的内存占用更小,有些情况下可以降低 50%;
  • 改善了性能;
  • 更低的电池消耗;

vdex

官网回答:ART的运作方式
dex2oat 工具接受一个 APK 文件,并生成一个或多个编译工件文件,然后运行时将会加载这些文件。文件的个数、扩展名和名称会因版本而异。
在 Android O 版本中,将会生成以下文件:

  • .vdex:其中包含 APK 的未压缩 DEX 代码,另外还有一些旨在加快验证速度的元数据。
  • .odex:其中包含 APK 中已经过 AOT 编译的方法代码。
  • .art (optional):其中包含 APK 中列出的某些字符串和类的 ART 内部表示,用于加快应用启动速度。
  • 第一次开机就会生成在 /system/app/<packagename>/oat/ 下;
  • 在系统运行过程中,虚拟机将其 从 /system/appcopy/data/davilk-cache/ 下。

ELF文件

ELF(Executable and Linking Format)是一种对象文件的格式,用于定义不同类型的对象文件(Object files)中都放了什么东西、以及都以什么样的格式去放这些东西。它自最早在 System V系统上出现后,被 xNIX 世界所广泛接受,作为缺省的二进制文件格式来使用。可以说,ELF 是构成众多 xNIX 系统的基础之一。

apk安装过程

大家都知道 apk 其实就是 zipapk 安装过程其实就是解压过程。
用户应用安装涉及以下几个目录:

  • data/app 安装目录 安装时会把 apk 文件 copy 到这里;
  • data/dalvik-cache 如上述描述中的存放.dex ( .odex 无论 davilkdex 还是 artoat 格式);
  • data/data/pkg/ 存放应用程序的数据;

Android5.1 版本下 oat 文件都以 .dex 文件在 data/dalvik-cache 目录下:

dalvik-cache.jpeg

Android8.0 版本下 dex2oat 工具生成的三个.art,.odex,.vdex文件都在 data/dalvik-cache 目录下:

sogou-dalvik-cache-arm64.png

Android8.0 版本下搜狗输入法在 data/app/com.sohu.inputmethod.sogou.xiaomi-JAKuH_Jhlk6Y36zKoTUN8Q== 目录下:

sogou-data-app-xxxxx.jpg

Android8.0 版本下搜狗输入法在 system/app/SogouInput 目录下:

sogou-system-app-xxx.jpg

文中部分内容摘自:
深入理解JVM-字节码执行引擎
知乎-Dalvik 虚拟机和 Sun JVM 在架构和执行方面有什么本质区别?
《Java虚拟机原理图解》4.JVM机器指令集
Android[art]-Android dex,odex,oat,vdex,art文件结构学习总结
Android N 混合使用 AOT 编译,解释和 JIT 三种运行时

修改历史:
【第一次发布】2017.09.18 19:00
【第二次主要修改不oat、vdex和odex相关内容】2020.04.02 22:00

文章到这里就全部讲述完啦,若有其他需要交流的可以留言哦~!~!

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 199,440评论 5 467
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,814评论 2 376
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 146,427评论 0 330
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,710评论 1 270
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,625评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,014评论 1 275
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,511评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,162评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,311评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,262评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,278评论 1 328
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,989评论 3 316
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,583评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,664评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,904评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,274评论 2 345
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,856评论 2 339

推荐阅读更多精彩内容