第1章概述
1.1背景
系统与充值平台的接口是文件的方式,充值平台将文件内容以ASN.1方式进行编码,系统需要根据ASN.1协议进行解码。
关于ASN.1开发的资料,网上资料非常少,特别是涉及到具体的语言,如java,资料、案例及第三方库更是少之又少。从无到有是很困难的,为了防止后期其他系统还需要做类似接口,将其记录为文章以便后查,文章会以充值接口作为案例进行介绍。
1.2ASN.1概念
在和领域,ASN.1(AbstractSyntaxNotationone)是一套,是描述的表示、编码、传输、解码的灵活的记法。它提供了一套正式、无歧义和精确的规则以描述独立于特定计算机硬件的对象结构。
ASN.1包括几个标准化编码规则,如基本编码规则(BER)-X.209、规范编码规则(CER)、识别名编码规则(DER)、压缩编码规则(PER)和XML编码规则(XER)。这些编码规则描述了如何对ASN.1中定义的数值进行编码,以便用于传输,而不管计算机、编程语言或它在应用程序中如何表示等因素。ASN.1的编码方法比许多与之相竞争的标记系统更先进,它支持可扩展信息快速可靠的传输—在无线宽带中,这是一种优势。1984年,ASN.1就已经成为了一种国际标准,它的编码规则已经成熟并在可靠性和兼容性方面拥有更丰富的历程。
简洁的二进制编码规则(BER、CER、DER、PER,但不包括XER)可当作更现代XML的替代。然而,ASN.1支持对数据的语义进行描述,所以它是比XML更为高级的语言。
ASN.1的描述可以容易地被映射成C或C++或Java的数据结构,并可以被应用程序代码使用,并得到运行时程序库的支持,进而能够对编码和解码XML或TLV格式的,或一种非常紧凑的压缩编码格式的描述。同时,ASN.1也是一种用于描述结构化实体的结构和内容的语言。
如:使用ASN.1语法可以这样定义一个类:Report::=SEQUENCE{
authorOCTETSTRING,
titleOCTETSTRING,
bodyOCTETSTRING,
biblioINTEGER
}
注:在进行ASN1开发前,需要先阅读上述文章,了解其中的一些基本概念。
1.3TAG
由于TAG在ASN1中非常之重要,而且在对文件进行解析时就是因为TAG的问题导致浪费了很多时间,因此这里对其单独介绍,不过只是提出概念,详细描述还需参见相关规范。
TAG是对ASN1协议中每个数据域的标识,通过2.2的截图可以看到,每个结点名称后面都有一个数字,这个就TAG值。TAG有可分为四大类:UNIVERSAL、Context、Private、Application。详见:
第2章开发工具
通常情况下,如果使用该协议进行交互,双方应该规定出一个以ASN.1语法描述的协议文件,类似webservice开发中的wsdl,然后各自系统使用相关工具进行编解码。
2.1开发库
目前网上能查到的第三方免费工具,主要有JavaAsn1Comiler和bouncycastle子库:
lJavaAsn1Comiler(JAC.jar):
n该工具可根据ASN.1协议描述文件,生成对应的java类,同时提供的API接口非常友好,命名概念同理论基本一致,使用非常方便,但是前提是必须要有完整的ASN.1描述文件,而且非常重要的一点使用限制是,该库目前支持TAG值在0-127之间,即:如果协议中的数据使用了超过127的TAG值,则该库无法支持,不可使用(否则会出现编码错误,无法解析)。
n该库提供了相当丰富的使用案例,可参考其工程下的test目录。
lbouncycastle(bcprov-jdk16-1.46.jar)
n该工具没有提供自动生成java代码的能力,如果要进行编解码,则需要手动对协议中的类进行定义,并且自己调用相应的API实现编解码。使用起来较JAC复杂,但是该库对TAG值没有限制,适合用在TAG值大于127的场景。
n在使用该类进行解析时,由于没有提供方便的API进行自动解析,因此需要手工编写解析代码,比较郁闷的是其帮助文档也没有比较详细的案例,最后的解码操作还是通过阅读其ASN1Dump类的实现方才完成。
2.2辅助工具
由于经ASN.1编码后的文件是二进制格式,无法直接阅读,因此在开发过程中,为了能够比较直观的阅读到其编码后的记录,需要借助第三方工具来查看编码后的文件内容。
网上有几个查看工具,但是最方便、最直观的工具则是ASN1VE2.1(未注册版有功能限制,只能查看编码后的文件),通过该软件可以很轻松的查看到文件内容,截图如下:
l二进制视图:
lXML视图
第3章JavaAsn1Compiler
3.1定义ASN.1描述文件
通过通信双方约定的数据格式,使用ASN.1语法对其进行定义(参见1.2百度文库),形成.asn文件,如vc.asn。
3.2生成java代码
3.2.1代码生成
将编写好的.asn文件放到JAC.jar目录,执行:java-jarJAC.jar-dc:/jac_test-pvcvc.asn
参数描述:
-d:生成java代码文件的保存目录;
-p:生成java代码的package;
3.2.2代码案例
以下代码可从JavaAsn1Compiler工程的test目录下获取,ASN1文件内容:MiddleSeq::=SEQUENCE
{
status[22]INTEGER,
location[APPLICATION11]INTEGER
}
生成的java代码如下:importcom.turkcelltech.jac.*;
importcom.chaosinmotion.asn1.Tag;
publicclassMiddleSeqextendsSequence
{
publicASN1Integerstatus=newASN1Integer("status");
publicASN1Integerlocation=newASN1Integer("location");
public
MiddleSeq()
{
super();
setUpElements();
}
public
MiddleSeq(Stringname)
{
super(name);
setUpElements();
}
protectedvoid
setUpElements()
{
super.addElement(status);
status.setTagClass(Tag.CONTEXT);
status.setTagNumber(22);
super.addElement(location);
location.setTagClass(Tag.APPLICATION);
location.setTagNumber(11);
/*endofelementsetup*/
}
}
3.2.3编解码//编码
ByteArrayOutputStreamoutStream=newByteArrayOutputStream();
BerOutputStreamout=newBerOutputStream(outStream);
MiddleSeqms=newMiddleSeq();
ms.status.setValue(2);
ms.location.setValue(314);
ms.encode(out);
//解码
ByteArrayInputStreaminputStream;
BerInputStreamin;
inputStream=newByteArrayInputStream(outStream.toByteArray());
in=newBerInputStream(inputStream);
MiddleSeqdecode_ms=newMiddleSeq("decode_ms");
decode_ms.decode(in);
System.out.println("ms.status="+decode_ms.status.getValue());
可见编解码非常简单,如果是嵌套结构,只要对最外层对象执行encode/decode操作即可。
3.3总结
使用该库在有ASN1协议描述文件时,开发ASN1编解码非常容易,缺点就是不支持超过127的TAG值。
第4章bouncycastle
bouncycastle(简称bc)包含了一系列的java编解码工具,ASN1只是其中的一类。在没有ASN1协议描述文件的情况下,结合ASN1VE工具,可以进行相关的编解码开发,云南服务质量管理系统与VC充值平台正是使用这种方式开发的。
4.1编码
在云南服务质量管理系统中,实际上并没用用到ASN1编码的知识,但是在从零开始的背景下,为了更好的学习和理解ASN1的编码格式,这里便开发了一个编码模型。
4.1.1确定编码的文件格式
由于没有ASN1文件,只有编码后的文件,因此需要通过ASN1VE来查看编码后是什么格式,如图所示:
通过上图可以看出整个文件的组织结构、每个数据域对应的TAG值以及TAG的类型(Application)。但是ASN1的编码有多种方式,如:BER/DER/PER等,bc库提供的API就包含了BER和DER两种类型,为了确定具体的编码格式,利用bc库自带的ASN1Dump工具,可以将该文件通过文本的方式输出出来(略),最后获取的方式为DER,下面就利用bc库提供的API来构造上述的结构。
4.1.2构造ASN1映射类
有了上面分析出的结构再结合对方提供的word文档,即可以定义出大概结构,这里只给出其中Header的定义,其他可参考具体代码:importjava.io.IOException;
importorg.bouncycastle.asn1.ASN1EncodableVector;
importorg.bouncycastle.asn1.DERApplicationSpecific;
importorg.bouncycastle.asn1.DEREncodable;
importorg.bouncycastle.asn1.DERIA5String;
importorg.bouncycastle.asn1.DERInteger;
publicclassRecordHeaderextendsDERApplicationSpecific
{
publicRecordHeader(booleanexplicit,inttag,DEREncodableobject)throwsIOException{
super(explicit,tag,object);
//TODOAuto-generatedconstructorstub
}
publicRecordHeader(inttagNo,ASN1EncodableVectorvec){
super(tagNo,vec);
}
publicRecordHeader(inttag,byte[]octets){
super(tag,octets);
//TODOAuto-generatedconstructorstub
}
publicRecordHeader(inttag,DEREncodableobject)throwsIOException{
super(tag,object);
//TODOAuto-generatedconstructorstub
}
publicstaticRecordHeadercreateHeader(intrecodeType,StringsenderCode,StringaccepterCode,
StringfileSerialNo,StringfileCreateTime,intfileVersionNo)
{
DERIntegerd_recodeType=newDERInteger(recodeType);
DERIA5Stringd_senderCode=newDERIA5String(senderCode);
DERIA5Stringd_accepterCode=newDERIA5String(accepterCode);
DERIA5Stringd_fileSerialNo=newDERIA5String(fileSerialNo);
DERIA5Stringd_fileCreateTime=newDERIA5String(fileCreateTime);
DERIntegerd_fileVersionNo=newDERInteger(fileVersionNo);
ASN1EncodableVectorvec=newASN1EncodableVector();
try{
vec.add(newDERApplicationSpecific(false,50,d_recodeType));
vec.add(newDERApplicationSpecific(false,51,d_senderCode));
vec.add(newDERApplicationSpecific(false,52,d_accepterCode));
vec.add(newDERApplicationSpecific(false,53,d_fileSerialNo));
vec.add(newDERApplicationSpecific(false,54,d_fileCreateTime));
vec.add(newDERApplicationSpecific(false,55,d_fileVersionNo));
}
catch(IOExceptione){
e.printStackTrace();
}
RecordHeaderheader=newRecordHeader(33,vec);
returnheader;
}
}
代码中几个重要概念
l类定义:理论上一个类的定义应该是一个SEQUENCE,但是通过ASN1Dump出来的数据显示其并不是一个Sequence,而只是一个普通的结点,因此这里不能继承DERSequence,否则编码出的文件将会在Application的上或者下多出一个Sequence结点。
lDERApplicationSpecific:这个是表示构造Application类型Tag的类,如果协议中没有规定Tag类型,默认的可以使用DERTaggedObject来定义节点。(说明:而在JAC库中,如果要定义TAG的类型,实际上只要调用一个set方法即可,这里定义了一个单独的类,在没有说明的情况下是很难找到的)
l结构的模拟:为了实现ASN1VE中查看出的结构(一个结点下面的多个App子结点),可以通过bc库提供的ASN1EncodableVector来进行模拟(见代码)。
4.2解码
由于bc库没有提供直接解析成对象的API(也可能是我没找到),因此需要自行定义业务实体以及解码代码。
4.2.1定义实体结构
根据文档(word)提供的协议的业务描述结合ASN1VE查看出的结构,定义出业务对象,其实就是普通的javabean,如:Root、Header、Tail和Body等,Root结构如下:publicclassRoot{
privateHeaderheader;
privateList
bodys;
privateTailtail;
}
4.2.2定义实体解析类
为了将数据解析出一个复合对象,需要针对每个实体定义一个解析类,将二进制数据解析成类对象,如:RootDecoder、HeaderDecoder、BodyDecoder和TailDecoder等,其中HeaderDecoder代码如下:publicclassHeaderDecoder{
privateHeaderheader=newHeader();
/**
*按Sequence顺序解析包头
*@paramnodeHeader
*@throwsIOException
*/
publicHeaderDecoder(DERApplicationSpecificderHeader)throwsIOException
{
ASN1Sequences=ASN1Sequence.getInstance(derHeader.getObject(DERTags.SEQUENCE));
for(Enumeratione=s.getObjects();e.hasMoreElements();)
{
DERApplicationSpecificderObj=(DERApplicationSpecific)e.nextElement();
System.out.println(derObj.getApplicationTag());
if(derObj.getApplicationTag()==50){
DERIntegerrecodeType=newDERInteger(derObj.getContents());
header.setRecodeType(recodeType.getValue().intValue());
}
elseif(derObj.getApplicationTag()==51){
DERIA5StringsenderCode=newDERIA5String(derObj.getContents());
header.setSenderCode(senderCode.getString());
}
elseif(derObj.getApplicationTag()==52){
DERIA5StringaccepterCode=newDERIA5String(derObj.getContents());
header.setAccepterCode(accepterCode.getString());
}
elseif(derObj.getApplicationTag()==53){
DERIA5StringfileSerialNo=newDERIA5String(derObj.getContents());
header.setFileSerialNo(fileSerialNo.getString());
}
elseif(derObj.getApplicationTag()==54){
DERIA5StringfileCreateTime=newDERIA5String(derObj.getContents());
header.setFileCreateTime(fileCreateTime.getString());
}
elseif(derObj.getApplicationTag()==55){
DERIntegerfileVersionNo=newDERInteger(derObj.getContents());
header.setFileVersionNo(fileVersionNo.getValue().intValue());
}
}
}
/**
*@returntheheader
*/
publicHeadergetHeader(){
returnheader;
}
}
代码简介:
该Decoder在构造函数中读取外部传来的DERApplicationSpecific对象(该对象使其上层root解析子节点获取得到的),在利用bc库的API根据TAG值将其所有的子节点的二进制数据读出来,最后通过bc库内置的基本类型将二进制数据再解码成原始数据。
4.2.3外部调用接口
为了方便的实现文件解析,单独提供一个类(DecodeMan):输入为需要解码的ASN1二进制文件,输出为定义的复合类型Root,最后相关人员再通过对Root的数据进行格式化转换成项目需要用的数据格式。publicclassDecodeMan{
publicstaticvoidmain(String[]args)throwsIOException{
Rootroot=decode("c:/IVCRECORD_0324871.0058");
System.out.println(root.toString());
}
/**
*文件解码
*@paramencodeFile文件绝对路径
*@return填充数据的Root实例
*@throwsIOException
*/
publicstaticRootdecode(StringencodeFile)throwsIOException
{
System.out.println("Startingdecodefile:["+encodeFile+"]");
Filefile=newFile(encodeFile);
byte[]byteContents=FileUtils.readFileToByteArray(file);
ByteArrayInputStreaminputStream=null;
try{
inputStream=newByteArrayInputStream(byteContents);
ASN1StreamParserasn1Parser=newASN1StreamParser(inputStream);
DERApplicationSpecificderRoot=(DERApplicationSpecific)asn1Parser.readObject();
RootDecoderrootDecoder=newRootDecoder(derRoot);
System.out.println("Decodefilesucc:["+encodeFile+"]");
returnrootDecoder.getRoot();
}
finally{
IOUtils.closeQuietly(inputStream);
}
}
}