java千万级别数据生成文件思路和优化。一年前写过一个百万级别数据库数据生成配置xml文件的程序,程序目的是用来把数据库里面的数据生成xml文件.程序可以配置多少文件生成到一个文件中去.
程序刚开始设计的时候说的是最多百万级别数据，最多50W数据生成到一个xml文件里面去,所以在做测试的时候自己也只是造了100W的数据并没有做过多数据量的测试,然后问题就来了….由于程序使用的局点数据量巨大，需要生成xml文件的客户资料接近千万级别的程度,而现场对程序的配置大约是100W条数据生成一个xml文件里面去，程序在这样的大数据量下面偶尔会有崩溃.
[......]
java千万级别数据处理–千万级别FTP下载。目的主要是去ftp主机(最多100左右)去取xx数据文件.千万级别只是个概念，代表数据量等于千万或者大于千万的数据。
本分享不牵扯分布式采集存储之类的.是在一台机器上处理数据，如果数据量很大很大的话，可以考虑分布式处理，如果以后我有这方面的经验，会及时分享的.
1、程序采用的ftp工具， apache 的 commons-net-ftp-2.0.jar
2、千万级别ftp[......]
java网页静态化的原理和最简单的实现，大家可以通过下面的文章链接进行查看
java高并发-静态页面生成方案(1)
http://www.javady.com/index.php/87.html java高并发-静态页面生成方案(2) http://www.javady.com/index.php/95.html
Spring JdbcTemplate方法详细介绍。 JdbcTemplate主要提供以下五类方法：
JdbcTemplate类支持的回调类：
用户登录后台，输入用户名和密码，对用户的用户名和密码进行验证，验证通过后，可以把用户的一些基本信息放到session里面当用户访问后台的其他页面时，去判断一下session是否存在，并且没有过期。不过，后台管理员权限[......]
Hibernate用Query作分页实例源码。Query提供了两个方法以实现分页：
query.setFirstResult(int) 设置第一条记录开始的位置
query.setMaxResults(int) 设置返回的纪录总条数
在前面的BookDao的接口和实现类中添加一个方法：
[java] view plaincopyprint?
01.public List pagedList(int pageBegin, int pageSize){
02. Query query = getSession().createQuery(“from Book”);
03.[......]
如何使用spring的作用域：
<bean id=”role” class=”spring.chapter2.maryGame.Role” scope=”singleton”/>
这里的scope就是用来配置spring bean的作用域，它标识bean的作用域。
在spring2.0之前bean只有2种作用域即：singleton(单例)、non-singleton（也称prototype）, Spring2.0以后，增加了session、request、glob[......]
javascript实时获得服务器上时间。
<span id=”spnTime”></span><script language=”javascript”>
var http = new XMLHttpRequest;
http.open(“HEAD”, “.”, false);
http.send(null);
var curDate = new Date;
var offsetTime = curDate – Date.parse(http.getResponseHeader(“Date”));
setInter[......]
JavaScript写的日期时间控件。
<!DOCTYPE HTML PUBLIC “-//W3C//DTD HTML 4.0 Transitional//EN”>
<html>
<head>
<title></title>
<meta name=”GENERATOR” content=”Microsoft Visual Studio .NET 7.1″>
<meta name=”ProgId” content=”VisualStudio.HTML”>
<meta[......]