按照你的意思来说，留学分两种。
一种是到日本上语言学校然后自己参加留学生考试自己考大学，从大一开始上。或者本身已经有本科文凭可以语言学校毕业以后直接申请日本大学的研究生。
另一种是在国内本身就有不错的日语水平，在中国直接申请日本的大学。到了日本以后不上语言学校直接上大学。也是从大一开始上。
楼主的情况那肯定要上第一种了。也就是先上语言学校然后上大学。4级日语没什么用。
你在国内水平不管高还是低到了这边基本上都在一个起跑线上了。
另外值得一提，很多学生到了这边来没怎么好好上学专门打工去了。最后大学也没有考好，只能去一些比较垃圾的私立学校。说白了这边混日子的不少。

具体来说，读语言学校一年或者两年，两年可以上个好点的学校，一年就只能去个差一点的学校，当然你要是发了疯的拼命学习，也有可能一年就能上一些名牌大学，只不过不太现实。
大学你是大专文凭。据说大专文凭是不能直接读研究生的，要从大一开始上（这一点请楼主咨询留学中介本人不很确定）。所以这就要4年。去留学很显然你要呆5年以上。这之中打工什么的睁不着多少钱，学费生活费房租都算上，一年没几个钱能剩下来。如果你去了只打工不学习，挣得能多一点...

按照你的意思来说，留学分两种。
一种是到日本上语言学校然后自己参加留学生考试自己考大学，从大一开始上。或者本身已经有本科文凭可以语言学校毕业以后直接申请日本大学的研究生。
另一种是在国内本身就有不错的日语水平，在中国直接申请日本的大学。到了日本以后不上语言学校直接上大学。也是从大一开始上。
楼主的情况那肯定要上第一种了。也就是先上语言学校然后上大学。4级日语没什么用。
你在国内水平不管高还是低到了这边基本上都在一个起跑线上了。
另外值得一提，很多学生到了这边来没怎么好好上学专门打工去了。最后大学也没有考好，只能去一些比较垃圾的私立学校。说白了这边混日子的不少。

具体来说，读语言学校一年或者两年，两年可以上个好点的学校，一年就只能去个差一点的学校，当然你要是发了疯的拼命学习，也有可能一年就能上一些名牌大学，只不过不太现实。
大学你是大专文凭。据说大专文凭是不能直接读研究生的，要从大一开始上（这一点请楼主咨询留学中介本人不很确定）。所以这就要4年。去留学很显然你要呆5年以上。这之中打工什么的睁不着多少钱，学费生活费房租都算上，一年没几个钱能剩下来。如果你去了只打工不学习，挣得能多一点，但是这样我个人认为就没有留学的意义了。

至于上面我说的大专学历考大学的问题，本人不是很清楚，就不乱说了。
对了，如果你不能语言学校毕业后直接申请读研究生。那你要参加留学生考试的。考试内容差不多就是我国高二学生的课程，日语 400分 数学200分 综合200分（文理综合中的三门课程任选两门）

问题补充：日本有一些短期大学，因为我们没有上那个短期学校的，所以不是很清楚。不过可能会很适合你。
语言学校毕业后就可以申请了