工程问题,实验才是王道

October 27, 2009

近来一边为新计算框架做实验一边看诸多文章的实验部分,这才渐渐领悟对于着眼实际工程问题的文章,实验部分的重要性。
遍历了一些PAMI,CVPR,ICCV上的文章,对于一部分针对于实际应用问题,如motion deteciton, tracking, etc文章的实验部分,实在觉得一团混乱。
追溯起原因可能有以下几种,引以自诫。
1)也许很多算法根本就不work,通过忽悠实验部分来达到目的。
2)就算可以work,但找的比较的算法是在数据库上根本不work的,来达到矮子里充高子的目的。
3)就算可以work,achieve best result,但是通过调高自己的参数,调低别人的参数来达到。
4)选择的数据库本身就有很多问题。好比别人挖了个烂坑,还使劲往里灌脏水。
5)不想列了。。。
现在觉得,对于欲图解决实际工程问题的文章,实验部分是王道,能应用到现实问题当中,真正work,才说明方法和前面的理论有实际价值。可现在诸多文章遵循着这样的模式:前面理论方法,使劲装13罗列理论,推公式,把本质的东西忽悠到鬼都看不懂;后面实验部分一团混乱,ROC,performance等的设定交代得不清不楚。这种文章,实在很难让人信服前面堆砌理论的有效性和必要性。
也许,真正能work的方法都被各大公司企业雪藏了,成为称之为“核心技术”的东西在不断创造着价值和利润。就目前的情况,“工程”的论文到“工程”的方法,还有很长一段路要走。

Leave a Reply

Fill in your details below or click an icon to log in:

WordPress.com Logo

You are commenting using your WordPress.com account. Log Out / Change )

Twitter picture

You are commenting using your Twitter account. Log Out / Change )

Facebook photo

You are commenting using your Facebook account. Log Out / Change )

Google+ photo

You are commenting using your Google+ account. Log Out / Change )

Connecting to %s

%d bloggers like this: