BenchmarkBenchmarkBenchmarkBenchmarkBenchmark

February 24, 2009

纠结于Benchmark之中,CV界怎么老爱摆些Benchmark出来,人脸,图象分割,场景分类。。。。Benchmark特土鳖,跟中国应试教育有得一拼:很多人学习就为了一个分数,同理,很多paper就打了堆补丁,就为了把benchmark提升了X.X%。这有意思么?

Benchmark的存在简直就是在CV界为自己化地为牢。经常看到的CV paper是这样的:XX模型,XX理论(从纯数学,统计物理学科借过来)很牛X,然后拿过来解决了些图象分割,场景分类等经典问题。

个人以为,寻找新的问题,新的应用,才是工程化CV发展的王道。

2 Responses to “BenchmarkBenchmarkBenchmarkBenchmarkBenchmark”

  1. Xiaodi said

    你这么说就是另外一个极端了。如果大家都在做花里胡哨但是不实用的东西,科学也不会有进步。任何人说自己算法好,都需要证明。我建议你做新的应用是因为你现在拼不过纯工程的手段,因为工程通常调参数等小技巧很多。能无视这种小技巧的,是解决一个别人目前还解决不了(注意,没有做过和解决不了是有根本区别的)的重要问题。但是显然你现在找的问题,1不是别人解决不了的,2不是重要问题

  2. Bubble said

    这个倒是,今天回过头来看话的确说得有些极端,谢Xiaodi指出.工程和理论相辅相成,却又有些矛盾.工程解决实际问题,而这个实际问题应该范围更加广泛才是,而不是做CV必去做人脸做图象分割.如何找新问题, 找别人没解决好的问题,是我现在最缺乏的,想必也是很多人的困惑.朋哥做神经,因为很多神经问题没有被解决,才有花大力气去做的必要,能解决好这些问题,才算真正科研工作者.

Leave a Reply

Fill in your details below or click an icon to log in:

WordPress.com Logo

You are commenting using your WordPress.com account. Log Out / Change )

Twitter picture

You are commenting using your Twitter account. Log Out / Change )

Facebook photo

You are commenting using your Facebook account. Log Out / Change )

Google+ photo

You are commenting using your Google+ account. Log Out / Change )

Connecting to %s

%d bloggers like this: