O
pen
A
rchive
T
OULOUSE
A
rchive
O
uverte (
OATAO
)
OATAO is an open access repository that collects the work of Toulouse researchers and
makes it freely available over the web where possible.
This is an author-deposited version published in : http://oatao.univ-toulouse.fr/
Eprints ID : 13004
To cite this version : Ooi, Wei-Tsang and Marques, Oge and
Charvillat, Vincent and Carlier, Axel
Pushing the Envelope: Solving
Hard Multimedia Problems with Crowdsourcing
. (2013) MMTC
e-letter, vol. 8 (n° 1). pp. 37-40
Any correspondance concerning this service should be sent to the repository
administrator: staff-oatao@listes-diff.inp-toulouse.fr
2$
/#
#4
4/# ," 3
$ /
3/" 2
6
/
3 $ /#
<
G
?
/
#
+
G
* 2
)
@
/@
+ 2
H
@8
)
8
# 3$ / # * -* * . * . ) - . V * ) V + 9 . - ) . - . ) ( * . * . 5* * . - . . * : . * - . * . * . - , -* . ) ** -5 -* 5 5 ( . * * 7* * *. * . . -5 -5 5 * -* , 1 . * D . * * -* 1 * # ) * - * . - * * . .. -5 -* - . 3 ) V . . - * * ) , V ). ) * ) . ) *. . * * * . + -* . -5 -* * . ) ( * * . ) ) ) , & D" 3 # /.%/# # /# 0 / # /# " /3 > ( * ** ) -* 2 # # 0 # + O -* ( * ** ) ,* * ? E J ** ) ** . . ) ? E) ) *. * , * , WJ ) *. * . * . ) ( * . D , ( * C . -* . * . N ** * * ** ) -* ,- . < . * . - , . . . . - - , . ) * -5 -* 2 9 : ( ( * . -* ,- . 9 : * - , . 9 : ( 9 : * * . . . . ( * 9 : * - , . . 9 : . * > ( * . * - ) . ( , ) , - . D ) * E7 . D C J 9 9 : 9 : . 9 :: . . - . 9 9 : . 9 :: . --* . D C - . 9 9 :: ) *. -. * . . . ( * . . -5 -* --* - C .) - . ( ** 4 -5 -* - * * . * . . > *. - . ,* -5 -* ). = * ) , )* . * -5 -* ) *. - * * 9 ( * . ( . *: ) ) , -5 -* . ). . * .. * ? E) ) *. * , ) . J = . . ) *. * , ) . ). O$PO%P > . * ; * ) . ; . ** ) ( * * ; . ) . * ; . ( * .- , *H .- , * * ) -* . * , * - . ** ( D" & * /6/# "# " . ( * ** ) -* 2 0 + 8 -* ( * ** * ? . . . ( . ( E. J *. - - . . * ( * ** ) ** . . ) ) . ) -* . --< . * > - , -* . ) * -5 -* 2 9 : -< 9 : . # -< 9 : . -< . 9 : . -< 3 -* .. * 5. V - # . # ) , V * -* 4 ) - -* ** . E>- 1 ** J 9 5* , . ** D - , ) : ( * . M . ) ? 9 9 :: . * -5 -* 9 9 :59 :: * . - . ). 7 ) *. * -* ) ). . * -5 -* . . ** * , ( * ) * - ) ( * , ** ** ) *. * , ) . ( * 5 * * ) ). 7 i ) ) *. - , ). . -* -* , ( * * * - * -< . * 4 ) . )- ,2 ) *. ? * * . . ) * . -* ) * * ? * - 5 , * - * = * . ) . ) -* . * -< . * * ) 98=7I: 7 ,C , ) 5 * = -5- . , * .. ) ) * . * * * O P ** . * - . ) * * * . . . * * * * ) . 9D $: * ) -* V -< . . * - * V * . - ** ) * * * 9 , - : ) D $ 4( * -< . . * - * * - . ) 5- . . - . O P2 9* : -< @ ) . . . - . - ( ) * - * . T) C T , C T - , C . T CR 9 : ) -< 9T C . T. C: ) . . . * - * . D" H . ) ( * , ) ) , ( * * . -* ? - . . ) ** , ) - . = * ) -* - ) - * *. - ). % / "# / / # A * - * ( . ) ** ; . . -* . * ** .. -5 -* 2 9 : * 9 : * ) . . 9 : -) . /3 # " /# -* . , * . ** . , . * 9 . : C . > *. ) -* - * -5 -* 2 9 : . . 9 : 9 : . ) * - . 4 ) * * -* -* ** ( * . * , ) ) , ). .. ) -* - = ) - * ? ) * *
. -* ) ) ** 8=7I 7 * 7I 7 *. - * * 7 5 * ) - ) . * . = */ $ / # 3 - ) . ). ) * * . ) *. * . . * .. . * . -* ** * . * * . ). -5 -* ). * . * ) 5 * > ( ) ). * . ** ) . * ). , *. - . . + + 0 0 + + + 0 > , ). ) * . . * . - * 9 ( * * , . ; * , * 7 ,C ,: ) *. * . ** -- -* * - ) 9. : . . = * ) *. * , * . ) ). *. ) *. . * * = 0 + # . -. -. - * * -* * * . -) , O%PO P -) . * * * . - - ) * 3 . - , * ; -* * * D ( * * - . 7 ,X , * * * * * -< . ) ** 5- . * * * 3 ) , 5 * - * *. - ) ? # $ / # 3 ) * . * . , * * * ). 9 * . 5 , . : ) * * - 5 ; . - *. -* , 9 -< . : . -* . 5 . . . ( 5 ) -< = . ) ). - . .. ) ( * -* . ) ) ) , = * * . ) , ) , ). ) .. . -* 0 . # O$P7( * * B ** = > M * 8 . 8 *. 1 %0$0 ). . ; . ** . 3 : * + 911 X$0: 7 1 L ) G , LG 7 %0$5%$0 O%P7( * * 8 M . B ** . = > %0$$ - 5 - . * . ). ) ; -* . 3 : 4P @ * * + 911 X$$: 7 1 L ) G , LG 7 5&% O P7( * * > 1 ? B ** 2 7 ,X ,2 7 L ) 8 >-< . A - * 4 B = , = -5 * B . * 1 . D* 3 * % !5%&' 9 / "# / . H 9 : . L * $!! . I ** %00$ . H , * 1 * . M H , * - 5< L %00% ) * 7 I = C * . * . ; -* . . ) , . > 1 ? 7 I 4 . D* . 7 * 9D7 : . I 4 D7 %00$ * . . ). . . -- 7 1 . 3444
B 7MB3AA7 . 4 . . 7 * . 1 4L 443 * D . 1 L * I * 3 * - $!! . I . L * I * 3 * $!!/ < . . 7 * . 1 . 4L 443 $!!' - . - * . %00' . * ** * 3M3 * - 4L 443 4 * B 7MB3AA7 . B>M 4Y 4L 443 9B * >-< 2 M * 4Y : * . * . * 7( * * . 1 X 3LI %0$$ . * I . ) , . B ** -* ) ).