10 Hard Truths of Psychology and Life:

1.

2.
3.
4.
5.
6.
7.
8.
9.
10.
Control your mind,
Control your life.

Work on your mental models to:

- Make better decisions
- Become highly successful
- Become a better individual

Even people like Elon Musk & Naval use Mental Models.

Grab your copy & read it now:
https://t.co/cBIMGEtQ69
Visuals credits and thanks to @Wisdom_HQ

All visuals are owned by him.

Follow Wisdom_HQ for more such content.
Consider joining my free telegram channel for daily updates on self-care and productivity:
https://t.co/gUJqP27cyR

More from All

How can we use language supervision to learn better visual representations for robotics?

Introducing Voltron: Language-Driven Representation Learning for Robotics!

Paper: https://t.co/gIsRPtSjKz
Models: https://t.co/NOB3cpATYG
Evaluation: https://t.co/aOzQu95J8z

ЁЯз╡ЁЯСЗ(1 / 12)


Videos of humans performing everyday tasks (Something-Something-v2, Ego4D) offer a rich and diverse resource for learning representations for robotic manipulation.

Yet, an underused part of these datasets are the rich, natural language annotations accompanying each video. (2/12)

The Voltron framework offers a simple way to use language supervision to shape representation learning, building off of prior work in representations for robotics like MVP (
https://t.co/Pb0mk9hb4i) and R3M (https://t.co/o2Fkc3fP0e).

The secret is *balance* (3/12)

Starting with a masked autoencoder over frames from these video clips, make a choice:

1) Condition on language and improve our ability to reconstruct the scene.

2) Generate language given the visual representation and improve our ability to describe what's happening. (4/12)

By trading off *conditioning* and *generation* we show that we can learn 1) better representations than prior methods, and 2) explicitly shape the balance of low and high-level features captured.

Why is the ability to shape this balance important? (5/12)

You May Also Like

ЁЯМ║рд╢реНрд░реА рдЧрд░реБрдбрд╝ рдкреБрд░рд╛рдг - рд╕рдВрдХреНрд╖рд┐рдкреНрдд рд╡рд░реНрдгрдиЁЯМ║

рд╣рд┐рдиреНрджреБ рдзрд░реНрдо рдХреЗ 18 рдкреБрд░рд╛рдгреЛрдВ рдореЗрдВ рд╕реЗ рдПрдХ рдЧрд░реБрдбрд╝ рдкреБрд░рд╛рдг рдХрд╛ рд╣рд┐рдиреНрджреБ рдзрд░реНрдо рдореЗрдВ рдмрдбрд╝рд╛ рдорд╣рддреНрд╡ рд╣реИред рдЧрд░реБрдбрд╝ рдкреБрд░рд╛рдг рдореЗрдВ рдореГрддреНрдпреБ рдХреЗ рдмрд╛рдж рд╕рджреНрдЧрддреА рдХреА рд╡реНрдпрд╛рдЦреНрдпрд╛ рдорд┐рд▓рддреА рд╣реИред рдЗрд╕ рдкреБрд░рд╛рдг рдХреЗ рдЕрдзрд┐рд╖реНрдард╛рддреГ рджреЗрд╡ рднрдЧрд╡рд╛рди рд╡рд┐рд╖реНрдгреБ рд╣реИрдВ, рдЗрд╕рд▓рд┐рдП рдпреЗ рд╡реИрд╖реНрдгрд╡ рдкреБрд░рд╛рдг рд╣реИред


рдЧрд░реБрдбрд╝ рдкреБрд░рд╛рдг рдХреЗ рдЕрдиреБрд╕рд╛рд░ рд╣рдорд╛рд░реЗ рдХрд░реНрдореЛрдВ рдХрд╛ рдлрд▓ рд╣рдореЗрдВ рд╣рдорд╛рд░реЗ рдЬреАрд╡рди-рдХрд╛рд▓ рдореЗрдВ рддреЛ рдорд┐рд▓рддрд╛ рд╣реА рд╣реИ рдкрд░рдВрддреБ рдореГрддреНрдпреБ рдХреЗ рдмрд╛рдж рднреА рдЕрдЪреНрдЫреЗ рдмреБрд░реЗ рдХрд╛рд░реНрдпреЛрдВ рдХрд╛ рдЙрдирдХреЗ рдЕрдиреБрд╕рд╛рд░ рдлрд▓ рдорд┐рд▓рддрд╛ рд╣реИред рдЗрд╕ рдХрд╛рд░рдг рдЗрд╕ рдкреБрд░рд╛рдг рдореЗрдВ рдирд┐рд╣рд┐рдд рдЬреНрдЮрд╛рди рдХреЛ рдкреНрд░рд╛рдкреНрдд рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рдШрд░ рдХреЗ рдХрд┐рд╕реА рд╕рджрд╕реНрдп рдХреА рдореГрддреНрдпреБ рдХреЗ рдмрд╛рдж рдХрд╛ рд╕рдордп рдирд┐рд░реНрдзрд╛рд░рд┐рдд рдХрд┐рдпрд╛ рдЧрдпрд╛ рд╣реИ...

..рддрд╛рдХрд┐ рдЙрд╕ рд╕рдордп рд╣рдо рдЬреАрд╡рди-рдорд░рдг рд╕реЗ рдЬреБрдбрд╝реЗ рд╕рднреА рд╕рддреНрдп рдЬрд╛рди рд╕рдХреЗрдВ рдФрд░ рдореГрддреНрдпреБ рдХреЗ рдХрд╛рд░рдг рдмрд┐рдЫрдбрдиреЗ рд╡рд╛рд▓реЗ рд╕рджрд╕реНрдп рдХрд╛ рджреБрдЦ рдХрдо рд╣реЛ рд╕рдХреЗред
рдЧрд░реБрдбрд╝ рдкреБрд░рд╛рдг рдореЗрдВ рд╡рд┐рд╖реНрдгреБ рдХреА рднрдХреНрддрд┐ рд╡ рдЕрд╡рддрд╛рд░реЛрдВ рдХрд╛ рд╡рд┐рд╕реНрддрд╛рд░ рд╕реЗ рдЙрд╕реА рдкреНрд░рдХрд╛рд░ рд╡рд░реНрдгрди рдорд┐рд▓рддрд╛ рд╣реИ рдЬрд┐рд╕ рдкреНрд░рдХрд╛рд░ рднрдЧрд╡рдд рдкреБрд░рд╛рдг рдореЗрдВредрдЖрд░рдореНрдн рдореЗрдВ рдордиреБ рд╕реЗ рд╕реГрд╖реНрдЯрд┐ рдХреА рдЙрддреНрдкрддреНрддрд┐,рдзреНрд░реБрд╡ рдЪрд░рд┐рддреНрд░ рдХреА рдХрдерд╛ рдорд┐рд▓рддреА рд╣реИред


рддрджреБрдкрд░рд╛рдВрдд рд╕реБрд░реНрдп рд╡ рдЪрдВрджреНрд░ рдЧреНрд░рд╣реЛрдВ рдХреЗ рдордВрддреНрд░, рд╢рд┐рд╡-рдкрд╛рд░реНрд╡рддреА рдордВрддреНрд░,рдЗрдиреНрджреНрд░ рд╕рдореНрдмрдВрдзрд┐рдд рдордВрддреНрд░,рд╕рд░рд╕реНрд╡рддреА рдордВрддреНрд░ рдФрд░ рдиреМ рд╢рдХреНрддрд┐рдпреЛрдВ рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ рд╡рд┐рд╕реНрддрд╛рд░ рд╕реЗ рдмрддрд╛рдпрд╛ рдЧрдпрд╛ рд╣реИред
рдЗрд╕ рдкреБрд░рд╛рдг рдореЗрдВ рдЙрдиреНрдиреАрд╕ рд╣рдЬрд╝рд╛рд░ рд╢реНрд▓реЛрдХ рдмрддрд╛рдП рдЬрд╛рддреЗ рд╣реИрдВ рдФрд░ рдЗрд╕реЗ рджреЛ рднрд╛рдЧреЛрдВ рдореЗрдВ рдХрд╣рд╛ рдЬрд╛рддрд╛ рд╣реИред
рдкреНрд░рдердо рднрд╛рдЧ рдореЗрдВ рд╡рд┐рд╖реНрдгреБрднрдХреНрддрд┐ рдФрд░ рдкреВрдЬрд╛ рд╡рд┐рдзрд┐рдпреЛрдВ рдХрд╛ рдЙрд▓реНрд▓реЗрдЦ рд╣реИред

рдореГрддреНрдпреБ рдХреЗ рдЙрдкрд░рд╛рдВрдд рдЧрд░реБрдбрд╝ рдкреБрд░рд╛рдг рдХреЗ рд╢реНрд░рд╡рдг рдХрд╛ рдкреНрд░рд╛рд╡рдзрд╛рди рд╣реИ ред
рдкреБрд░рд╛рдг рдХреЗ рджреНрд╡рд┐рддреАрдп рднрд╛рдЧ рдореЗрдВ 'рдкреНрд░реЗрддрдХрд▓реНрдк' рдХрд╛ рд╡рд┐рд╕реНрддрд╛рд░ рд╕реЗ рд╡рд░реНрдгрди рдФрд░ рдирд░рдХреЛрдВ рдореЗрдВ рдЬреАрд╡ рдХреЗ рдкрдбрд╝рдиреЗ рдХрд╛ рд╡реГрддреНрддрд╛рдВрдд рдорд┐рд▓рддрд╛ рд╣реИред рдорд░рдиреЗ рдХреЗ рдмрд╛рдж рдордиреБрд╖реНрдп рдХреА рдХреНрдпрд╛ рдЧрддрд┐ рд╣реЛрддреА рд╣реИ, рдЙрд╕рдХрд╛ рдХрд┐рд╕ рдкреНрд░рдХрд╛рд░ рдХреА рдпреЛрдирд┐рдпреЛрдВ рдореЗрдВ рдЬрдиреНрдо рд╣реЛрддрд╛ рд╣реИ, рдкреНрд░реЗрдд рдпреЛрдирд┐ рд╕реЗ рдореБрдХреНрддрд┐ рдХреЗ рдЙрдкрд╛рдп...