π₯LAION-400M ΠΎΡΠΊΡΡΡΡΠΉ Π΄Π°ΡΠ°ΡΠ΅Ρ ΠΈΠ· 423M ΠΊΠ°ΡΡΠΈΠ½ΠΎΠΊ Ρ ΠΎΠΏΠΈΡΠ°Π½ΠΈΡΠΌΠΈ
Π₯ΠΎΡΠ΅Π»ΠΈ ΠΎΠ±ΡΡΠΈΡΡ ΡΠ²ΠΎΠΉ CLIP ΠΈΠ»ΠΈ DALLβ’E? Π’Π΅ΠΏΠ΅ΡΡ ΡΡΠΎ Π²ΠΎΠ·ΠΌΠΎΠΆΠ½ΠΎ!
ΠΠΏΡΠ±Π»ΠΈΠΊΠΎΠ²Π°Π½ ΡΠ°ΠΌΡΠΉ Π±ΠΎΠ»ΡΡΠΎΠΉ Π² ΠΌΠΈΡΠ΅ Π΄Π°ΡΠ°ΡΠ΅Ρ ΠΈΠ· ΠΏΠ°Ρ ΠΊΠ°ΡΡΠΈΠ½ΠΊΠ°-ΡΠ΅ΠΊΡΡ πββοΈ
ΠΠ°ΡΠ°ΡΠ΅Ρ ΠΏΠΎΠ»ΡΡΠ΅Π½ ΠΏΠ°ΡΡΠΈΠ½Π³ΠΎΠΌ ΡΡΡΠ°Π½ΠΈΡ ΠΈΠ· Comon Crawl. ΠΠ°ΡΠ΅ΠΌ Π²ΡΡΠΊΠΈΠΉ ΠΌΡΡΠΎΡ ΠΎΡΡΠΈΠ»ΡΡΡΠΎΠ²Π°Π»ΠΈ Ρ ΠΏΠΎΠΌΠΎΡΡΡ CLIP ΠΏΠΎ ΡΡΠ΅ΡΡ ΠΎΠ»Π΄Ρ 0.3.
Π§ΡΠΎ Π΅ΡΡΡ Π² Π΄Π°ΡΠ°ΡΠ΅ΡΠ΅?
β’ ΠΠ°ΡΡΠΈΠ½ΠΊΠΈ Ρ ΡΠ΅ΠΊΡΡΠΎΠ²ΡΠΌ ΠΎΠΏΠΈΡΠ°Π½ΠΈΠ΅ΠΌ
β’ CLIP ΡΠΌΠ±Π΅Π΄Π΄ΠΈΠ½Π³ΠΈ ΠΊΠ°ΡΡΠΈΠ½ΠΎΠΊ (NumPy)
β’ KNN ΠΈΠ½Π΄Π΅ΠΊΡ ΡΠΌΠ±Π΅Π΄Π΄ΠΈΠ½Π³ΠΎΠ²
Π ΠΈΡΠΎΠ³Π΅: 10TB Π΄Π°Π½Π½ΡΡ !
P.S. ΠΠ²ΡΠΎΡΡ Π³ΠΎΠ²ΠΎΡΡΡ, ΡΡΠΎ ΠΏΠΎΡΡΠ°ΡΠ°Π»ΠΈΡΡ ΡΠ΄Π°Π»ΠΈΡΡ ΡΠ°ΡΡΡ NSFW (unsafe) ΠΊΠΎΠ½ΡΠ΅Π½ΡΠ°, Π½ΠΎ ΠΏΠΎΠ»Π½ΠΎΡΡΡΡ ΠΈΠ·Π±Π°Π²ΠΈΡΡΡΡ ΠΎΡ Π½Π΅Π³ΠΎ Π½Π΅ ΡΠ΄Π°Π»ΠΎΡΡ. ΠΠΎΠ·ΠΌΠΎΠΆΠ½ΠΎ ΠΈΠΌΠ΅Π½Π½ΠΎ ΠΏΠΎΡΡΠΎΠΌΡ ΡΠ°ΠΊΠΈΠ΅ ΡΡΡΠΊΠΈ Π½Π΅ ΠΏΡΠ±Π»ΠΈΠΊΡΡΡ ΠΊΡΡΠΏΠ½ΡΠ΅ ΠΊΠΎΠΌΠΏΠ°Π½ΠΈΠΈ ΡΠΈΠΏΠ° Google.
Dataset
Π₯ΠΎΡΠ΅Π»ΠΈ ΠΎΠ±ΡΡΠΈΡΡ ΡΠ²ΠΎΠΉ CLIP ΠΈΠ»ΠΈ DALLβ’E? Π’Π΅ΠΏΠ΅ΡΡ ΡΡΠΎ Π²ΠΎΠ·ΠΌΠΎΠΆΠ½ΠΎ!
ΠΠΏΡΠ±Π»ΠΈΠΊΠΎΠ²Π°Π½ ΡΠ°ΠΌΡΠΉ Π±ΠΎΠ»ΡΡΠΎΠΉ Π² ΠΌΠΈΡΠ΅ Π΄Π°ΡΠ°ΡΠ΅Ρ ΠΈΠ· ΠΏΠ°Ρ ΠΊΠ°ΡΡΠΈΠ½ΠΊΠ°-ΡΠ΅ΠΊΡΡ πββοΈ
ΠΠ°ΡΠ°ΡΠ΅Ρ ΠΏΠΎΠ»ΡΡΠ΅Π½ ΠΏΠ°ΡΡΠΈΠ½Π³ΠΎΠΌ ΡΡΡΠ°Π½ΠΈΡ ΠΈΠ· Comon Crawl. ΠΠ°ΡΠ΅ΠΌ Π²ΡΡΠΊΠΈΠΉ ΠΌΡΡΠΎΡ ΠΎΡΡΠΈΠ»ΡΡΡΠΎΠ²Π°Π»ΠΈ Ρ ΠΏΠΎΠΌΠΎΡΡΡ CLIP ΠΏΠΎ ΡΡΠ΅ΡΡ ΠΎΠ»Π΄Ρ 0.3.
Π§ΡΠΎ Π΅ΡΡΡ Π² Π΄Π°ΡΠ°ΡΠ΅ΡΠ΅?
β’ ΠΠ°ΡΡΠΈΠ½ΠΊΠΈ Ρ ΡΠ΅ΠΊΡΡΠΎΠ²ΡΠΌ ΠΎΠΏΠΈΡΠ°Π½ΠΈΠ΅ΠΌ
β’ CLIP ΡΠΌΠ±Π΅Π΄Π΄ΠΈΠ½Π³ΠΈ ΠΊΠ°ΡΡΠΈΠ½ΠΎΠΊ (NumPy)
β’ KNN ΠΈΠ½Π΄Π΅ΠΊΡ ΡΠΌΠ±Π΅Π΄Π΄ΠΈΠ½Π³ΠΎΠ²
Π ΠΈΡΠΎΠ³Π΅: 10TB Π΄Π°Π½Π½ΡΡ !
P.S. ΠΠ²ΡΠΎΡΡ Π³ΠΎΠ²ΠΎΡΡΡ, ΡΡΠΎ ΠΏΠΎΡΡΠ°ΡΠ°Π»ΠΈΡΡ ΡΠ΄Π°Π»ΠΈΡΡ ΡΠ°ΡΡΡ NSFW (unsafe) ΠΊΠΎΠ½ΡΠ΅Π½ΡΠ°, Π½ΠΎ ΠΏΠΎΠ»Π½ΠΎΡΡΡΡ ΠΈΠ·Π±Π°Π²ΠΈΡΡΡΡ ΠΎΡ Π½Π΅Π³ΠΎ Π½Π΅ ΡΠ΄Π°Π»ΠΎΡΡ. ΠΠΎΠ·ΠΌΠΎΠΆΠ½ΠΎ ΠΈΠΌΠ΅Π½Π½ΠΎ ΠΏΠΎΡΡΠΎΠΌΡ ΡΠ°ΠΊΠΈΠ΅ ΡΡΡΠΊΠΈ Π½Π΅ ΠΏΡΠ±Π»ΠΈΠΊΡΡΡ ΠΊΡΡΠΏΠ½ΡΠ΅ ΠΊΠΎΠΌΠΏΠ°Π½ΠΈΠΈ ΡΠΈΠΏΠ° Google.
Dataset