Το Adobe Premiere Pro αποκτά AI εργαλεία για προσθήκη και αφαίρεση αντικειμένων από βίντεο, επέκταση κλιπ και πολλά άλλα

[nchatz]

Πριν 1 χρόνο η Adobe λάνσαρε το Firefly, το πιο πρόσφατο generative AI μοντέλο που βασίζεται στο προηγούμενο, SenseiAI, και αυτή την εβδομάδα η εταιρεία μας δείχνει πώς θα χρησιμοποιηθεί στην εφαρμογή επεξεργασίας βίντεο, Premiere Pro.

Σε μια πρώιμη παρουσίαση, η Adobe έδειξε μερικές εντυπωσιακές λειτουργίες που θα φτάσουν αργότερα στην τελική έκδοση της εφαρμογής, όπως η προσθήκη και αφαίρεση αντικειμένων, το Generative Extend και η δημιουργία βίντεο από..κείμενο.

Τα νέα χαρακτηριστικά αναμένεται να συναντήσουν μεγάλη επιτυχία, καθώς η επεξεργασία βίντεο είναι μία συνηθισμένη (και επίπονη) εργασία. Η πρώτη λειτουργία, Generative Extend, αντιμετωπίζει ένα πρόβλημα που αντιμετωπίζουν οι μοντέρ σχεδόν σε κάθε μοντάζ: τα πολύ μικρά κλιπ. «Προσθέστε απρόσκοπτα καρέ για να κάνετε τα κλιπ μακρύτερα, ώστε να είναι ευκολότερη η επεξεργασία αλλά και να προσθέσετε ομαλές μεταβάσεις», αναφέρει η Adobe. Αυτό επιτυγχάνεται με τη χρήση της τεχνητής νοημοσύνης για τη δημιουργία επιπλέον μέσων, βοηθώντας στην κάλυψη ενός μοντάζ ή μιας μετάβασης.

Ένα άλλο συνηθισμένο ζήτημα είναι κάποιο αντικείμενο που εμφανίζεται σε ένα πλάνο και το οποίο δεν θέλετε να φαίνεται, κάνοντας την αφαίρεσή του δύσκολη. Το ίδιο ίσχυει και στην αντίστροφη περίπτωση που θέλετε να προστεθεί κάποιο αντικείμενο κατά τη διάρκεια ενός κλιπ. Η Προσθήκη και Αφαίρεση αντικειμένων του Premiere Pro αντιμετωπίζει αυτό το πρόβλημα, χρησιμοποιώντας και πάλι τη generative AI λειτουργία του Firefly. «Απλά επιλέξτε και εντοπίστε αντικείμενα και, στη συνέχεια, αντικαταστήστε τα. Αφαιρέστε ανεπιθύμητα αντικείμενα, αλλάξτε την γκαρνταρόμπα ενός ηθοποιού ή προσθέστε γρήγορα διακοσμητικά στοιχεία σκηνικού, όπως έναν πίνακα ζωγραφικής ή φωτορεαλιστικά λουλούδια σε ένα γραφείο», γράφει η Adobe. 

Σχετικά demo βλέπουμε στο βίντεο που συνοδεύει την ανακοίνωση, και σε κάθε περίπτωση είναι εντυπωσιακά. Συγκεκριμένα η Adobe παρουσιάζει μερικά παραδείγματα, προσθέτοντας ένα σωρό διαμάντια σε έναν χαρτοφύλακα μέσω μιας προτροπής κειμένου (που παράγεται από το Firefly). Επίσης, αφαιρεί ένα άσχημο βοηθητικό κουτί, αλλάζει το πρόσωπο ενός ρολογιού και προσθέτει μια γραβάτα στο κοστούμι ενός χαρακτήρα.

Η εταιρεία παρουσίασε επίσης έναν τρόπο με τον οποίο μπορεί να εισάγει προσαρμοσμένα μοντέλα AI από άλλες εταιρείες, εντός του Premiere Pro. Το ένα, που ονομάζεται Pika, είναι αυτό που τροφοδοτεί το Generative Extend, ενώ ένα άλλο (το Sora από την OpenAI) μπορεί να δημιουργήσει αυτόματα B-Roll (πλάνα βίντεο). Το τελευταίο είναι βέβαιο ότι θα είναι αμφιλεγόμενο, καθώς θα μπορούσε δυνητικά να εξαφανίσει χιλιάδες θέσεις εργασίας, αλλά βρίσκεται ακόμα "σε πρώιμο στάδιο έρευνας", δήλωσε η Adobe στο βίντεο. Η εταιρεία σημειώνει ότι θα προσθέσει "διαπιστευτήρια περιεχομένου" σε τέτοια πλάνα, ώστε να είναι εμφανές τι δημιουργήθηκε από την AI, συμπεριλαμβανομένης της εταιρείας που βρίσκεται πίσω από το μοντέλο.

Μια παρόμοια λειτουργία είναι επίσης διαθέσιμη στο "Text to Video", επιτρέποντάς σας να δημιουργήσετε εντελώς νέα πλάνα απευθείας μέσα από την εφαρμογή. «Απλά πληκτρολογήστε κείμενο σε μια προτροπή ή ανεβάστε εικόνες αναφοράς. Τα αποσπάσματα αυτά μπορούν να χρησιμοποιηθούν για να δημιουργήσετε μεταξύ άλλων story boards ή για να δημιουργήσετε B-roll για τον εμπλουτισμό των ζωντανών λήψεων», δήλωσε η Adobe. Η εταιρεία φαίνεται να χρησιμοποιεί αυτή τη λειτουργία αρκετά γρήγορα, αν αναλογιστεί κανείς ότι μάθαμε για το Sora της OpenAI μόλις πριν λίγους μήνες.

Διαβάστε ολόκληρο το άρθρο

[pallisi]

Η χαρά της NVidia τώρα ξεκινά! Χρειάζονται πολλά Tensor Units για να γίνουν αυτά σε ανεκτούς χρόνους.

[gadgetseek]

Ο "εκδημοκρατισμός" της καλλιτεχνικής δημιουργίας.. έτσι θα πλασάρουν την ΑΙ "εισβολή" όταν σταθεροποιηθούν κι εξελιχθούν κάποια από τα παραπάνω μοντέλα.. το μόνο σίγουρο είναι ότι πολλοί (σχετικοί) επαγγελματίες και δημιουργοί δε θα έχουν θέση σε αυτό τον νέο κόσμο που φθάνει πολύ πιο γρήγορα (απ' ό,τι όλοι περίμεναν).

Επεξ/σία 17 Απριλίου από gadgetseek

[anakin3]

συμφωνώ απόλυτα με τον φίλο gadgetseek... δυστυχώς αυτο θα έχει επιπτώσεις παντού. Σκεφτείτε την βιομηχανία της διαφήμισης... τον κινηματογράφο (που ήδη βασικά εξαιρουμένων κάποιων αξιόλογων φιλμ) θα γεμίσει με τρελά σκουπίδια. Και όπως και να το κάνουμε το μάτι μας έχει ενα ένστικτο που θεωρώ πολύ δύσκολα το ΑΙ θα αντιμετωπίσει, στο να ξεχωρίζει το αληθινό απο το ψεύτικο. Είδα χθές τρέϊλερ απο το re-release του πρωτότυπου Alien. Τί ΟΜΟΡΦΗ ταινία... πόσο ρεαλιστικό φαίνεται παρόλο που είναι έργο αν θυμάμαι καλά του 1979... Χάνεται η ουσία. Εστιάζουμε στο "φαίνεσθαι" και στο "εντυπωσιακό" και χάνουμε το πιό ουσιώδες στοιχείο στον κινηματογράφο, το Συναίσθημα. 

Επεξ/σία 17 Απριλίου από anakin3

[this.is.elia]

51 minutes ago, pallisi said:

Η χαρά της NVidia τώρα ξεκινά! Χρειάζονται πολλά Tensor Units για να γίνουν αυτά σε ανεκτούς χρόνους.

Όλα στο cloud γίνονται ώστε να απαιτείται συνδρομή (και να γνωρίζει η Adobe και οι παρατρεχάμενοι με τι ασχολείσαι).

Στέλνεις το prompt στην Adobe και αυτή σου στέλνει πίσω το layer με τα αποτελέσματα. Έτσι δουλεύει το Firefly (που θα μπει στο premiere) έτσι δουλεύει και το generative fill στο Photoshop. 

(Όχι ότι δεν χρειάζεται η Nvidia, απλά δεν θα χρειάζεται ο τελικός καταναλωτής την Nvidia)

[pallisi]

29 λεπτά πριν, this.is.elia είπε

Όλα στο cloud γίνονται ώστε να απαιτείται συνδρομή (και να γνωρίζει η Adobe και οι παρατρεχάμενοι με τι ασχολείσαι).

Στέλνεις το prompt στην Adobe και αυτή σου στέλνει πίσω το layer με τα αποτελέσματα. Έτσι δουλεύει το Firefly (που θα μπει στο premiere) έτσι δουλεύει και το generative fill στο Photoshop. 

(Όχι ότι δεν χρειάζεται η Nvidia, απλά δεν θα χρειάζεται ο τελικός καταναλωτής την Nvidia)

Δεν έχω χρησιμοποιήσει το firefly για να προσθέσω πράγματα μέσω prompt. Aλλά για denoise και αυτόματο layering με ai σε lightroom χρησιμοποιεί την κάρτα γραφικών.

Επεξ/σία 17 Απριλίου από pallisi

[Diavolos666]

Αν έλεγαν ότι θα κρατήσουν αυτή την τεχνολογία για τους λίγους θα λέγατε "ααα ο πολύς κόσμος δεν θα το δει ποτέ", τώρα που το δίνουν σε όλους λέτε "ααα πάει ο επαγγελματίας, αφού θα μπορούν όλοι να το κάνουν".

Εγώ αποφασίζω ότι είναι θετικό, το ότι κάποιοι ίσως το χρησιμοποιήσουν με λάθος τρόπο δεν με αφορά, μας έχει γίνει συνήθειο να βλέπουμε βίντεο από απλό κόσμο με 500 φίλτρα και μπόλικη ψευτιά. Έχει γεμίσει autotune η βιομηχανία της μουσικής και όλη η μουσική γίνεται ηλεκτρονικά.

Αν δεν υπήρχε τεχνολογία δεν θα μπορούσε ο απλός άνθρωπος από το σπίτι του να γράφει μουσική, ή να κάνει βίντεο. Κάποιοι θα έλεγαν "θα εξαφανιστούν οι ειδικοί της μουσικής"... στην πραγματικότητα γεμίσαμε εκατοντάδες χιλιάδες δημιουργούς, αρκετοί που είναι σαβούρα και αρκετοί που βγάζουν καλή μουσική.

Έτσι θα γίνει και με τις ταινίες και τα βίντεο.

[pcos]

με αλλα λογια, κανει παπαδες

[Chocobo]

To μόνο που με ενοχλεί είναι ότι γίνετε ολοένα και δυσκολότερο να καταλάβεις αν αυτό που βλέπεις είναι αληθινό ή όχι.

Δεν είναι όλα ταινίες και μουσική. Το να μπορεί ένας μέσος άνθρωπος να ξεχειλίσει το διαδίκτυο με fake content είναι πρόβλημα. 

 

[mindreader]

Μονο εγω βλεπω το 'κακο' οτι αυτα θα ειναι ουσιαστικα 'online' features με οτι αυτο σημαινει;

[Black Demis]

2 hours ago, mindreader said:

Μονο εγω βλεπω το 'κακο' οτι αυτα θα ειναι ουσιαστικα 'online' features με οτι αυτο σημαινει;

για ποιο λογο ειναι κακο επειδι ειναι με συντρομη?

[speedman_26]

1 hour ago, Black Demis said:

για ποιο λογο ειναι κακο επειδι ειναι με συντρομη?

δεν θα μπορεις σπασμενο να χρησιμοποιείς Ai οποτε θα ειναι μονο για επαγγελματιες. 

[sakis han]

Οταν θα βαλουν κανα enhancer της προκοπης θα τους πληρωσω. Μεχρι τοτε απ'τον θειο

[Black Demis]

18 minutes ago, speedman_26 said:

δεν θα μπορεις σπασμενο να χρησιμοποιείς Ai οποτε θα ειναι μονο για επαγγελματιες. 

προφανος και δεν μπορεις αυτο ελειπε κιολας τζαμπα Online υπηρεσια....... εδω για τα σπασμενα αρχισε τελευταια να τα κοινιγαει με αυτοβουλη εγκαταστση υπηρεσιες που σου πεταει μηνημα (δεν μπαινει στο φακελο της adobe) και πρεπει να την κοινηγας με firewall

γενικος μελλον ολον το προγραμματων ειναι cloud και συνδρομη

[joya111]

η ΤΝ ήδη έχει καταλύσει τα όρια μεταξύ επαγγελματία δημιουργού και ιδώτη/ερασιτέχνη. Και ίσως να κάνει την δημιουργία πιο προσιτή σε αυτούς που στερούνται πόρων και μέσων, παράλληλα όμως θα πετάξει εκτός πολλούς από αυτούς που βιοπορίζονται με αυτόν τον τρόπο.