Hur handskriftsigenkänning fungerar i iPadOS 14 och varför du behöver det

Hur handskriftsigenkänning fungerar i iPadOS 14 och varför du behöver det

Klottra (√∂versatt som “klottrar” eller “kladda”) presenteras p√• WWDC mycket v√§rdigt. Tekniken uppm√§rksammades, men tillk√§nnagivandet av Mac med Apple Silicon √∂verskuggade den. Samtidigt √§r detta kanske den viktigaste nyheten som tillk√§nnagavs den dagen. Kanske, om n√•gra √•r, p√•minner om den f√∂rsta virtuella WWDC i Apples historia, kommer Scribble att kallas huvudh√§ndelsen – och om de kommer ih√•g Apple Silicon och COVID, d√•, f√∂rresten, som bakgrund. “Apple-silikon” Mac kommer att bli en vardaglig verklighet, √§ven om COVID inte kommer att ers√§ttas av en ny och √§nnu mer obehaglig styggelse – och smarta pennor kommer fortfarande att uppt√§cka n√•got nytt och ovanligt i sig sj√§lva, varje √•r.

Vad är Scribble

Apple Pencil kommer definitivt att f√∂r√§ndras eftersom k√§rntekniken bakom Scribble har mycket allvarliga behov. Ur hennes synvinkel √§r “vokabul√§ren” f√∂r den f√∂rsta och andra Apple Pencils f√∂r d√•lig och saknar uttryck. Huvudkomponenten √§r artificiell intelligens… F√∂rutom smarta pennor bygger Scribble neurala processorer. Om inte detta block av √§ppelkristaller hade h√§nt hade miraklet inte h√§nt.

Apple Newton, PalmPilot och andra handdatorer fr√•n gamla antiken provade det f√∂r tidigt. P√• den tiden var detta inte m√∂jligt, men tack vare ingenj√∂rernas och forskarnas uppfinningsrikedom och √§ventyrlighet fungerade den handskrivna inmatningen, √§ven om den inte var perfekt och inte alltid. Om vi ‚Äč‚Äčg√∂r det p√• riktigt √§r det inte enklare att k√§nna igen v√•r daub √§n att k√§nna igen m√§nskligt tal. Bakom l√§ttheten och l√§ttheten i Scribble, √•r av arbete och sofistikerade algoritmer. Och p√• vissa s√§tt √∂vertr√§ffar Scribble till och med Siri, Alexa och andra r√∂stassistenter, f√∂r att inte tala om arkaiska system f√∂r handskriftsigenk√§nning.

Hur iPad-handskriftsigenkänning fungerar

Samma fr√•ga st√§lldes av Popular Mechanics-journalisten Alex George, som bad Apples senior vice president f√∂r mjukvara om ett svar. Craig Federighi… Craig svarade snabbt och grundligt. Tror du? Men den som initierade detta tal av Craig, som han ber√§ttade, √§r v√§ldigt intressant. Nedan √§r hans svar, i en √•terber√§ttelse.

Till skillnad fr√•n tidigare teknik f√∂r handskriftsigenk√§nning analyserar Scribble inte individuella handskrivna tecken, utan rader och till och med grupper av rader. Genom maskininl√§rning har Scribbles mjukvara tr√§nats f√∂r att hantera olika handstils- och skrivm√∂nster hos ett stort antal m√§nniskor. Dessutom avsl√∂jade Craig bara en hemlighet av huvudkomponenten i Scribble och kallade den nyckeln till framg√•ng: handskriftsigenk√§nning helt, fr√•n b√∂rjan till slut, utf√∂rs p√• iPad, i realtid… Utan deltagande av Apples datacenter och servrar. Utan n√•gon data√∂verf√∂ring. Till skillnad fr√•n r√∂stassistenter som fortfarande inte klarar sig utan den.

Scribble tar tid att lära sig främmande språk, varför han för närvarande bara talar engelska, samt två dialekter av kinesiska, Beijing (litterärt) och Guangzhou (kantonesiska). Men rysk klotter kommer tydligen att läras ut för mycket länge sedan.

Förutom handskriven text, uppfattar Scribble och leder till ett vackert utseende också en ganska stor uppsättning geometriska former, gör att du kan arbeta med text (duplicera, ta bort, redigera text med en penna, etc.).

Det är för tidigt att prata om Klottra som ett nytt paradigm för användargränssnittet, och det finns fortfarande tillräckligt med brister i själva tekniken (detta är version 1.0), men förr eller senare kommer Scribble att förvandlas till en fullfjädrad tredje typ av gränssnitt. Han har potentialen för detta.

Kommer handskriftsigenkänning att komma till Mac?

Mac-datorer på Apple Silicon kommer sannolikt att förändras radikalt. Som svar på den allt mer öppna rörelsen av iPad mot Mac (stöd för styrplattor och markörer), med vilken iPad bryter mot tidigare orubbliga kanoner, kommer Mac-datorer också att gå mot surfplattor. Vad tror du? Dela din åsikt i vår Telegram-chatt.

I strid med kanonerna f√∂rblir iPad i f√∂rsta hand en surfplatta. Pekgr√§nssnittet √§r prim√§rt p√• det, i program f√∂r iPad m√•ste utvecklare fullt ut st√∂dja pekgr√§nssnittet, men de best√§mmer sj√§lva f√∂r att st√∂dja eller inte st√∂dja gr√§nssnittet med mark√∂ren. Om st√∂d f√∂r pekgr√§nssnittet √§r inbyggt i Mac-datorn kommer anpassning av program till det inte att beh√∂vas. Operativsystemet kommer att ge ett minimum av sitt st√∂d. Ett gr√§nssnitt baserat p√• smarta pennor och en neural processor i b√•da systemen kommer att vara valfritt p√• b√•da plattformarna ‚Äď grundl√§ggande st√∂d kommer att byggas in i b√•da plattformarna. P√• en Mac √§r detta bara vettigt tillsammans med st√∂d f√∂r pekgr√§nssnittet, och om det blir det √§r inte k√§nt med s√§kerhet.