Recent neuroimaging and eye tracking studies have suggested that children with autism spectrum disorder (ASD) may exhibit more variable and idiosyncratic brain responses and eye movements than typically developing (TD) children. Here we extended this research for the first time to pupillometry recordings. We successfully completed pupillometry recordings with 103 children (66 with ASD), 4.5-years-old on average, who viewed three 90 second movies, twice. We extracted their pupillary time-course for each movie, capturing their stimulus evoked pupillary responses. We then computed the correlation between the time-course of each child and those of all others in their group. This yielded an average inter-subject correlation value per child, representing how similar their pupillary responses were to all others in their group. ASD participants exhibited significantly weaker inter-subject correlations than TD participants, reliably across all three movies. Differences across groups were largest in responses to a naturalistic movie containing footage of a social interaction between two TD children. This measure enabled classification of ASD and TD children with a sensitivity of 0.82 and specificity of 0.73 when trained and tested on independent datasets. Using the largest ASD pupillometry dataset to date, we demonstrate the utility of a new technique for measuring the idiosyncrasy of pupil regulation, which can be completed even by young children with co-occurring intellectual disability. These findings reveal that a considerable subgroup of ASD children have significantly more unstable, idiosyncratic pupil regulation than TD children, indicative of more variable, weakly regulated, underlying neural activity.

Abstract Previous eye tracking studies have reported that children with autism spectrum disorders (ASD) fixate less on faces in comparison to controls. To properly understand social interactions, however, children must gaze not only at faces, but also at actions, gestures, body movements, contextual details, and objects, thereby creating specific gaze patterns when observing specific interactions. We presented three different movies of social interactions to 111 children (71 with ASD) who watched each of the movies twice. Typically developing children viewed the movies in a remarkably predictable and reproducible manner, exhibiting gaze patterns that were similar to the mean gaze pattern of other controls, with strong correlations across individuals (inter-subject correlations) and across movie presentations (intra-subject correlations). In contrast, children with ASD exhibited significantly more variable/idiosyncratic gaze patterns that differed from the mean gaze pattern of controls and were weakly correlated across individuals and presentations. Most importantly, quantification of gaze idiosyncrasy in individual children, enabled separation of ASD and control children with higher sensitivity and specificity than traditional measures such as time gazing at faces. Individual magnitudes of gaze idiosyncrasy were also significantly correlated with ASD severity and significantly correlated across movies and movie presentations, demonstrating their clinical sensitivity and reliability. These results suggest that gaze idiosyncrasy is a potent behavioral abnormality that characterizes many children with ASD and may contribute to their impaired social development. Quantification of gaze idiosyncrasy in individual children may aid in assessing their ASD severity over time and in response to treatments. Lay Summary Typically developing children watch movies of social interactions in a reliable and predictable manner, attending faces, gestures, body movements, and objects that are relevant to the social interaction and its narrative. Here, we demonstrate that children with ASD watch such movies with significantly more variable/idiosyncratic gaze patterns that differ across individuals and across movie presentations. We demonstrate that quantifying this variability is a very potent way of identifying children with ASD and determining the severity of their social ASD symptoms.

Abstract It has long been of interest to characterize the components that generate the motor control abnormalities in the arm after stroke. One approach has been to decompose the hemiparesis phenotype into negative signs, such as weakness, and positive signs, such as intrusion of synergies. Here, we sought to identify the contributions of weakness and the flexor synergy to motor function and impairment, as defined by kinematic and clinical scales, respectively, in sub-acute stroke using two 3D arm tasks that differed in their requirement for elbow extension. Thirty-three sub-acute post-stroke participants and sixteen healthy controls performed a cup-to-mouth task, requiring shoulder and elbow flexion (within flexor synergy), and a reaching task, requiring shoulder flexion and elbow extension (out of flexor synergy). Using markerless 3D pose-estimation, we analyzed upper limb kinematics to assess overall task performance and intrusion of pathological synergies. Weakness was measured using a grip dynamometer. Performance in both tasks was impaired to a similar degree in the stroke participants compared to controls. Subsequent analysis of coordination patterns between the elbow and the shoulder joints revealed intrusion of synergies in the reaching task based on the time spent within a flexion-flexion pattern (flexor synergy proportion) and the correlation between shoulder and elbow angles when the shoulder was flexing (flexion synergy strength). Regression analysis indicated that the significant predictors of poor task performance were weakness and flexor synergy intrusion. Notably, the Fugl-Meyer Assessment was abnormal even when just weakness caused the impairment, which means that caution is required when using this scale to quantify synergies. We conclude that both weakness and synergy intrusion contribute to impaired coordination of the elbow and shoulder joints in the sub-acute post-stroke period. This study shows that careful kinematic analysis of naturalistic movements is required to better characterize the components of upper limb impairment after stroke.

Abstract Kinematic analysis of movement following brain damage is key for diagnosing motor impairments and for recovery assessment. Advances in computer vision offer novel marker-less tracking tools that could be implemented in the clinic due to their simple operation and affordability. An important question that arises is whether marker-less technologies are sufficiently accurate compared to well established marker-based technologies. This study aims to perform validation of kinematic assessment using two high-speed cameras and a 3D pose estimation model. Four participants performed reaching movements with the upper limb between fixed targets, in different velocities. Movement kinematics were simultaneously measured using the DeepBehavior model and marker-based optical motion capture (QTM), as a gold standard. The differences in corresponding joint angles, estimated from the two different methods throughout the analysis, are presented as a mean absolute error (MAE) of the elbow angle. Quantitatively, the MAE of all movements was relatively small across velocity and joints (~2°). In a condition where the movements were made towards the DeepBehavior cameras, and the view of the elbow was occluded in one of the cameras, the errors were higher. In conclusion, the results demonstrated that marker-less motion capture is a valid alternative to marker-based motion capture. Inaccuracies of the DeepBehavior system could be explained by occlusions of key-points and are not associated with failure of the pose estimation algorithm.

Background It has long been of interest to characterize the components of the motor abnormality in the arm after stroke. One approach has been to decompose the hemiparesis phenotype into negative signs, such as weakness, and positive signs, such as intrusion of synergies. We sought to identify the contributions of weakness and flexor synergy to motor deficits in sub-acute stroke. Methods Thirty-three sub-acute post-stroke participants and 16 healthy controls performed two functional arm movements; one within flexor synergy (shoulder and elbow flexion), and the other outside flexor synergy (shoulder flexion and elbow extension). We analyzed upper limb 3D kinematics to assess both overall task performance and intrusion of pathological synergies. Weakness and spasticity were also measured. Results Both tasks produced similar impairments compared to controls. Analysis of elbow and shoulder multi-joint coordination patterns revealed intrusion of synergies in the out-of-synergy reaching task based on the time spent within a flexion-flexion pattern and the correlation between shoulder and elbow angles. Regression analysis indicated that both weakness and synergy intrusion contributed to motor impairment in the out-of-synergy reaching task. Notably, the Fugl-Meyer Assessment (FMA) was abnormal even when only weakness caused the impairment, cautioning that it is not a pure synergy scale. Conclusions Weakness and synergy intrusion contribute to motor deficits in the sub-acute post-stroke period. An abnormal FMA score cannot be assumed to be due to synergy intrusion. Careful kinematic analysis of naturalistic movements is required to better characterize the contribution of negative and positive signs to upper limb impairment after stroke.