+
    ùäûj:  ã                   óü   € ^ RI t ^ RIHt ^ RIHu Ht  ! R R] P                  P                  4      t ! R R]P                  4      t
 ! R R]P                  4      t ! R R	] P                  P                  4      tR# )
é    Nc                   ó@   a € ] tR t^t o ]R 4       t]R 4       tRtV tR# )ÚLayerNormFunctionc                óÞ  € W@n         VP                  4       w  rVrxVP                  ^RR7      p	W,
          P                  ^4      P                  ^RR7      p
W,
          W¤,           P	                  4       ,          pVP                  4       VP                  4       VP                  4       r³pV P                  WºV4       VP                  ^V^^4      V,          VP                  ^V^^4      ,           pV# )é   T)Úkeepdim)ÚepsÚsizeÚmeanÚpowÚsqrtÚ
contiguousÚsave_for_backwardÚview)ÚctxÚxÚweightÚbiasr   Ú_NÚCÚ_HÚ_WÚmuÚvarÚys   &&&&&       ÚhC:\Ai_Coding\apps\studio\ComfyUI\.venv\Lib\site-packages\spandrel\architectures\KBNet\__arch\kb_utils.pyÚforwardÚLayerNormFunction.forward   sÊ   € àŒØŸ™›‰ˆˆrØ�V‰V�A˜tˆVÓ$ˆØ�v�l‰l˜1‹o×"Ñ" 1¨dÐ"Ó3ˆð �V˜�	×'Ñ'Ó)Õ)ˆà×ÑÓØ�O‰OÓØ�L‰L‹Nð ˆð
 	×Ñ˜a fÔ-Ø�K‰K˜˜1˜a Ó# aÕ'¨$¯)©)°A°q¸!¸QÓ*?Õ?ˆØˆó    c                ó>  € V P                   pVP                  4       w  r4rVV P                  w  rxp	WP                  ^V^^4      ,          p
V
P	                  ^RR7      pW§,          P	                  ^RR7      pR\
        P                  ! W‚,           4      ,          W§V,          ,
          V,
          ,          pVW,          P                  ^R7      P                  ^R7      P                  ^ R7      VP                  ^R7      P                  ^R7      P                  ^ R7      R3# )r   T)Údimr   g      ð?©r    N)r   r	   Úsaved_tensorsr   r
   Útorchr   Úsum)r   Úgrad_outputr   r   r   r   r   r   r   r   ÚgÚmean_gÚmean_gyÚgxs   &&            r   ÚbackwardÚLayerNormFunction.backward   s÷   € à�g‰gˆà#×(Ñ(Ó*‰ˆˆrà×*Ñ*‰ˆ�ØŸ+™+ a¨¨A¨qÓ1Õ1ˆØ—‘˜A t�Ó,ˆà•5—,‘, 1¨d�,Ó3ˆØ”5—:’:˜c�iÓ(Õ(¨A°Gµ­O¸fÕ,DÕEˆàØ�_×!Ñ! aÐ!Ó(×,Ñ,°Ð,Ó3×7Ñ7¸AÐ7Ó>Ø�O‰O ˆOÓ"×&Ñ&¨1Ð&Ó-×1Ñ1°aÐ1Ó8Øð	
ð 	
r   © N©	Ú__name__Ú
__module__Ú__qualname__Ú__firstlineno__Ústaticmethodr   r*   Ú__static_attributes__Ú__classdictcell__©Ú__classdict__s   @r   r   r      s+   ø‡ € Øñó ðð" ñ
ó ö
r   r   c                   ó<   a a€ ] tR t^.t oRV 3R lltR tRtVtV ;t# )ÚLayerNorm2dc                ó   <€ \         SV `  4        V P                  R \        P                  ! \
        P                  ! V4      VR7      4       V P                  R\        P                  ! \
        P                  ! V4      VR7      4       W n        R# )r   )Úrequires_gradr   N)	ÚsuperÚ__init__Úregister_parameterÚnnÚ	Parameterr#   ÚonesÚzerosr   )ÚselfÚchannelsr   r:   Ú	__class__s   &&&&€r   r<   ÚLayerNorm2d.__init__/   se   ø€ Ü‰ÑÔØ×ÑØ”b—l’l¤5§:¢:¨hÓ#7À}ÔUô	
ð 	×ÑØ”B—L’L¤§¢¨XÓ!6ÀmÔTô	
ð Žr   c                ól   € \         P                  WP                  V P                  V P                  4      # )N)r   Úapplyr   r   r   )rB   r   s   &&r   r   ÚLayerNorm2d.forward9   s#   € Ü ×&Ñ& q¯+©+°t·y±yÀ$Ç(Á(ÓKÐKr   )r   )g�íµ ÷Æ°>T)	r.   r/   r0   r1   r<   r   r3   r4   Ú__classcell__)rD   r6   s   @@r   r8   r8   .   s   ù‡ € ÷÷Lò Lr   r8   c                   ó&   a € ] tR t^=t o R tRtV tR# )Ú
SimpleGatec                ó<   € VP                  ^^R7      w  r#W#,          # )é   r!   )Úchunk)rB   r   Úx1Úx2s   &&  r   r   ÚSimpleGate.forward>   s   € Ø—‘˜ �Ó"‰ˆØ�wˆr   r,   N)r.   r/   r0   r1   r   r3   r4   r5   s   @r   rK   rK   =   s   ø‡ € ÷ð r   rK   c                   ó@   a € ] tR t^Ct o ]R 4       t]R 4       tRtV tR# )ÚKBAFunctionc                óV  € VP                   w  rxršV^,          pVP                   ^,          pVP                  WxWš,          4      P                  RR4      pVVVVV3w  V n        V n        V n        V n        V n        WWV3w  V n        V n	        V n
        V n        W%,          pW&,          p\        P                  P                  P                  WV^,          R7      pVP                  WtWÄ,          V,          Wš,          4      P!                  ^ ^^^4      pVP                  WyV
,          WLV,          WÄ,          V,          4      pWïP#                  R4      ,          p??VP%                  R4      P                  WyV
,          V4      V,           pVP                  RR4      P                  W|Wš4      pV# )rM   ©Úkernel_sizeÚpaddingéþÿÿÿéÿÿÿÿ)ÚshapeÚreshapeÚ	transposeÚselfkÚselfgÚselfcÚKKÚnsetr   ÚattÚselfbÚselfwr#   r>   Ú
functionalÚunfoldÚpermuteÚ	unsqueezeÚsqueeze)r   r   rb   r]   r^   rc   rd   ÚBra   ÚHÚWr`   r_   r   ÚattkÚufs   &&&&&&&         r   r   ÚKBAFunction.forwardD   si  € àŸ	™	‰ˆ�Ø�A�XˆØ—‘˜•
ˆà�k‰k˜! 1¥5Ó)×3Ñ3°B¸Ó;ˆð ØØØØð=
Ñ9ˆŒ	�3”9˜cœi¨¬°´ð 01°uÐ/CÑ,ˆŒˆsŒw˜œ	 3¤9à�{ˆØ�{ˆä�X‰X× Ñ ×'Ñ'¨ÀeÈqÅjÐ'ÓQˆð �Z‰Z˜ %¥.°2Õ"5°qµuÓ=×EÑEÀaÈÈAÈqÓQˆØ�|‰|˜A 1�u e°e­^¸U½^ÈbÕ=PÓQˆà—<‘< Ó#Õ#ˆØ�"Ø�I‰I�b‹M×!Ñ! !¨¥U¨EÓ2°TÕ9ˆØ�K‰K˜˜BÓ×'Ñ'¨°!Ó7ˆØˆr   c           	     ó8  € V P                   V P                  V P                  V P                  3w  r#rEV P                  V P
                  V P                  V P                  V P                  3w  rgr‰p
VP                  4       w  r¸rÍVP                  W¸WÍ,          4      P                  RR4      pVP                  RR4      V,          pWäP                  RR4      ,          pW5,          p\        P                  ! W&V^,          R7      pVP                  W·W‡,          V	,          WÍ,          4      P                  ^ ^^^4      pVP                  W¼V,          WxV,          W‡,          V	,          4      pVP                  W¼V,          WxV,          ^4      pVVP                  W¼V,          V^W‡,          V	,          4      ,          pVP                  RR4      V,          p??VP                  W¼V,          R4      pVVVP                  RR4      ,          ,          pVP                  RR4      V,          pVP                  ^ ^^^^4      P                  VRWÍ,          4      p\        P                   ! VWÍ3Wf^,          R7      pVP                  RR4      P                  WºWÍ4      pVVRRVV3# )r   rU   )Úoutput_sizerV   rW   NrY   rX   )r   rb   rc   rd   r]   r^   r_   r`   ra   r	   r[   r\   ÚFrf   rg   r   Úfold)r   r%   r   rb   rc   rd   r]   r^   r_   r`   ra   rj   rk   rl   ÚdbiasÚdselfbÚdattrm   rn   ÚdxÚdattkÚdufÚdselfws   &&                     r   r*   ÚKBAFunction.backwardd   s&  € à"Ÿu™u c§g¡g¨s¯y©y¸#¿)¹)ÐCÑˆ�à�I‰IØ�I‰IØ�I‰IØ�F‰FØ�H‰Hð)
Ñ%ˆ�e ð %×)Ñ)Ó+‰ˆ�!à×#Ñ# A¨a­eÓ4×>Ñ>¸rÀ2ÓFˆà—‘˜r 2Ó&¨Õ.ˆØ—‘ r¨2Ó.Õ.ˆà�{ˆÜ�XŠX�a°E¸QµJÔ?ˆà�Z‰Z˜ %¥.°2Õ"5°qµuÓ=×EÑEÀaÈÈAÈqÓQˆØ�|‰|˜A 1�u e°e­^¸U½^ÈbÕ=PÓQˆà�Z‰Z˜˜q�5 %°%­¸Ó;ˆà�R—W‘W˜Q A¥ u¨a°µÀ"Õ1DÓEÕEˆØ�n‰n˜R Ó$ rÕ)ˆØ�"à—
‘
˜1 !�e RÓ(ˆØ�˜Ÿ™¨¨BÓ/Õ/Õ/ˆØ—‘˜r 2Ó&¨Õ.ˆà�k‰k˜!˜Q  1 aÓ(×-Ñ-¨a°°QµUÓ;ˆÜ�VŠV�C a V¸ÐQRÍ
ÔSˆà�~‰~˜b "Ó%×*Ñ*¨1°AÓ9ˆà�4˜˜t V¨VÐ3Ð3r   r,   Nr-   r5   s   @r   rS   rS   C   s+   ø‡ € Øñó ðð> ñ&4ó ö&4r   rS   )r#   Útorch.nnr>   Útorch.nn.functionalre   rr   ÚautogradÚFunctionr   ÚModuler8   rK   rS   r,   r   r   Ú<module>r�      sb   ðã Ý ß Ð ô$
˜Ÿ™×/Ñ/ô $
ôNL�"—)‘)ô Lô�—‘ô ôH4�%—.‘.×)Ñ)ö H4r   