+
    ƒ°ñjÞ(  ã                   óÚ  € ^ RI t ^ RI Ht ^ RIHt ^ RIt^ RIt]P                  P                  tR t	 ! R R]P                  4      tR t ! R R	]P                  4      tR
 tR tRR R llt ! R R]P                  4      t ! R R]P                  4      t ! R R]P                  4      t ! R R]P                  4      t ! R R]P                  4      t ! R R]P                  4      tR# )é    N)Únn)ÚLiteralc                 óL  € \         P                  P                  V4      R ,           pW",          p\        P                  ! V4      p\        P
                  ! V 4      V,          V ,           pW ,          V,           V,
          ^,
          P                  ^4      P                  4       pWV3# )g-Cëâ6?)r   Ú
functionalÚsoftplusÚtorchÚlogÚ
randn_likeÚsumÚmean)r   ÚscaleÚstdevÚvarÚlogvarÚlatentsÚkls   &&     Ú?C:\Ai_Coding\apps\studio\ComfyUI\comfy\ldm\audio\autoencoder.pyÚ
vae_sampler   
   s{   € Ü—‘×&Ñ& uÓ-°Õ4ˆØ�mˆÜ—’˜3“ˆÜ×"Ò" 4Ó(¨5Õ0°4Õ7ˆà�k˜CÕ &Õ(¨1Õ,×1Ñ1°!Ó4×9Ñ9Ó;ˆàˆ{Ðó    c                   óB   a a€ ] tR t^t oV 3R ltRR ltR tRtVtV ;t	# )ÚVAEBottleneckc                ó2   <€ \         SV `  4        R V n        R# ©FN)ÚsuperÚ__init__Úis_discrete)ÚselfÚ	__class__s   &€r   r   ÚVAEBottleneck.__init__   s   ø€ Ü‰ÑÔØ ˆÖr   c                ól   € / pVP                  ^^R7      w  rV\        WV4      w  rWtR&   V'       d   W3# V# )é   ©Údimr   )Úchunkr   )r   ÚxÚreturn_infoÚkwargsÚinfor   r   r   s   &&&,    r   ÚencodeÚVAEBottleneck.encode   s=   € Øˆà—g‘g˜a Q�gÓ'‰ˆä˜4Ó'‰ˆàˆT‰
çØ�7ˆNàˆHr   c                ó   € V# ©N© ©r   r%   s   &&r   ÚdecodeÚVAEBottleneck.decode'   s   € Øˆr   )r   )F©
Ú__name__Ú
__module__Ú__qualname__Ú__firstlineno__r   r)   r/   Ú__static_attributes__Ú__classdictcell__Ú__classcell__©r   Ú__classdict__s   @@r   r   r      s   ù‡ € õ!ô÷ò r   r   c                 ó†   € V R VR,           ,          \        \        P                  ! W,          4      ^4      ,          ,           # )ç      ð?ç•Ö&è.>)Úpowr   Úsin)r%   ÚalphaÚbetas   &&&r   Ú
snake_betarB   +   s.   € Ø��t˜kÕ)Õ*¬c´%·)²)¸A½IÓ2FÈÓ.JÕJÕJÐJr   c                   ó<   a a€ ] tR t^/t oRV 3R lltR tRtVtV ;t# )Ú	SnakeBetac                ó(  <€ \         \        V `  4        Wn        W@n        V P                  '       dn   \
        P                  ! \        P                  ! V4      V,          4      V n	        \
        P                  ! \        P                  ! V4      V,          4      V n
        Ml\
        P                  ! \        P                  ! V4      V,          4      V n	        \
        P                  ! \        P                  ! V4      V,          4      V n
        R V n        R# )r=   N)r   rD   r   Úin_featuresÚalpha_logscaler   Ú	Parameterr   Úzerosr@   rA   ÚonesÚno_div_by_zero)r   rF   r@   Úalpha_trainablerG   r   s   &&&&&€r   r   ÚSnakeBeta.__init__1   s¬   ø€ ÜŒi˜Ñ'Ô)Ø&Ôð -ÔØ××ÐÜŸš¤e§k¢k°+Ó&>ÀÕ&FÓGˆDŒJÜŸš¤U§[¢[°Ó%=ÀÕ%EÓFˆD�IäŸš¤e§j¢j°Ó&=ÀÕ&EÓFˆDŒJÜŸš¤U§Z¢Z°Ó%<¸uÕ%DÓEˆDŒIð
 *ˆÖr   c                ó¦  € V P                   P                  ^ 4      P                  R4      P                  VP                  4      pV P                  P                  ^ 4      P                  R4      P                  VP                  4      pV P
                  '       d-   \        P                  ! V4      p\        P                  ! V4      p\        WV4      pV# )r   éÿÿÿÿ)	r@   Ú	unsqueezeÚtoÚdevicerA   rG   r   ÚexprB   )r   r%   r@   rA   s   &&  r   ÚforwardÚSnakeBeta.forwardC   s–   € Ø—
‘
×$Ñ$ QÓ'×1Ñ1°"Ó5×8Ñ8¸¿¹ÓBˆØ�y‰y×"Ñ" 1Ó%×/Ñ/°Ó3×6Ñ6°q·x±xÓ@ˆØ××ÐÜ—I’I˜eÓ$ˆEÜ—9’9˜T“?ˆDÜ�q Ó&ˆàˆr   )r@   rG   rA   rF   rK   )r<   TT©	r2   r3   r4   r5   r   rT   r6   r7   r8   r9   s   @@r   rD   rD   /   s   ù‡ € ÷*÷$ò r   rD   c                  ó�   € \         P                  P                  P                  P	                  \
        P                  ! V / VB 4      # r,   )r   r   ÚutilsÚparametrizationsÚweight_normÚopsÚConv1d©Úargsr'   s   *,r   ÚWNConv1dr_   M   s/   € Ü�8‰8�>‰>×*Ñ*×6Ñ6´s·z²zÀ4Ð7RÈ6Ñ7RÓSÐSr   c                  ó�   € \         P                  P                  P                  P	                  \
        P                  ! V / VB 4      # r,   )r   r   rX   rY   rZ   r[   ÚConvTranspose1dr]   s   *,r   ÚWNConvTranspose1drb   P   s2   € Ü�8‰8�>‰>×*Ñ*×6Ñ6´s×7JÒ7JÈDÐ7[ÐTZÑ7[Ó\Ð\r   c                óR   € V ^8„  d   QhR\         R,          R\        P                  /# )r!   Ú
activationÚreturn)ÚeluÚsnakeÚnone)r   r   ÚModule)Úformats   "r   Ú__annotate__rk   S   s'   € ÷ ñ œwÐ'=Õ>ð Ôce×clÑclñ r   c                 ó  € V R 8X  d    \         P                  P                  4       pMGV R8X  d   \        V4      pM4V R8X  d    \         P                  P	                  4       pM\        RV  24      hV'       d   \        V4      pV# )rf   rg   rh   zUnknown activation )r   r   ÚELUrD   ÚIdentityÚ
ValueErrorÚActivation1d)rd   Ú	antialiasÚchannelsÚacts   &&& r   Úget_activationrt   S   sj   € Ø�UÔÜ�h‰h�l‰l‹n‰Ø	�wÔ	Ü˜Ó!‰Ø	�vÔ	Ü�h‰h×ÑÓ!‰äÐ.¨z¨lÐ;Ó<Ð<çÜ˜3Óˆà€Jr   c                   ó<   a a€ ] tR t^ct oRV 3R lltR tRtVtV ;t# )ÚResidualUnitc                ó  <€ \         SV `  4        W0n        V^,          ^,          p\        P                  ! \        V'       d   RMRWRR7      \        W^W6R7      \        V'       d   RMRWRR7      \        W"^R7      4      V n        R# )é   rg   rf   ©rq   rr   )Úin_channelsÚout_channelsÚkernel_sizeÚdilationÚpadding)rz   r{   r|   N)r   r   r}   r   Ú
Sequentialrt   r_   Úlayers)r   rz   r{   r}   Ú	use_snakeÚantialias_activationr~   r   s   &&&&&& €r   r   ÚResidualUnit.__init__d   sm   ø€ Ü‰ÑÔà Œà˜sÕ#¨Õ)ˆä—m’mÜ§i™7°UÐFZÔrÜ Ø"#¨hôIä§i™7°UÐFZÔrÜ Ø"#ô%ó
ˆŽr   c                ó8   € TpV P                  V4      pW,           # r,   ©r€   )r   r%   Úress   && r   rT   ÚResidualUnit.forwardt   s   € Øˆð �K‰K˜‹Nˆà�wˆr   )r}   r€   ©FFrV   r9   s   @@r   rv   rv   c   s   ù‡ € ÷
÷ ò r   rv   c                   ó<   a a€ ] tR t^|t oRV 3R lltR tRtVtV ;t# )ÚEncoderBlockc                ó8  <€ \         SV `  4        \        P                  ! \	        VV^VR7      \	        VV^VR7      \	        VV^	VR7      \        V'       d   RMRWQR7      \        W^V,          V\        P                  ! V^,          4      R7      4      V n	        R# )é   ©rz   r{   r}   r�   rg   rf   ry   )rz   r{   r|   Ústrider~   N)
r   r   r   r   rv   rt   r_   ÚmathÚceilr€   )r   rz   r{   rŽ   r�   r‚   r   s   &&&&&&€r   r   ÚEncoderBlock.__init__}   s‡   ø€ Ü‰ÑÔä—m’mÜ [Ø&1¸AÈôTä [Ø&1¸AÈôTä [Ø&1¸AÈôTä§i™7°UÐFZÔqÜ Ø"# F¥(°6Ä4Ç9Â9ÈVÐTUÍXÓCVôXó

ˆŽr   c                ó$   € V P                  V4      # r,   r…   r.   s   &&r   rT   ÚEncoderBlock.forwardŒ   ó   € Ø�{‰{˜1‹~Ðr   r…   rˆ   rV   r9   s   @@r   rŠ   rŠ   |   s   ù‡ € ÷
÷ò r   rŠ   c                   ó<   a a€ ] tR t^�t oRV 3R lltR tRtVtV ;t# )ÚDecoderBlockc                óà  <€ \         SV `  4        V'       dE   \        P                  ! \        P                  ! VR R7      \        VV^V,          ^RRR7      4      pM:\        VV^V,          V\        P                  ! V^,          4      V^,          R7      p\        P                  ! \        V'       d   RMRWQR7      V\        W"^VR	7      \        W"^VR	7      \        W"^	VR	7      4      V n        R
# )Únearest)Úscale_factorÚmodeFÚsame)rz   r{   r|   rŽ   Úbiasr~   )rz   r{   r|   rŽ   r~   Úoutput_paddingrg   rf   ry   r�   N)r   r   r   r   ÚUpsampler_   rb   r�   r�   rt   rv   r€   )	r   rz   r{   rŽ   r�   r‚   Úuse_nearest_upsampleÚupsample_layerr   s	   &&&&&&& €r   r   ÚDecoderBlock.__init__�   sÑ   ø€ Ü‰ÑÔçÜŸ]š]Ü—’¨°iÔ@Ü [Ø%1Ø$% f¥HØ Ø"Ø &ô(ó‰Nô /¸;Ø,8Ø+,¨V­8¸FÌDÏIÊIÐV\Ð]^ÕV^ÓL_ÐpvÐyzÕpzô|ˆNô —m’mÜ§i™7°UÐFZÔqØÜ \Ø"#¨yô:ä \Ø"#¨yô:ä \Ø"#¨yô:ó	
ˆŽr   c                ó$   € V P                  V4      # r,   r…   r.   s   &&r   rT   ÚDecoderBlock.forward­   r”   r   r…   )FFFrV   r9   s   @@r   r–   r–   �   s   ù‡ € ÷
÷:ò r   r–   c                   óR   a a€ ] tR t^°t o^^€^ . RO. RORR3V 3R lltR tRtVtV ;t# )ÚOobleckEncoderFc           	     ó  <€ \         S
V `  4        ^.V,           p\        V4      V n        \	        W^ ,          V,          ^^R7      .p\        V P                  ^,
          4       FA  p	V\        WI,          V,          WI^,           ,          V,          WY,          VR7      .,          pKC  	  T\        V'       d   RMRWtR,          V,          R7      \	        VR,          V,          V^^R7      .,          p\        P                  ! V!  V n
        R# )rŒ   ©rz   r{   r|   r~   )rz   r{   rŽ   r�   rg   rf   ry   NrO   )r   r   ÚlenÚdepthr_   ÚrangerŠ   rt   r   r   r€   )r   rz   rr   Ú
latent_dimÚc_multsÚstridesr�   r‚   r€   Úir   s   &&&&&&&&  €r   r   ÚOobleckEncoder.__init__±   s÷   ø€ ô 	‰ÑÔà�#˜•-ˆä˜“\ˆŒ
ô  À1½:ÈÕ;PÐ^_ÐijÔkð
ˆô �t—z‘z !•|Ö$ˆAØ”|°µ
¸8Õ0CÐRYÐ\]ÕZ]ÕR^Ð_gÕRgÐpwÕpzð  GPô  Qð  Rõ  RŠFñ %ð 	Ü§i™7°UÐFZÐmoÕepÐs{Õe{Ô|Ü ¨¥¨XÕ!5ÀJÐ\]ÐghÔið
õ 	
ˆô
 —m’m VÑ,ˆŽr   c                ó$   € V P                  V4      # r,   r…   r.   s   &&r   rT   ÚOobleckEncoder.forwardÎ   r”   r   ©r©   r€   ©rŒ   r!   é   é   ©r!   r´   rµ   rµ   rV   r9   s   @@r   r¥   r¥   °   s)   ù‡ € àØØÚ'Ú'Ø Ø&+÷-÷:ò r   r¥   c            	       óV   a a€ ] tR t^Òt o^^€^ . RO. RORRRR3	V 3R lltR tRtVtV ;t# )ÚOobleckDecoderFTc
                ó’  <€ \         SV `  4        ^.V,           p\        V4      V n        \	        W4R	,          V,          ^^R7      .p
\        V P                  ^,
          ^ R	4       FJ  pV
\        WK,          V,          WK^,
          ,          V,          W[^,
          ,          VVVR7      .,          p
KL  	  T
\        V'       d   RMRWt^ ,          V,          R7      \	        V^ ,          V,          V^^RR7      V	'       d   \        P                  ! 4       M\        P                  ! 4       .,          p
\        P                  ! V
!  V n        R# )
rŒ   r§   )rz   r{   rŽ   r�   r‚   rŸ   rg   rf   ry   F)rz   r{   r|   r~   rœ   NrO   )r   r   r¨   r©   r_   rª   r–   rt   r   ÚTanhrn   r   r€   )r   r{   rr   r«   r¬   r­   r�   r‚   rŸ   Ú
final_tanhr€   r®   r   s   &&&&&&&&&&  €r   r   ÚOobleckDecoder.__init__Ó   s  ø€ ô 	‰ÑÔà�#˜•-ˆä˜“\ˆŒ
ô  À"½+ÀhÕ:NÐ\]ÐghÔið
ˆô �t—z‘z !•| Q¨Ö+ˆAØ”|Ø#�J xÕ/Ø$ q¥S�\¨(Õ2Ø �s•|Ø#Ø%9Ø%9ôð õ ŠFñ ,ð 	Ü§i™7°UÐFZÐmnÕeoÐrzÕezÔ{Ü ¨¥¨hÕ!6À\Ð_`ÐjkÐrwÔxß#ŒB�GŠGŒI¬¯ª«ð
õ 	
ˆô —m’m VÑ,ˆŽr   c                ó$   € V P                  V4      # r,   r…   r.   s   &&r   rT   ÚOobleckDecoder.forwardú   r”   r   r²   r³   r¶   rV   r9   s   @@r   r¸   r¸   Ò   s0   ù‡ € àØØÚ'Ú'Ø Ø&+Ø&+Ø ÷%-÷Nò r   r¸   c            
       ó^   a a€ ] tR t^þt o^^€^@. RO. RORRRRR3
V 3R lltR tR tRtVtV ;t	# )	ÚAudioOobleckVAETFc                ó¬   <€ \         SV `  4        \        WV^,          WEWg4      V n        \	        WW4WVVW‰R7	      V n        \        4       V n        W n        R# )r!   )rŸ   r»   N)	r   r   r¥   Úencoderr¸   Údecoderr   Ú
bottleneckÚsample_latent)r   rz   rr   r«   r¬   r­   r�   r‚   rŸ   r»   rÅ   r   s   &&&&&&&&&&&€r   r   ÚAudioOobleckVAE.__init__ÿ   sP   ø€ ô 	‰ÑÔÜ% k¸ZÈ!½^ÈWÐ_hÓˆŒÜ% k¸ZÐRYÐfzØ;OôhˆŒä'›/ˆŒØ*Ör   c                ó²   € V P                  V4      pV P                  '       g   VP                  ^^R7      ^ ,          # V P                  P	                  V4      # )r!   r"   )rÂ   rÅ   r$   rÄ   r)   )r   r%   Úencodeds   && r   r)   ÚAudioOobleckVAE.encode  sH   € Ø—,‘,˜q“/ˆØ×!×!Ð!Ø—=‘= ¨�=Ó*¨1Õ-Ð-Ø�‰×%Ñ% gÓ.Ð.r   c                óV   € V P                  V P                  P                  V4      4      # r,   )rÃ   rÄ   r/   r.   s   &&r   r/   ÚAudioOobleckVAE.decode  s    € Ø�|‰|˜DŸO™O×2Ñ2°1Ó5Ó6Ð6r   )rÄ   rÃ   rÂ   rÅ   )rŒ   r!   r´   rµ   é   )r!   r´   r´   rµ   rµ   r1   r9   s   @@r   rÀ   rÀ   þ   s7   ù‡ € àØØÚ+Ú*ØØ&+Ø&+Ø!Ø#÷+ò$/÷7ò 7r   rÀ   r   )r   r   Útypingr   r�   Ú	comfy.opsÚcomfyr[   Údisable_weight_initr   ri   r   rB   rD   r_   rb   rt   rv   rŠ   r–   r¥   r¸   rÀ   r-   r   r   Ú<module>rÑ      sÄ   ðó Ý Ý Û Û Ø‡i�i×#Ñ#€òô�B—I‘Iô ò.Kô�—	‘	ô ò<Tò]÷ô �2—9‘9ô ô2�2—9‘9ô ô&�2—9‘9ô ôB�R—Y‘Yô ôD)�R—Y‘Yô )ôX7�b—i‘iö 7r   