Yerel minimumların tehlikeleri

Aşağıdaki loss_function() kayıp fonksiyonunun grafiğini düşün. Sağdaki noktayla işaretlenmiş bir küresel minimum ve soldaki nokta dahil olmak üzere birkaç yerel minimum içeriyor.

Grafik, birden çok yerel minimum ve bir küresel minimum içeren tek değişkenli bir fonksiyonu göstermektedir.

Bu egzersizde keras.optimizers.SGD() kullanarak loss_function() fonksiyonunun küresel minimumunu bulmaya çalışacaksın. Bunu iki kez yapacaksın; her seferinde loss_function() girdisi için farklı bir başlangıç değeriyle. İlk olarak, başlangıç değeri 6.0 olan bir değişken x_1 kullanacaksın. İkinci olarak, başlangıç değeri 0.3 olan bir değişken x_2 kullanacaksın. loss_function() fonksiyonunun tanımlandığını ve kullanılabilir olduğunu unutma.

Bu egzersiz

Python ile TensorFlow’a Giriş

kursunun bir parçasıdır

Kursu Görüntüle

Egzersiz talimatları

opt'yi öğrenme oranı 0.01 olan stokastik gradyan inişi (SGD) iyileştiricisini kullanacak şekilde ayarla.
loss_function() kayıp fonksiyonu ve başlangıç değeri 6.0 olan değişken x_1 ile minimizasyon yap.
loss_function() kayıp fonksiyonu ve başlangıç değeri 0.3 olan değişken x_2 ile minimizasyon yap.
x_1 ve x_2'yi numpy dizileri olarak yazdır ve değerlerin farklı olup olmadığını kontrol et. Bunlar algoritmanın bulduğu minimumlardır.

Uygulamalı interaktif egzersiz

Bu örnek kodu tamamlayarak bu egzersizi bitirin.

# Initialize x_1 and x_2
x_1 = Variable(6.0,float32)
x_2 = Variable(0.3,float32)

# Define the optimization operation
opt = keras.optimizers.____(learning_rate=____)

for j in range(100):
	# Perform minimization using the loss function and x_1
	opt.minimize(lambda: loss_function(____), var_list=[____])
	# Perform minimization using the loss function and x_2
	opt.minimize(lambda: ____, var_list=[____])

# Print x_1 and x_2 as numpy arrays
print(____.numpy(), ____.numpy())

Kodu Düzenle ve Çalıştır

Bu egzersiz

Python ile TensorFlow’a Giriş

kursunun bir parçasıdır

IntermediárioNível de habilidade

4.8+

Kursa Ücretsiz Başlayın

Before you can build advanced models in TensorFlow 2, you will first need to understand the basics. In this chapter, you’ll learn how to define constants and variables, perform tensor addition and multiplication, and compute derivatives. Knowledge of linear algebra will be helpful, but not necessary.

Exercise 1: Constants and variables Exercise 2: Defining data as constants Exercise 3: Defining variables Exercise 4: Basic operations Exercise 5: Performing element-wise multiplication Exercise 6: Making predictions with matrix multiplication Exercise 7: Summing over tensor dimensions Exercise 8: Advanced operations Exercise 9: Reshaping tensors Exercise 10: Optimizing with gradients Exercise 11: Working with image data

In this chapter, you will learn how to build, solve, and make predictions with models in TensorFlow 2. You will focus on a simple class of models – the linear regression model – and will try to predict housing prices. By the end of the chapter, you will know how to load and manipulate data, construct loss functions, perform minimization, make predictions, and reduce resource use with batch training.

Exercise 1: Input data Exercise 2: Load data using pandas Exercise 3: Setting the data type Exercise 4: Loss functions Exercise 5: Loss functions in TensorFlow Exercise 6: Modifying the loss function Exercise 7: Linear regression Exercise 8: Set up a linear regression Exercise 9: Train a linear model Exercise 10: Multiple linear regression Exercise 11: Batch training Exercise 12: Preparing to batch train Exercise 13: Training a linear model in batches

The previous chapters taught you how to build models in TensorFlow 2. In this chapter, you will apply those same tools to build, train, and make predictions with neural networks. You will learn how to define dense layers, apply activation functions, select an optimizer, and apply regularization to reduce overfitting. You will take advantage of TensorFlow's flexibility by using both low-level linear algebra and high-level Keras API operations to define and train models.

Exercise 1: Yoğun katmanlar Exercise 2: Yoğun katmanların lineer cebiri Exercise 3: Birden çok örnekle düşük seviyeli yaklaşım Exercise 4: Yoğun katman işlemini kullanma Exercise 5: Aktivasyon fonksiyonları Exercise 6: İkili sınıflandırma problemleri Exercise 7: Çok sınıflı sınıflandırma problemleri Exercise 8: Optimize Ediciler Exercise 9: Yerel minimumların tehlikeleri

Geçerli Egzersiz

Exercise 10: Yerel minimadan kaçınma Exercise 11: TensorFlow'da bir ağı eğitme Exercise 12: TensorFlow'da Başlatma Exercise 13: Modeli ve kayıp fonksiyonunu tanımlama Exercise 14: TensorFlow ile sinir ağlarını eğitme

In the final chapter, you'll use high-level APIs in TensorFlow 2 to train a sign language letter classifier. You will use both the sequential and functional Keras APIs to train, validate, make predictions with, and evaluate models. You will also learn how to use the Estimators API to streamline the model definition and training process, and to avoid errors.

Exercise 1: Defining neural networks with Keras Exercise 2: The sequential model in Keras Exercise 3: Compiling a sequential model Exercise 4: Defining a multiple input model Exercise 5: Training and validation with Keras Exercise 6: Training with Keras Exercise 7: Metrics and validation with Keras Exercise 8: Overfitting detection Exercise 9: Evaluating models Exercise 10: Training models with the Estimators API Exercise 11: Preparing to train with Estimators Exercise 12: Defining Estimators Exercise 13: Congratulations!