Технологии обработки информации К.т.н., доцент кафедры ИУС Феликс Васильевич

230400 Информационные системы и технологии
ЛЕКЦИИ, ЛАБОРАТОРНЫЕ РАБОТЫ,
ПРАКТИЧЕСКИЕ ЗАНЯТИЯ, ЭКЗАМЕН

СПбГУТ им. проф. М.А.Бонч-Бруевича

данных и язык SQL
Тема 4
XML - cтруктурирование данных
Тема 5

Тема 6

Структурирование знаний

Тема 7

Семантический веб

Тема 8

Тема 9

RDF и RDF Schema

XML Schema

JavaScript

Онтологии и OWL

Тема 10

даные (Big Data)
Тема 14
Технология Hadoop
Тема 15
Data

события или объекта познания.

К. Шеннон – конец 40-х годов

Это понятие связано с развитием киберне-тики - Н. Винер 1948

Концепция основана на логико-семантическом подходе.
Социальная информация представляет собой знания,

информации
n - число возможных равновероятных

событий
Pi – вероятность i-го события

Вам сообщили, что ваш поезд прибывает на четвертый путь. Сколько

использовать для производства продукта.

Технология — в узком смысле —

Технологии

класс дисциплин и областей деятельности, относящихся к технологиям управления и

Обработка информации – составная часть ИТ

TCP/IP
От хоста к сети
TCP – разбивает, нумерует
IP – адресует

TCP – собирает файл

IP – убирает адрес

От хоста к сети

Канал связи

или лич
Сид – пир имеющий все сегменты
Протокол BitTorrent
Официальный сайт: http://bitconjurer.org/BitTorrent

(«живое»/потоковое вещание);
децентрализованные социальные сети;
IOTT (Interactive-Over-The-Top) - интерактивные сервисы поверх

Платформа Ace Stream

с помощью m битов
можно закодировать N = 2 m понятий.

Байт

Выражение данных одного типа через
данные другого типа.

года 3120E1A5ADE2EFA1E1EF203230313420A3AEA4A0

– цифры в системе счисления
n – количество целых разрядов числа

X(s) = an-1an-2…a0,a-1a-2…a-m =

= an-1sn-1+an-2sn-2 +…+ a0s0+a-1s-1 +…+ a-ms-m

s = 2 ai = {0,1}
s = 8 ai = {0,1,2,3,4,5,6,7}
s = 10 ai = {0,1,2,3,4,5,6,7,8,9}
s = 16 ai = {0,1,2,3,4,5,6,7,8,9,a,b,c,d,e,f}

- 5
X -

Примеры: XII 12
MM 2000 MileniuM ?
MMMCMXCIX 3999 Max ?

Непозиционные системы счисления

Нормальная Научный
число

систему счисления.
Перевести следующие числа из 2-ой в 10-ю систему счисления:
10101011
11011,011
11,11

Домашнее задание № 2

таблиц

Синонимы:
строка = запись
столбец = поле
таблица = ( файл,

(поля) – поименованы и пронумерованы.
Каждая строка, каждой таблицы –

операций импортирования БД из других форматов
Обеспечение целостности данных на уровне

файлов, записей, полей
5. Импорт - экспорт
- возможность

Характеристики и требования к СУБД

SQL – Structured Query Language (Структурированный язык запросов).
Используется при работе с реляционными БД во всех современных СУБД:
FoxPro, Paradox, MySQL, MS Access, IBM DB2

SQL – стандарт ANSI, ISO архитектуры Файл-Сервер и Клиент-Сервер.

- сервер
Клиент - сервер
Хранение файлов
Обработка файлов
Передача файлов БД
Передача данных извлеченных

СУБД – программный комплекс, предназначенный для реализации всей
совокупности функций, связанных с созданием и эксплуатацией БД.

Рабочие станции

Рабочие станции

только запросы (из всего языка SQL) и используют.
Рассмотрим строку таблицы.

Алгоритм выборки

Orders (Заказы)

==========

SELECT * FROM Salespeople;

SQL запросы
Команда SELECT

наиболее часто используемый аспект SQL

SELECT snum,sname,city,comm FROM Salespeople;

Выбор определенных столбцов

= SQL Execution Log ==
| SELECT sname, сomm |
| FROM Salespeople; |
| ==================|
| sname comm |
| ---------- ------- |
| Peel 0.12 |
| Serres 0.13 |
| Motika 0.11 |
| Rifkin 0.15 |
| Axelrod 0.10 |
===================

Перестановка столбцов
========= SQL Execution Log

избыточных строк
= SQL Execution Log

==== SQL Execution Log ====
| SELECT DISTINCT snum |
| FROM Orders; |
| -------------------------------------------|
| snum |
| ------- |
| 1007 |
| 1001 |
| 1004 |
| 1002 |
| 1003 |
=========================

Ключевое слово DISTINCT

(rating),
сопровождаемый именем каждого покупателя в San Jose.

5.

Напишите команду SELECT, которая бы вывела номер заказа, сумму,
и дату для всех строк из таблицы Orders.

2. Напишите запрос, который вывел бы все строки из таблицы Customers,
с номером продавца = 1001.

3. Напишите запрос, который вывел бы таблицу со столбцами в следующем
порядке: city, sname, snum, comm.

выбор строк
Ключевое слово WHERE
======= SQL Execution Log =======
| SELECT

city = ‘London’

Условие
(предикат)

выбор строк
Ключевое слово WHERE
=============== SQL Execution Log ==========
| SELECT *

rating = 100

Условие

отношения и логические операторы
Операторы отношения (Реляционные операторы)
Логические операторы (Булевы операторы)
= -

AND - логическое И
OR - логическое ИЛИ
NOT - логическое НЕ

условие
| сnum cname city

WHERE

city = ‘San Jose’ AND rating > 200

Составное условие

=========== SQL Execution Log ============
| SELECT * |
| FROM Customers |
| WHERE city = 'San Jose' |
| AND rating > 200; |
========================================

условие
city = ‘San Jose’ OR rating > 200
| сnum

=========== SQL Execution Log ============
| SELECT * |
| FROM Customers |
| WHERE city = 'San Jose' |
| OR rating > 200; |
| ====================================== |

Составное условие

условие
city = NOT ( ‘San Jose’ OR rating > 200

| сnum cname city rating snum |
| ------ -------- -------- ---- ----- | | 2001 Hoffman London 100 1001 | | 2002 Giovanni Rome 200 1003 | | 2006 Clemens London 100 1001 | | 2007 Pereira Rome 100 1004 |
========================================

=========== SQL Execution Log ============
| SELECT * |
| FROM Customers |
| WHERE NOT ( city = 'San Jose' |
| OR rating > 200); |
| ====================================== |

и city для всех
продавцов в

6. Напишите запрос, который выведет все заказы со значениями суммы выше чем 1000.

8. Напишите запрос к таблице Покупатели, который определит всех
покупателей с рейтингом =< 100, если они не в Риме.

9. Что может быть выведено в результате следующего запроса ?
SELECT * FROM Orders
WHERE NOT ((odate = 10/03/2008 OR snum > 1006)
AND amt > = 1500 );

10. Как можно проще переписать такой запрос ?
SELECT snum, sname, city, comm
FROM Salespeople
WHERE ( comm > + 0.12 OR comm < 0.14 );

операторы для использования в условиях
IN - в списке (перечне)
BETWEEN - между
LIKE - подобно

оператор IN
SELECT *
FROM Salespeople

SELECT *
FROM Salespeople
WHERE city IN ( 'Barcelona', 'London' );

Проще

оператор IN
=========== SQL Execution Log ============

WHERE snum IN ( 1001, 1007, 1004);

оператор BETWEEN
======== SQL Execution Log ===========

| snum sname city comm |
| ------ ---------- ----------- ------- |
| 1001 Peel London 0.12 |
| 1004 Motika London 0.11 |
| 1003 Axelrod New York 0.10 |
====================================

WHERE comm BETWEEN 0.10 AND 0.12;

оператор BETWEEN
WHERE cname BETWEEN ‘A’ AND ‘G’;
============ SQL Execution Log

| cnum cname city rating snum |
| ------ -------- ------ ---- ------ |
| 2006 Clemens London 100 1001 |
| 2008 Cisneros San Jose 300 1007 |
========================================

оператор LIKE
Имеются два типа групповых символов используемых с LIKE:

оператор LIKE (примеры)
= SQL Execution Log =
| SELECT

| cname |
| ------ |
| Peel |
====================

WHERE cname LIKE 'G%';

WHERE cname LIKE ‘P__L%';

============ SQL Execution Log ===========
| SELECT * |
| FROM Customers |
| WHERE cname LIKE 'G%'; |
| ====================================== |

| cnum cname city rating snum |
| ------ -------- ------ ---- ------ |
| 2002 Giovanni Roma 200 1003 |
| 2004 Grass Berlin 300 1002 |
========================================

оператор IS NULL (примеры)
SELECT *

============ SQL Execution Log ===========
| SELECT * |
| FROM Customers |
| WHERE city NOT NULL; |
| ====================================== |

cnum cname city rating snum
2001 Hoffman London 100 1001
2002 Giovanni Rome 200 1003
2003 Liu San Jose 200 1002
2004 Grass Berlin 300 1002
2006 Clemens London 100 1001
2008 Cisneros San Jose 300 1007
2007 Pireira Rome 100 1004

заказы на 3 и
4 Октября

функции
COUNT - подсчитывает число не нулевых значений поля

функции SUM и AVG (примеры)
= SQL Execution Log =

| ---------- |
| 26658.4 |
====================

= SQL Execution Log =
| SELECT AVG (amt) |
| FROM Orders |
| ===================

| --------- |
| 2665.84 |
====================

функция COUNT (примеры)
= SQL Execution Log =
| SELECT

| ------ |
| 7 |
====================

======= SQL Execution Log ======
| SELECT COUNT (DISTINCT snum) |
| FROM Orders |
| ============================= |

| ------ |
| 5 |
===============================

операторы
GROUP BY - позволяет определять подмножества значений отдельного поля и

оператор GROUP BY (пример)
==== SQL Execution Log =====
|

Максимальная сумма продажи у каждого продавца

оператор HAVING (пример)
===== SQL Execution Log =======
|SELECT snum,

| snum odate | | ------ ---------- -------- | | 1001 10/05/2008 4723.00 | | 1001 10/06/2008 9891.88 | | 1002 10/03/2008 5160.45 | =============================

===== SQL Execution Log =======
|SELECT snum, odate, MAX (amt) | | FROM Orders | | GROUP BY snum, odate; | |============================ | | snum odate | | ------ ---------- -------- | | 1001 10/03/2008 767.19 | | 1001 10/05/2008 4723.00 | | 1001 10/06/2008 9891.88 | | 1002 10/03/2008 5160.45 | | 1002 10/04/2008 75.75 | | 1002 10/06/2008 1309.95 | | 1003 10/04/2008 1713.23 | | 1004 10/03/2008 1900.10 | | 1007 10/03/2008 1098.16 | =============================

сделанных
3 октября.
17. Напишите запрос который

18. Напишите запрос который выбрал бы наименьшую сумму для каждого
покупателя.

19. Напишите запрос который бы выбирал покупателей в алфавитном
порядке, чьи имена начинаются с буквы G.

20. Напишите запрос который выбрал бы высший рейтинг в каждом городе.

результатов (отчеты)
Использование выражений (*,/,+,-)
Вставка комментариев (‘…’)
Упорядочивание строк (ORDER BY,

результатов (примеры)
===== SQL Execution Log ===============
| SELECT

| snum sname city | | ------ -------- ----------- ------- ---- | | 1001 Peel London 12.00 % |
| 1002 Serres San Jose 13.00 % |
| 1004 Motika London 11.00 % |
| 1007 Rifkin Barcelona 15.00 % |
| 1003 Axelrod New York 10.00 % |
========================================

результатов (примеры)
============ SQL Execution Log =========

результатов (примеры)
========== SQL Execution Log ===========

результатов (примеры)
==== SQL Execution Log ====|

к таблице Заказов, который мог бы вывести номер заказа, номер

Домашнее задание №7

таблиц
Задача. Поставить в соответствие каждому продавцу его покупателей в

======== SQL Execution Log ==========
| SELECT Customers.cname, |
| Salespeople.sname, Salespeople.city |
| FROM Salespeople, Customers |
| WHERE Salespeople.city = Customers.city |
| =================================== |
| cname sname city |
| ----------- -------- ----------- |
| Hoffman Peel London |
| Liu Serres San Jose |
| Cisneros Serres San Jose |
| Hoffman Motika London |
| Clemens Motika London | ====================================

более двух таблиц
Найти все заказы покупателей не находящихся в

=============== SQL Execution Log ==============
| SELECT onum, cname, Orders.cnum, Orders.snum |
| FROM Salespeople, Customers, Orders |
| WHERE Customers.city < > Salespeople.city |
| AND Orders.cnum = Customers.cnum |
| AND Orders.snum = Salespeople.snum; |
| ============================================== |
| onum cname cnum snum |
| ------ ------- ----- ----- | | 3001 Cisneros 2008 1007 |
| 3002 Pereira 2007 1004 |
| 3006 Cisneros 2008 1007 |
| 3009 Giovanni 2002 1003 |
| 3007 Grass 2004 1002 |
| 3010 Grass 2004 1002 | ================================================

Задача. Известно только имя продавца Motika. Надо узнать все выполненные

============ SQL Execution Log ========
| SELECT * |
| FROM Orders |
| WHERE snum = |
| (SELECT snum |
| FROM Salespeople |
| WHERE sname = 'Motika'); | |=====================================|
| onum amt odate cnum snum |
| ----- ------- ---------- ----- ----- |
| 3002 1900.10 10/03/2008 2007 1004 |
======================================

запросов
Используется специальный оператор UNOIN
=== SQL Execution Log ===

именем покупателя, который делал эти заказы.

26. Напишите запрос, который

INSERT ВСТАВИТЬ
UPDATE МОДИФИЦИРОВАТЬ
DELETE УДАЛИТЬ
DML Data Manipulate Language

INSERT INTO Salespeople VALUES (1005, ‘Bogner', ‘Adelaida', 0.11);
Примеры вставки

Примеры удаления строк

INSERT INTO Customers (city, cnamе, cnum) VALUES ('London', 'Honman', 2001);

DELETE FROM Salespeople WHERE snum = 1003;

DELETE FROM Salespeople;

DROP TABLE;

Примеры модификации строк

UPDATE Customers SET rating = 200 WHERE snum = 1001;

UPDATE Customers SET sum = 1004 WHERE snum = 1002;

CREATE TABLE СОЗДАТЬ ТАБЛИЦУ
DROP TABLE УДАЛИТЬ

DDL Data Definision Language

CREATE TABLE Salespeople
(

CREATE UNIQUE INDEX Custid ON Customers (cnum);

DROP INDEX имя индекса;

DROP TABLE имя таблицы;

Добавочные ограничения

CREATE VIEW Londonstaff
AS SELECT *
FROM

Представление Londonstaff

Чего?

ON Customers TO Marie;
GRANT UPDATE (city, comm) ON Salespeople TO