보스턴 안전 데이터

보스턴 311 통화 데이터는 보스턴 311 통화 시스템에 걸려온 311건의 비응급 통화를 포함합니다. 자세한 내용은 BOS:311 리소스를 방문하세요.

참고 항목

Microsoft는 Azure Open Datasets를 “있는 그대로” 제공합니다. Microsoft는 귀하의 데이터 세트 사용과 관련하여 어떠한 명시적이거나 묵시적인 보증, 보장 또는 조건을 제공하지 않습니다. 귀하가 거주하는 지역의 법규가 허용하는 범위 내에서 Microsoft는 귀하의 데이터 세트 사용으로 인해 발생하는 일체의 직접적, 결과적, 특별, 간접적, 부수적 또는 징벌적 손해 또는 손실을 비롯한 모든 손해 또는 손실에 대한 모든 책임을 부인합니다.

이 데이터 세트는 Microsoft가 원본 데이터를 받은 원래 사용 약관에 따라 제공됩니다. 데이터 세트에는 Microsoft가 제공한 데이터가 포함될 수 있습니다.

볼륨 및 보존

이 데이터 세트는 Parquet 형식으로 저장됩니다. 2011년부터 보스턴은 311개의 데이터를 연도별로 하나의 파일 리소스씩 다른 파일로 제공하고 있습니다. 데이터는 매일 업데이트됩니다. 2023 데이터 세트에는 매일 업데이트되는 수신 건수가 포함되어 있으며, 2019년 기준 총 313-K 행(179MB)이 포함되어 있습니다. SDK의 매개 변수 설정을 사용하여 특정 시간 범위의 데이터를 가져올 수 있습니다.

스토리지 위치

이 데이터 세트는 미국 동부 Azure 지역에 저장됩니다. 선호도의 경우 미국 동부 지역에서 컴퓨팅 리소스를 할당하는 것이 좋습니다.

추가 정보

이 데이터 세트는 보스턴 시 정부에서 제공됩니다. 자세한 내용은 보스턴 데이터 세트 사이트방문하세요. 데이터 세트 라이선스 정보는 Open Data Commons ODC PDDL(Public Domain Dedication and License) 리소스를 방문하세요.

열

이름	데이터 형식	고유한	값(샘플)	설명
address	string	140,612	“ ” 1 City Hall Plz Boston MA 02108	위치.
category	string	54	Street Cleaning Sanitation	서비스 요청의 이유입니다.
dataSubtype	string	1	311_All	"311_All"
dataType	string	1	안전	“안전”
dateTime	timestamp	1,529,075	2015-07-23 10:51:00 2015-07-23 10:47:00	서비스 요청의 시작 날짜 및 시간입니다.
latitude	double	1,622	42.3594 42.3603	위도 값입니다. 위선은 적도와 평행입니다.
longitude	double	1,806	-71.0587 -71.0583	경도 값입니다. 경선은 위선과 수직을 이루며 모두 양극을 통과합니다.
원본	string	7	Constituent Call Citizens Connect App	사례의 원본입니다.
status	문자열	2	Closed Open	사례 상태입니다.
하위 범주	string	209	Parking Enforcement Requests for Street Cleaning	서비스 요청의 유형입니다.

미리 보기를

ataType	dataSubtype	dateTime	category	하위 범주	status	address	latitude	longitude	source	extendedProperties
안전	311_All	4/27/2021 11:45:49 PM	Enforcement & Abandoned Vehicles	주차 단속	시작	51 Gardner St Allston MA 02134	42.3535	-71.1285	Citizens Connect App
안전	311_All	4/27/2021 11:43:43 PM	Sanitation	Missed Trash/Recycling/Yard Waste/Bulk Item	시작	4 Putnam Pl Roxbury MA 02119	42.3298	-71.0883	셀프 서비스
안전	311_All	4/27/2021 11:37:19 PM	Enforcement & Abandoned Vehicles	주차 단속	시작	36 Raven St Dorchester MA 02125	42.3177	-71.0546	Citizens Connect App
안전	311_All	4/27/2021 11:30:00 PM	Sanitation	Missed Trash/Recycling/Yard Waste/Bulk Item	시작	58 Bicknell St Dorchester MA 02121	42.2984	-71.0834	주민 호출
안전	311_All	4/27/2021 11:10:20 PM	Enforcement & Abandoned Vehicles	주차 단속	시작	2000 Commonwealth Ave Brighton MA 02135	42.3394	-71.1585	Citizens Connect App
안전	311_All	4/27/2021 11:06:00 PM	Noise Disturbance	Loud Parties/Music/People	시작	INTERSECTION of Lewis St & North St Boston MA	42.3594	-71.0587	주민 호출
안전	311_All	4/27/2021 11:05:00 PM	Enforcement & Abandoned Vehicles	주차 단속	시작	1 Nassau St Boston MA 02111	42.3486	-71.0629	주민 호출
안전	311_All	4/27/2021 11:00:55 PM	Code Enforcement	Poor Conditions of Property	시작	17 Mercer St South Boston MA 02127	42.3332	-71.0492	Citizens Connect App

데이터 액세스 - Azure Notebooks

azureml-opendatasets

# This is a package in preview.
from azureml.opendatasets import BostonSafety

from datetime import datetime
from dateutil import parser

end_date = parser.parse('2016-01-01')
start_date = parser.parse('2015-05-01')
safety = BostonSafety(start_date=start_date, end_date=end_date)
safety = safety.to_pandas_dataframe()

safety.info()

azure-storage

# Pip install packages
import os, sys

!{sys.executable} -m pip install azure-storage-blob
!{sys.executable} -m pip install pyarrow
!{sys.executable} -m pip install pandas

# Azure storage access info
azure_storage_account_name = "azureopendatastorage"
azure_storage_sas_token = r""
container_name = "citydatacontainer"
folder_name = "Safety/Release/city=Boston"

from azure.storage.blob import BlockBlobServicefrom azure.storage.blob import BlobServiceClient, BlobClient, ContainerClient

if azure_storage_account_name is None or azure_storage_sas_token is None:
    raise Exception(
        "Provide your specific name and key for your Azure Storage account--see the Prerequisites section earlier.")

print('Looking for the first parquet under the folder ' +
      folder_name + ' in container "' + container_name + '"...')
container_url = f"https://{azure_storage_account_name}.blob.core.windows.net/"
blob_service_client = BlobServiceClient(
    container_url, azure_storage_sas_token if azure_storage_sas_token else None)

container_client = blob_service_client.get_container_client(container_name)
blobs = container_client.list_blobs(folder_name)
sorted_blobs = sorted(list(blobs), key=lambda e: e.name, reverse=True)
targetBlobName = ''
for blob in sorted_blobs:
    if blob.name.startswith(folder_name) and blob.name.endswith('.parquet'):
        targetBlobName = blob.name
        break

print('Target blob to download: ' + targetBlobName)
_, filename = os.path.split(targetBlobName)
blob_client = container_client.get_blob_client(targetBlobName)
with open(filename, 'wb') as local_file:
    blob_client.download_blob().download_to_stream(local_file)

# Read the parquet file into Pandas data frame
import pandas as pd

print('Reading the parquet file into Pandas data frame')
df = pd.read_parquet(filename)

# you can add your filter at below
print('Loaded as a Pandas data frame: ')
df

pyspark

이 플랫폼/패키지 조합에는 샘플을 사용할 수 없습니다.

데이터 액세스 - Azure Databricks

azureml-opendatasets

# This is a package in preview.
# You need to pip install azureml-opendatasets in a Databricks cluster. https://learn.microsoft.com/azure/data-explorer/connect-from-databricks#install-the-python-library-on-your-azure-databricks-cluster
from azureml.opendatasets import BostonSafety

from datetime import datetime
from dateutil import parser

end_date = parser.parse('2016-01-01')
start_date = parser.parse('2015-05-01')
safety = BostonSafety(start_date=start_date, end_date=end_date)
safety = safety.to_spark_dataframe()

display(safety)

azure-storage

이 플랫폼/패키지 조합에는 샘플을 사용할 수 없습니다.

pyspark

# Azure storage access info
blob_account_name = "azureopendatastorage"
blob_container_name = "citydatacontainer"
blob_relative_path = "Safety/Release/city=Boston"
blob_sas_token = r""

# Allow SPARK to read from Blob remotely
wasbs_path = 'wasbs://%s@%s.blob.core.windows.net/%s' % (blob_container_name, blob_account_name, blob_relative_path)
spark.conf.set(
  'fs.azure.sas.%s.%s.blob.core.windows.net' % (blob_container_name, blob_account_name),
  blob_sas_token)
print('Remote blob path: ' + wasbs_path)

# SPARK read parquet, note that it won't load any data yet by now
df = spark.read.parquet(wasbs_path)
print('Register the DataFrame as a SQL temporary view: source')
df.createOrReplaceTempView('source')

# Display top 10 rows
print('Displaying top 10 rows: ')
display(spark.sql('SELECT * FROM source LIMIT 10'))

데이터 액세스 - Azure Synapse

azureml-opendatasets

from azureml.opendatasets import BostonSafety

from datetime import datetime
from dateutil import parser

end_date = parser.parse('2016-01-01')
start_date = parser.parse('2015-05-01')
safety = BostonSafety(start_date=start_date, end_date=end_date)
safety = safety.to_spark_dataframe()

display(safety)

azure-storage

이 플랫폼/패키지 조합에는 샘플을 사용할 수 없습니다.

pyspark

# Azure storage access info
blob_account_name = "azureopendatastorage"
blob_container_name = "citydatacontainer"
blob_relative_path = "Safety/Release/city=Boston"
blob_sas_token = r""

# Allow SPARK to read from Blob remotely
wasbs_path = 'wasbs://%s@%s.blob.core.windows.net/%s' % (blob_container_name, blob_account_name, blob_relative_path)
spark.conf.set(
  'fs.azure.sas.%s.%s.blob.core.windows.net' % (blob_container_name, blob_account_name),
  blob_sas_token)
print('Remote blob path: ' + wasbs_path)

# SPARK read parquet, note that it won't load any data yet by now
df = spark.read.parquet(wasbs_path)
print('Register the DataFrame as a SQL temporary view: source')
df.createOrReplaceTempView('source')

# Display top 10 rows
print('Displaying top 10 rows: ')
display(spark.sql('SELECT * FROM source LIMIT 10'))

예제

• GitHub에서 사용할 수 있는 City Safety Analytics 리소스를 방문하세요.

다음 단계

Open Datasets 카탈로그에서 나머지 데이터 세트를 봅니다.